推荐 :在数据科学中需要多少数学技能?
本文为大家介绍了在数据科学和机器学习中所需要的基本数学技能,并且分类给出了相应的主题建议。
Jeswin Thomas on Unsplash
尽管已经有许多出色的计算工具可供数据科学家执行其工作,数学技能在数据科学和机器学习中仍然是必不可少的,因为这些工具推荐通常仅仅会像是“黑匣子”,而如果没有理论基础,您将无法回答核心的分析性问题。
I.引言
如果您渴望成为数据科学家,那么您无疑会想到以下问题:
我几乎没有数学背景,可以成为一个数据科学家吗?
数据科学中的哪些基本数学技能很重要?
有许多好的软件包可用于构建预测模型或数 :据可视化。一些最常见的用于描述性和预测性分析的软件包包括:
Ggplot2 Matplotlib Seaborn Scikit-learn Caret TensorFlow PyTorch Keras
借助这些软件包,任何人都可以构建模型或进行数据可视化。但是,扎实的数学背景在数知识对于模型微调(fine-tuning)以生成具有最佳性能的可靠模型至关重要。建立模型是一回事,但解释模型并得出可用于数据驱动决策的有意义的结论,是另一回事。重要的是,在使用这些软件包之前,您必须了解每个软件包的数学基础,这样才能避免将这些软件包仅仅据科用作“黑匣子”工具。
II.案例:建立多元回归模型
假设我们现在将要建立一个多元回归模型。在此之前,我们需要问自己以下问题:
我的数据集有多大? 我的特征变量和目标变量是什么? 哪些预测特征与目标变量最相关? 哪些特征很重要? 我应该进行特征缩放吗? 我的数据集应学中如何划分为训练集和测试集? 什么是主成分分析(PCA)? 我应该使用PCA删除冗余特征吗? 如何评估我的模型?我应该使用R2_score,平均平方误差(MSE)还是平均绝对误差(MAE)? 如何提高模型的预测能力? 我应该使用正则化回归模型吗? 哪些是回归系数?
哪需要些是截距?
我应该使用非参数回归模型,例如K近邻回归还是支持向量回归(SVR)?
我的模型中有哪些超参数,如何对其进行微调以获得性能最佳的模型?
没有良好的数学背景,您将无法解决上面提出的问题。最重要的是,在数据科学和机器学习中,数学技能与编程技能同等重要多少。因此,想成为数据科学家,您必须花时间研究数据科学和机器学习的理论和数学基础。您能否构建可应用于实际问题的可靠且有效的模型,取决于您的数学技能。
现在,让我们讨论数据科学和机器学习所需的一些基本数学技能。
Ⅲ. 数据科学和机器学习的基本数学技能
1、 统计学数学和概率论
统计学和概率论可以用于特征的可视化、数据预处理、特征变换、数据填补、降维、特征工程、模型评估等环节。以下是您需要熟悉的主题:
均值,中位数,众数,标准差/方差,相关系数,协方差矩阵; 概率分布(二项分布、泊松分布、正态分布),p值,贝叶斯定理(精度、召回技能率、阳性预测值、阴性预测值、混淆矩阵、ROC曲线); 中心极限定理,R2_score,MSE(均方误差),A / B测试,蒙特卡洛模拟…
2、 多变量微积分
大多数机器学习模型都是使用具有多个特征或预测变量的数据集构建的。因此,熟悉多变量演算对于建立机器学习模型非常推荐重要。以下是您需要熟悉的主题:
多变量函数; 导数和梯度; 阶跃函数,Sigmoid函数,Logit函数,ReLU函数(整流线性单位函数,Rectified Linear Unit); 成本函数; 函数绘图; 函数的最小值和最大值…
3、 线性代数
线性代数是机器学习中最重要的 :数学技能。当数据集被表示为矩阵,线性代数则可用于数据预处理、数据转换、降维和模型评估。以下是您需要熟悉的主题:
向量; 向量的范数; 矩阵,转置矩阵,矩阵的逆,矩阵的行列式,矩阵的迹; 点积,特征值,特征向量…
4、 优化方法
大多数机器学习算法通过最小化目标函数来执行预在数测建模,因而机器学习必须应用于测试数据的权重才能获得预测标签。以下是您需要熟悉的主题:
成本函数/目标函数; 似然函数; 损失函数; 梯度下降算法及其变体(例如,随机梯度下降算法)… IV.结论
总而言之,我们讨论了数据科学和机器学习所需的基本数学和理论技能,已经有许多据科免费在线课程教授这些必要的数学技能。想成为数据科学家,请务必牢记,理论基础对于构建高效且可靠的模型至关重要。因此,您应该投入足够的时间来研究每种机器学习算法背后的数学理论。
译者简介:刘思婧,清华大学新闻系研一在读,数据传播方向。文理兼爱,有点小情怀学中的数据爱好者。希望结识更多不同专业、不同专长的伙伴,拓宽眼界、优化思维、日日自新。
(责任编辑:创始人介绍)
-
Hello,大家早上好,又是元气满满的一天,先来浏览新鲜的早报吧~ 【T1 史无前例 S 赛三连冠】 T1 在《英雄联盟》S15 全球总决赛冠亚军决赛中以 3-2 的比分力克 KT,拿下这场“通讯社大...[详细]
-
云梦级6月10日云梦级消息,字节跳动旗下AI应用豆包的付费模式落地进入倒计时。目前,豆包已面向部分用户启动了“专业版”付费订阅的灰度测试,有用户在使用专家模式时收到了相关订阅提醒。 据36氪报道,此次...[详细]
-
云梦级4月14日云梦级消息,据竞核报道,4月12日,米哈游联合创始人、总裁刘伟(大伟哥)回到母校上海交通大学,与人工智能学院的学子们进行了不少交流。 这是紧接着上周,米哈游三位创始人捐资助力上海交大“...[详细]
-
OpenAI CEO 预测:2030 年前AI可能接管 30%-40% 工作
在最近的一次采访中,OpenAI 的首席执行官萨姆・奥尔特曼分享了关于未来人工智能的见解。他预测,通用人工智能(AGI)将在2030年前到来,并将会接管人类经济社会中30% 至40% 的工作。这一预测...[详细]
-
一个微笑,跨越73年:Deepfake「复活」以色列立国之战老照片
利用Deepfake让老照片动起来,以此缅怀先烈,是一件好事,但这项技术也带来了篡改历史,甚至扭曲现实的风险。实际上,过去几年来Deepfake引发的赞叹,总是伴随着争议和担忧。 为了庆祝 2021...[详细]
-
标签: CapCut 剪映 DreaminaSeedance2.0 字节跳动
云梦级3月27日云梦级消息,字节跳动旗下 CapCut(剪映)3 月 26 日在 X 平台宣布推出 CapCut Video Studio,无需时间轴即可创建视频,支持 Dreamina Seedan...[详细]
-
题目 :放松一下,算一道简单的题目。 程序分析 : 使用range() 函数创建一个整数列表在 for 循环中。 注:在Python3中 range() 函数返回的是一个可迭代对象(类型是对象),而不...[详细]
-
OpenAI 修复 ChatGPT 漏洞,防止用户 Gmail 数据被盗取
科技媒体 Android Headline 报道称,网络安全公司 Radware 发现了 ChatGPT 的 “深度研究” 功能存在严重漏洞,可能被黑客利用来窃取用户的 Gmail 邮件数据。该漏洞允...[详细]
-
描述 Python min() 方法返回字符串中最小的字母。 语法 以下是 min() 方法语法: min(str) 参数 str -- 字符串。 返回值 返回字符串中最小的字母。 实例 以下实例展示...[详细]
-
云梦级11月25日云梦级消息,据蓝鲸科技报道,工信部已于 10 月及 11 月多次组织召开《移动电源安全技术规范》征求意见稿研讨会。《移动电源安全技术规范》(征求意见稿)(以下简称“新规”)显示,与旧...[详细]
- https://www.wheels24.gr/?action=CHECK&s=百度快排【tg:seogoogle987】,TWj
- https://www.rookwinkel.nl/catalogsearch/result/index/?q=百度快排【tg:seogoogle987】,NLp
- https://www.resopal.de/catalogsearch/result/?action=SEARCH&q=百度快排【tg:seogoogle987】,3b3
- https://www.nctsn.org/search?cat=191&query=百度快排【tg:seogoogle987】,F9Y
- https://www.rockngem.com/?action=CHECK&s=百度快排【tg:seogoogle987】,oF0
- https://www.teacherspayteachers.com/Browse/Search:百度快排【tg:seogoogle987】,ony
- https://www.dba.dk/soeg/?soeg=百度快排【tg:seogoogle987】VbW
- https://store.line.me/search/sticker/ja?q=百度快排【tg:seogoogle987】Qkw
- https://www.mdbg.net/chinese/dictionary?page=worddict&wdrst=0&wdqb=百度快排【tg:seogoogle987】,gtl
- https://www.lenovo.com/gb/en/search?action=SEARCH&text=百度快排【tg:seogoogle987】,rPS

谷歌Gemini渐近ChatGPT,谷歌目前有4款AI应用跻身Top50
标签: 龙迅半导体 港交所 视频桥接芯片 专精特新
标签: 手机 标签
Google NotebookLM重磅升级:80种语言全面解锁,全球用户学习体验迎来革命性突破
标签: 小米集团 星纪魅族 曾洋 公关媒介
