推荐 :在数据科学中需要多少数学技能?
本文为大家介绍了在数据科学和机器学习中所需要的基本数学技能,并且分类给出了相应的主题建议。
Jeswin Thomas on Unsplash
尽管已经有许多出色的计算工具可供数据科学家执行其工作,数学技能在数据科学和机器学习中仍然是必不可少的,因为这些工具推荐通常仅仅会像是“黑匣子”,而如果没有理论基础,您将无法回答核心的分析性问题。
I.引言
如果您渴望成为数据科学家,那么您无疑会想到以下问题:
我几乎没有数学背景,可以成为一个数据科学家吗?
数据科学中的哪些基本数学技能很重要?
有许多好的软件包可用于构建预测模型 :或数据可视化。一些最常见的用于描述性和预测性分析的软件包包括:
Ggplot2 Matplotlib Seaborn Scikit-learn Caret TensorFlow PyTorch Keras
借助这些软件包,任何人都可以构建模型或进行数据可视化。但是,扎实的数在数学背景知识对于模型微调(fine-tuning)以生成具有最佳性能的可靠模型至关重要。建立模型是一回事,但解释模型并得出可用于数据驱动决策的有意义的结论,是另一回事。重要的是,在使用这些软件包之前,您必须了解每个软件包的数学基础,这样才能避免将这些据科软件包仅仅用作“黑匣子”工具。
II.案例:建立多元回归模型
假设我们现在将要建立一个多元回归模型。在此之前,我们需要问自己以下问题:
我的数据集有多大? 我的特征变量和目标变量是什么? 哪些预测特征与目标变量最相关? 哪些特征很重要? 我应该进行特征缩放吗? 我的数据集学中应如何划分为训练集和测试集? 什么是主成分分析(PCA)? 我应该使用PCA删除冗余特征吗? 如何评估我的模型?我应该使用R2_score,平均平方误差(MSE)还是平均绝对误差(MAE)? 如何提高模型的预测能力? 我应该使用正则化回归模型吗? 哪些是回归系数?
哪些需要是截距?
我应该使用非参数回归模型,例如K近邻回归还是支持向量回归(SVR)?
我的模型中有哪些超参数,如何对其进行微调以获得性能最佳的模型?
没有良好的数学背景,您将无法解决上面提出的问题。最重要的是,在数据科学和机器学习中,数学技能与编程技能同等重要。因此,想多少成为数据科学家,您必须花时间研究数据科学和机器学习的理论和数学基础。您能否构建可应用于实际问题的可靠且有效的模型,取决于您的数学技能。
现在,让我们讨论数据科学和机器学习所需的一些基本数学技能。
Ⅲ. 数据科学和机器学习的基本数学技能
1、 统计学和概率论
统计学和数学概率论可以用于特征的可视化、数据预处理、特征变换、数据填补、降维、特征工程、模型评估等环节。以下是您需要熟悉的主题:
均值,中位数,众数,标准差/方差,相关系数,协方差矩阵; 概率分布(二项分布、泊松分布、正态分布),p值,贝叶斯定理(精度、召回率、阳性技能预测值、阴性预测值、混淆矩阵、ROC曲线); 中心极限定理,R2_score,MSE(均方误差),A / B测试,蒙特卡洛模拟…
2、 多变量微积分
大多数机器学习模型都是使用具有多个特征或预测变量的数据集构建的。因此,熟悉多变量演算对于建立机器学习模型非常重要。以下推荐是您需要熟悉的主题:
多变量函数; 导数和梯度; 阶跃函数,Sigmoid函数,Logit函数,ReLU函数(整流线性单位函数,Rectified Linear Unit); 成本函数; 函数绘图; 函数的最小值和最大值…
3、 线性代数
线性代数是机器学习中最重要的数学技能。当 :数据集被表示为矩阵,线性代数则可用于数据预处理、数据转换、降维和模型评估。以下是您需要熟悉的主题:
向量; 向量的范数; 矩阵,转置矩阵,矩阵的逆,矩阵的行列式,矩阵的迹; 点积,特征值,特征向量…
4、 优化方法
大多数机器学习算法通过最小化目标函数来执行预测建在数模,因而机器学习必须应用于测试数据的权重才能获得预测标签。以下是您需要熟悉的主题:
成本函数/目标函数; 似然函数; 损失函数; 梯度下降算法及其变体(例如,随机梯度下降算法)… IV.结论
总而言之,我们讨论了数据科学和机器学习所需的基本数学和理论技能,已经有许据科多免费在线课程教授这些必要的数学技能。想成为数据科学家,请务必牢记,理论基础对于构建高效且可靠的模型至关重要。因此,您应该投入足够的时间来研究每种机器学习算法背后的数学理论。
译者简介:刘思婧,清华大学新闻系研一在读,数据传播方向。文理兼爱,有点小情怀的数学中据爱好者。希望结识更多不同专业、不同专长的伙伴,拓宽眼界、优化思维、日日自新。
- ·苹果和Epic诉讼大战下月开审:库克将出庭作证
- ·阿里云海外市场五年增长超20倍 发布全新国际伙伴政策
- ·标签: Intuit OpenAI TurboTax QuickBooks
- ·云安全日报211027:IBM虚拟化管理解决方案发现网络钓鱼攻击漏洞,需要尽快升级
- ·标签: 标签 Grok4.5 SpaceX 特斯拉 Opus
- ·聊聊数仓建模之 ID Mapping
- ·英特尔侵犯芯片专利被判赔偿22亿美元 史上罕见罚单!
- ·谷歌地图推出新功能:可室内导航 可让司机选择环保路线
- ·微软的新玩具:LinkedIn推自由职业平台瞄准Upwork
- ·标签: Block 杰克·多西 Cash App Square
- ·2021年越来越多企业将采用AI功能
- ·标签: 王暖暖 无忧传媒 泰国孕妇坠崖案 MCN霸凌
- ·标签: 卧安机器人 6600 财报
- ·标签: 地质穹顶 Pemba G1 钦博拉索火山
- ·Facebook研发争议黑科技:不解密也能“偷窥”用户加密聊天对话
- ·云安全日报220222: 红帽Ruby脚本语言发现任意代码执行漏洞,需要尽快升级
- ·2030年,AI将取代40%人类工作?OpenAI CEO 预言未来
- ·标签: 臻宝科技 半导体零部件 科创板上市 硅零部件
- ·聚焦数智技术助力乡村振兴 京东云为乡村振兴注入“数智”力量
- ·标签: 抖音生活服务 非遗+市集 新中式乐园 Z世代
- ·标签: 日本叮叮 广州威葵 蚊香液 消费欺诈
- ·Android 用户福音:OpenAI Sora 登陆 Google Play,已开放北美预注册
- ·AI训练数据合法性遭挑战:苹果被指控利用盗版书籍开发Apple Intelligence
- ·AMD宣布拟以19亿美元收购云计算初创公司Pensando
- ·Facebook新AI模型SEER实现自监督学习,LeCun大赞最有前途
- ·标签: Meta Moltbook OpenClaw AI智能体
- ·https://www.wmfe.org/?s=必应蜘蛛池租用【tg:seogoogle987】,1qS
- ·https://www.realsporting.com/buscador?buscar=必应蜘蛛池租用【tg:seogoogle987】,3fC
- ·https://www.smics.com/tc/site/search?token=必应蜘蛛池租用【tg:seogoogle987】,qXL
- ·https://www.sic-info.org/vi/?s=必应蜘蛛池租用【tg:seogoogle987】,xoN
- ·https://www.supersauna.de/catalogsearch/result/?q=必应蜘蛛池租用【tg:seogoogle987】,qCm
- ·https://www.remit.co.jp/pt/?action=CHECK&s=必应蜘蛛池租用【tg:seogoogle987】,WjD
- ·https://www.swanagerailway.co.uk/search?q=必应蜘蛛池租用【tg:seogoogle987】,SFZ
- ·https://www.rhymezone.com/r/rhyme.cgi?typeofrhyme=oldrel&loc=nojs&Word=必应蜘蛛池租用【tg:seogoogle987】,e4q
- ·https://www.unclefossil.com/search/必应蜘蛛池租用【tg:seogoogle987】,fgk
- ·https://www.teamlab.art/fr/?submit=必应蜘蛛池租用【tg:seogoogle987】,56x
- ·Meta 与 UCSD 推出 DeepConf:AI 推理准确率达 99.9%,计算成本降低 85%
- ·云计算核心技术Docker教程:Docker启用调试
- ·三星电子赶超英特尔,成全球最大芯片厂商
- ·标签: 小鹏汽车 小鹏GX 台积电 胡润中国500强
- ·云采用的网络安全方法:复杂性和收敛性
- ·英国制定新监管法规 重点监管谷歌和Facebook等巨头
- ·标签: B站 游戏业务 广告收入 月均付费用户
- ·云计算开发:Python3-isalnum()方法详解
- ·谷歌 AI 编码应用 Opal 登陆全球15国:全民“零代码”开发时代开启!
- ·英国:Facebook等科技巨头若不删非法内容将面临数十亿英镑罚款
