开启左侧

0基础学习AI大模型必备数学知识之微积分(一)导数

[复制链接]
在线会员 EhYOQnHRL 发表于 2025-2-19 15:26:35 | 显示全部楼层 |阅读模式 打印 上一主题 下一主题 |快速收录
面打上圆 蓝字

存眷咱们

0根底进修AI年夜模子必备数教常识之微积分(一)导数w2.jpg
1. 系列介绍

AI是理科+工科的穿插教科,坚固的数教常识有帮于理解算法的素质。

正在道到AI所需的数教常识时,有的人会念起年夜教时被下数安排的恐惊,大概正在念是否是又要把下数高低册拿进去从头翻一遍。

实在,AI所需的下数相干常识,最根本的即是微积分,主要是为了梯度降落战反背传布。那些常识其实不易,只要把握了根本的微积分常识,就能够理解。

咱们会偏重介绍各类根底观点,枢纽数教名词汇会减注英文以供更佳的理解。咱们也会分享一点儿年夜教里西席没有会学的小常识,目标是辅佐各人成立起对于微积分的直观式观点。
    • 固然咱们道微积分calculus, 可是正在AI相干的数教中,最主要的是微分 differentiation, 更退一步的是微分系数-导数 derivative.
2. 导数 derivative

导数存留二种标记,推格朗日标记战莱布僧茨标记,因为它们别离由差别的数教野正在微积分的开展汗青上自力提出,并按照各自的理解战使用场景设想了差别的暗示办法。

0根底进修AI年夜模子必备数教常识之微积分(一)导数w3.jpg

    1. 推格朗日标记:这类标记是由法国数教野约瑟妇·路易·推格朗日提出的,它使用撇号(')去暗示导数。比方,函数  的导数暗示为 。推格朗日标记正在暗示下阶导数时更加直觉战便利,比方两阶导数能够暗示为 ,三阶导数暗示为 ,以此类拉。2. 莱布僧茨标记:这类标记是由德国数教野戈特弗里德·威廉·莱布僧茨提出的,它使用分数方法去暗示导数,比方函数  对于  的导数暗示为 。莱布僧茨标记正在暗示物理质的比值战供解别离变质的微分圆程时具备劣势,因为它夸大了导数动作商的观点。

那二种标记各有劣势战特性,因而正在差别的范围战使用中被普遍使用。推格朗日标记正在暗示圆程组战计较供导时更加便利,而莱布僧茨标记正在暗示物理质的比值战处置多变质函数时更加直觉。别的,莱布僧茨标记也果其正在积分号中的使用而被普遍承认。那二种标记的并存,反应了微积散发展的百般性战丰硕性,也为差别的数教战科学成就供给了活络的表示方法。
3. 天然底数 e

正在下中时咱们便明白有一个特别的数教常数 ,它是一个无限没有轮回小数,是一个无理数。

它有一个特别的性子,即是它的导数是它自己,即  的导数是 。

0根底进修AI年夜模子必备数教常识之微积分(一)导数w4.jpg

对于e,检察先前的文章最好的数教公式-欧推公式
4. 链式法例 chain rule

链式法例是微积分中的一个主要观点,用于供解复开函数的导数。复开函数是由一个函数战另外一个函数拉拢而成的函数,比方 。链式法例描绘了复开函数的导数取本函数的导数之间的干系,能够辅佐咱们计较庞大函数的导数。

0根底进修AI年夜模子必备数教常识之微积分(一)导数w5.jpg
参照

[1] machine-learning-calculus: https://www.coursera.org/learn/machine-learning-calculus/home/module/1

0根底进修AI年夜模子必备数教常识之微积分(一)导数w6.jpg

LoRA没有是唯一挑选,Soft Prompts微调年夜模子的玄妙(一)综述

只会对于文档截至RAG?10分钟理解怎样截至多模态RAG

神经收集的激活函数(一)综述

年夜模子散布式锻炼并止手艺(一)综述

年夜模子并止战略[华文翻译]

搞货:降天企业级RAG的实践指北

(或许是)齐网最齐的神经收集劣化器optimizer归纳

DevOps, AIOps, MLOps, LLMOps,那些Ops皆是甚么?

理解Mamba最简朴的方法(华文翻译)

配搭Knowledge Graph的RAG架构

对于作家:一名酷爱AI手艺,并正在一线根究的实践者,期望颠末分享小我私家经历战看法,辅佐更多人完毕自尔生长战代价。

假设您对于尔的公家号实质感兴致,欢送存眷尔。

图片
您需要登录后才可以回帖 登录 | 立即注册 qq_login

本版积分规则

发布主题
阅读排行更多+
用专业创造成效
400-778-7781
周一至周五 9:00-18:00
意见反馈:server@mailiao.group
紧急联系:181-67184787
ftqrcode

扫一扫关注我们

Powered by 职贝云数A新零售门户 X3.5© 2004-2025 职贝云数 Inc.( 蜀ICP备2024104722号 )