https://github.com/shouxieai/algorithm-cpp
 http://aipj.aijdjy.com/course/13/task/266/show#
 https://www.yuque.com/books/share/0729cafa-4751-40e5-9f5d-bb617c0e9708?# 《C++》
 💻 AI算法视角下的c++
视频问手写ai vx: shouxie_ai
[共11节课,每节课1~1.5hour 99¥]
algoc++-1.课程简介.pptx
algoc++-2.C++的世界观.pptx
algoc++-3.nn篇1,求解根号2.pptx
algoc++-4.nn篇2,线性回归.pptx
algoc++-5.nn篇3,逻辑回归.pptx
algoc++-6.nn篇,矩阵、以及矩阵的线性回归理解.pptx
之后的5节课都是手写逐行以cpp的形式复现MLP多层感知机与反向传播算法(BP)以及工程细节问题的讨论
 

 





 
3D渲染
 
梯度下降法

 


 

 

 
 


 
牛顿法



 



牛顿法2

 

 
 
 
线性回归

 


 





 

 



 


 






 
 
 



 
C++的世界观



 
 

 
 
堆内存 定义
 栈内存 new

 

我要记住上次执行的状态


 
 
预处理将宏展开,处理掉
转换为汇编语言
 
 最后转换为机器码

 


 

 





 


 
 



 
 
 

 
线性回归




 
 梯度消失


 
 


 房子面积 距离地铁远近 幸福不幸福

 
 

 检测偏导求得对不对
 

C++带颜色可点击跳转
 
 多分类多模型预测

 
矩阵乘法和求导







通用矩阵乘法
 



 
 
多元线性回归




多元逻辑回归

 
 

 
 
向量模长

最小二乘法


 
岭回归

 
在对角线上加一个很小的数,使其可逆
 

 使其分母不为0
 
多元牛顿法

 
 

 
高斯牛顿法

 
 
 




认识Mnist数据集

 

大端转小端
 


矩阵求导部分推导



 
BP(Back Propagation)反向传播

 
 
 

 

 



 
 
 
 
 
 
动量SGD

 
 前向过程
 反向过程
 
优化器
 
存储与推理
 



 rule激活的换成凯明初始化是最合适的
代码敲一遍
http://aipj.aijdjy.com/course/13/task/278/show#
 http://aipj.aijdjy.com/course/13/task/281/show
 http://aipj.aijdjy.com/course/13/task/284/show
 http://aipj.aijdjy.com/course/13/task/315/show
 







 

 
 
 
 
https://www.yuque.com/moonlight-pzxf1/wymvv2/mgqse4










