手写 Transformer
纯手工打造的 Transformer 模型
机器学习 10:激活函数大全
虽称为激活函数大全,但也不敢太过自满,如有遗漏与错误,还请指正
机器学习 09:Gram 矩阵
n 维欧式空间中任意 k 个向量之间两两内积所组成的矩阵,称为这 k 个向量的 Gram 矩阵。
机器学习 08:PCA
主成分分析的主要思想是将 n 维特征映射到 k 维上,以实现降维的目的
机器学习 07:特征分解和奇异值分解
奇异值分解是在机器学习领域广泛应用的算法,是很多机器学习算法的基石。本文就SVD的原理做一个总结,并讨论在PCA算法中的应用。
错题本
暂且开辟一块文章记录遇到过的 error 和解决方法。杂七杂八的错误先放到一篇文章里,随着之后的积累再进行分类整理。
机器学习 06:SMO 算法
SMO 是由 Platt 在 1998 年提出的、针对软间隔最大化 SVM 对偶问题求解的一个算法。