总结一些自己容易遗忘但挺重要的算法。 手撕经典算法 快速排序 核心代码： void qsort(int ll, int rr) { if(ll>=rr) return; int x=a[ll+rr>>1], l=ll-1, r=rr+1; while(l<r) { do l++; while(a[l]<x); do r-…

决策树一般的三种算法：ID3，C4.5，CART。 ID3 sklearn手搓 # from sklearn.metric import accuracy_score import numpy as np import pandas as pd from sklearn.datasets import load_iris datas=load_ir…

参考链接 https://hwcoder.top/Manual-Coding-1 单头注意力机制 Q, K, V的理解。 假设Q由如下矩阵组成（不考虑batchsize）：Q[0]：词1：[dim1, dim2, dim3...] Q[1]：词2：[dim1, dim2, dim3...] 同理K： K[0]：词1：[dim1, dim2, dim…

这次的两个景点相比上一次的欢乐田园和虹桥公园差远了。市中心还是太吵太乱了。 对自己说：等实习后买个相机吧！手机拍质量还是不太好。 园博园 找到了红尘客栈的味道 香蜜公园

光明欢乐田园 在半个月前就应该来的，现在已经没有金黄的油菜花田野了。 远离城市的喧嚣。十分惬意，适合放松的好地方。 还能看到高铁！ 田园外围小道。十分适合散步，空气清晰。 虹桥公园 虹桥上看见深圳某外国语小学的很多班级小朋友，似乎是学校团建，其中还有跟我打招呼的。羡慕童年时光！ 整个虹桥很长，3公里左右。上到最顶上已经太阳落山了，最后坐观光车回来的…

仙湖植物园 能看到梧桐山，都在同一个地方 还有弘法寺（很多烧香的，被熏得不行）

分类问题 Logistic Regression：其实是classfication问题，不是Regression问题。 过度拟合 避免过度拟合，可以在代价函数中给予惩罚项。参数值一定要选合适的，否则可能依然过度拟合或者基本没拟合bias较大。

编程章节，代码和作业在jupyter上

解代价函数有两种方法：梯度下降法和正规方程解法。各有 特点 两者的特点 正规方程在矩阵不可逆的情况：变量间线性相关

jupyter notebook有求逆