leetcode刷题复健，当前阶段主攻python
也许会有一些手撕机器学习深度学习大模型的相关算法
加油吧
Transformer架构, 注意力机制, 自注意力, 多头注意力, 前馈神经网络, 层归一化, 残差连接, 位置编码, 词嵌入, 子词切分, BPE算法, 词表, 上下文窗口, 序列长度, 掩码语言模型, 自回归生成, 下一个词预测, 预训练, 微调, 指令微调, 对齐, 人类反馈强化学习, 奖励模型, 近端策略优化, 模型权重, 参数规模, 浮点运算, 混合精度训练, 分布式训练, 数据并行, 模型并行, 流水线并行, 零冗余优化器, 激活检查点, 梯度累积, 损失函数, 交叉熵损失, 对数似然, 困惑度, 评估基准, 常识推理, 数学推理, 代码生成, 文本分类, 命名实体识别, 情感分析, 文本摘要, 机器翻译, 问答系统, 对话系统, 思维链, 零样本学习, 少样本学习, 上下文学习, 提示工程, 系统提示, 少样本示例, 提示模板, 思维链提示, 角色扮演提示, 温度参数, Top-p采样, Top-k采样, 重复惩罚, 频率惩罚, 存在惩罚, 停止序列, 最大生成长度, 流式输出, 生成延迟, 吞吐量, 每秒令牌数, 硬件利用率, 推理成本, 训练成本, 碳足迹, 能耗, 模型蒸馏, 知识蒸馏, 模型剪枝, 量化, INT8量化, INT4量化, 权重共享, 低秩适应, 适配器, 前缀调优, 提示调优, 参数高效微调, 多模态, 视觉语言模型, 图像理解, 图像生成, 文生图, 文生视频, 语音合成, 语音识别, 多轮对话, 长期记忆, 工作记忆, 外部知识库, 检索增强生成, 向量数据库, 嵌入模型, 相似度搜索, 召回率, 精确率, 幻觉, 事实性错误, 知识截止日期, 数据污染, 训练数据, 测试数据, 验证集, 过拟合, 欠拟合, 泛化能力, 分布外泛化, 鲁棒性, 对抗性攻击, 提示注入, 越狱攻击, 系统提示泄露, 角色剥离, 安全层, 内容过滤, 红队测试, 可解释性, 特征重要性, 注意力可视化, 概念向量, 模型编辑, 模型缝合, 涌现能力, 缩放定律, 计算最优, 数据缩放, 模型缩放, Chinchilla定律, 摩尔定律, AI冬天, AI春天, 开源模型, 闭源模型, 模型许可证, 研究许可, 商业用途, API调用, 每秒请求数, 速率限制, 计费令牌, 输入令牌, 输出令牌, 总令牌数, 函数调用, 工具使用, 智能体, 规划, 反思, 执行, 多智能体协作, 模拟环境, 具身智能, 世界模型, 自我改进, 递归自我提升, 超级对齐, 失控风险, 价值锁定, 代理人问题, 奥卡姆剃刀, 所罗门诺夫归纳, 通用人工智能, 狭义人工智能, 人工智能效应, 图灵测试, 中文房间, 本体论, 认识论, 符号接地, 框架问题, 常识问题, 组合泛化, 系统性, 因果推理, 反事实推理, 贝叶斯推理, 概率编程, 深度学习, 符号人工智能, 联结主义, 行为主义, 表征学习, 自监督学习, 无监督学习, 半监督学习, 监督学习, 强化学习, 模仿学习, 逆强化学习, 元学习, 终身学习, 联邦学习, 差分隐私, 同态加密, 安全多方计算, 可信执行环境, 模型窃取, 成员推断攻击, 属性推断攻击, 模型提取, 模型逆向工程, 偏见, 公平性, 代表性伤害, 分配伤害, 质量服务伤害, 刻板印象强化, 去偏见技术, 公平性约束, 可审计性, 透明度报告, 数据谱系, 模型卡片, 事实表, 环境影响声明, 伦理审查委员会, 负责任的人工智能, 以人为本的人工智能, 对齐税, 能力税, 效率边界, Pareto前沿, 性能-安全权衡, 效用函数, 价值函数, 目标函数, 损失景观, 梯度下降, 随机梯度下降, Adam优化器, 学习率, 学习率调度器, 热身步数, 权重衰减, 梯度裁剪, 早停法, 批量大小, 训练周期, 训练步数, 检查点, 模型保存, 模型加载, 推理服务, 模型部署, 边缘计算, 云服务, 无服务器计算, 容器化, 模型版本控制, A/B测试, 金丝雀发布, 影子模式, 生产监控, 性能指标, 业务指标, 用户反馈循环, 数据飞轮, 持续学习, 概念漂移, 灾难性遗忘, 弹性权重巩固, 渐进式神经网络, 模块化增长, 稀疏专家混合模型, 条件计算, 动态路由, 神经元, 激活函数, ReLU, GELU, SiLU, Softmax, LayerNorm, RMSNorm, 初始化方法, Xavier初始化, He初始化, 优化器状态, 动量, 二阶优化, 黑盒优化, 超参数调优, 网格搜索, 随机搜索, 贝叶斯优化, 神经架构搜索, 进化算法, 遗传算法, 强化学习搜索, 一次性架构搜索, 可微分架构搜索, 硬件感知搜索, 效率感知搜索, 绿色人工智能, 可持续人工智能, 效率指标, 能源效率, 碳效率, 硬件加速器, GPU, TPU, NPU, IPU, 光计算, 量子计算, 神经形态计算, 内存计算, 模拟计算, 存算一体, 三维堆叠, 硅光子学, 碳纳米管, 二维材料, 生物启发计算, 神经符号人工智能, 统计学习理论, 计算学习理论, 算法信息论, 科尔莫哥洛夫复杂度, Solomonoff归纳, 最低描述长度, 贝叶斯 Occam剃刀, 没有免费午餐定理, 偏差-方差权衡, 经验风险最小化, 结构风险最小化, 正则化, L1正则化, L2正则化, Dropout, 标签平滑, 知识图谱, 语义网络, 本体, Taxonomy, 实体链接, 关系抽取, 事件抽取, 信息抽取, 文本蕴含, 语义角色标注, 依存句法分析, 成分句法分析, 语篇分析, 语用学, 指代消解, 共指消解, 语篇连贯, 修辞结构理论, 论证挖掘, 立场检测, 讽刺检测, 谣言检测, 虚假信息检测, 深度伪造检测, 作者归属, 风格迁移, 文本风格, 可读性, 文本简化, 文本复述, 文本纠错, 语法错误纠正, 拼写检查, 自动语音识别, 语音合成, 语音转换, 语音克隆, 声纹识别, 语音情感识别, 语音分离, 鸡尾酒会问题, 音频事件检测, 音乐信息检索, 音乐生成, 音乐转录, 音频超分辨率, 音频压缩, 神经编解码器, 端到端学习, 表示学习, 度量学习, 对比学习, SimCLR, BYOL, SwAV, Barlow Twins, VICReg, 自蒸馏, 师生模型, 知识迁移, 课程学习, 主动学习, 不确定性估计, 蒙特卡洛 Dropout, 集成方法, 深度集成, 贝叶斯神经网络, 变分推断, 马尔可夫链蒙特卡洛, 哈密顿蒙特卡洛, 随机变分推断, 归一化流, 扩散模型, 去噪扩散概率模型, 基于分数的生成模型, 生成对抗网络, 变分自编码器, 流模型, 自回归模型, 基于能量的模型, 玻尔兹曼机, 受限玻尔兹曼机, 深度信念网络, Hopfield网络, 联想记忆, 稀疏编码, 独立成分分析, 主成分分析, t-分布邻域嵌入, 均匀流形近似和投影, 自动编码器, 去噪自动编码器, 稀疏自动编码器, 收缩自动编码器, Transformer-XL, XLNet, Performer, Longformer, BigBird, Reformer, Linformer, Sparse Transformer, 轴向注意力, 局部注意力, 滑动窗口注意力, 全局注意力, 跨注意力, 条件生成, 受控生成, 属性控制, 内容控制, 风格控制, 长度控制, 多样性控制, 重复控制, 一致性控制, 事实性控制, 安全性控制, 无害性控制, 有益性控制, 诚实性控制, 模型协作, 模型融合, 模型集成, 投票法, 加权平均, 堆叠泛化, 级联模型, 管道模型, 编排模式, 路由模式, 门控网络, 条件计算, 专家混合, 稀疏门控, 负载均衡, 辅助损失, 多任务学习, 元优化, 超网络, 权重生成, 条件批归一化, 自适应实例归一化, 风格向量, 内容向量, 解纠缠表示, 可解释表示, 语义向量, 语法向量, 潜在空间, 潜在遍历, 潜在插值, 潜在算术, 类比推理, 向量符号架构, 谐振子网络, 超维计算, 几何深度学习, 图神经网络, 图注意力网络, 图卷积网络, 消息传递神经网络, 图同构网络, 谱图卷积, 空间图卷积, 动态图, 时序图, 知识图谱嵌入, TransE, TransH, TransR, DistMult, ComplEx, RotatE, ConvE, 图到序列, 序列到图, 结构到文本, 文本到结构, 程序合成, 程序理解, 代码补全, 代码搜索, 代码摘要, 代码克隆检测, 代码漏洞检测, 代码修复, 代码翻译, 代码优化, 自动编程, 神经程序合成, 概率程序, 微分编程, 可微编程, 符号回归, 遗传编程, 归纳逻辑编程, Answer Set编程, 约束编程, SAT求解器, SMT求解器, 模型检查, 形式验证, 定理证明, 自动推理, 知识表示与推理, 描述逻辑, Web本体语言, 资源描述框架, SPARQL查询语言, 语义网, 链接数据, 知识图谱补全, 知识图谱对齐, 本体匹配, 实体对齐, 模式匹配, 规则学习, 归纳学习, 演绎学习, 溯因学习, 类比学习, 案例推理, 基于实例的学习, 最近邻算法, k-最近邻, 支持向量机, 核方法, 径向基函数核, 多项式核, Sigmoid核, 拉普拉斯核, 图核, 字符串核, 树核, 卷积核, 深度核学习, 高斯过程, 随机过程, 点过程, 马尔可夫过程, 泊松过程, 维纳过程, 布朗运动, 伊藤积分, 随机微分方程, 神经微分方程, 神经常微分方程, 神经随机微分方程, 神经偏微分方程, 傅里叶神经算子, 图算子网络, 几何深度学习, 群等变神经网络, 球面卷积, 流形学习, 拓扑数据分析, 持续同调, Morse理论, Reeb图, Mapper算法, 凝聚层次聚类, k-均值聚类, DBSCAN聚类, 谱聚类, 高斯混合模型, 狄利克雷过程混合模型, 隐马尔可夫模型, 条件随机场, 结构支持向量机, 最大熵模型, 逻辑回归, 线性回归, 岭回归, Lasso回归, 弹性网络, 决策树, 随机森林, 梯度提升树, XGBoost, LightGBM, CatBoost, AdaBoost, 装袋法, 提升法, 堆叠法, 集成学习, 投票分类器, 混合模型, 委员会机器, 专家混合, 层次混合专家, 乘积专家, 贝叶斯模型平均, 贝叶斯神经网络集成, 深度高斯过程, 深层核学习, 神经过程, 注意力过程, 条件神经过程, 卷积条件神经过程, 图神经过程, 元学习过程, 学习如何学习, 元优化器, 元学习器, 基础学习器, 内循环, 外循环, 模型不可知元学习