Apache License 2.0

项目介绍

bbruceyuan/AI-Interview-Code 是一个托管在 GitHub 上的开源项目,主要使用 Jupyter Notebook 编写,采用 Apache License 2.0 许可证,目前获得 595 个 Star、28 次 Fork。

仓库全名
bbruceyuan/AI-Interview-Code
开源许可证
Apache License 2.0
Star 数
595
Fork 数
28
未关闭 Issue
1

README 摘要

AI-Interview-Code AI 大模型相关算法中手写的面试题,(非 LeetCode),一般比 LeetCode 更考察一个人的综合能力,又更贴近业务和基础知识一点 欢迎关注我的博客:chaofa用代码打点酱油 ,内容一般会首先更新到博客上面,并且有更好的阅读体验。 当前也欢迎关注同名公众号 chaofa用代码打点酱油,这样可以获得订阅更新 目录 题目 | 难度 | 知识点 | 文字解读 | 视频解读 | LLM 模型训练推理显存占用预估 | ⭐⭐⭐⭐ | 显存占用 | LLM 大模型训练-推理显存占用分析 | | 手写 AUC | ⭐⭐ | 模型评估 | TODO | | 手写 KMeans | ⭐⭐⭐⭐⭐ | 聚类 | TODO | | 手写 线性回归 | ⭐⭐⭐⭐⭐ | 线性回归 | TODO | | 手写 BPE 分词器 | ⭐⭐⭐⭐⭐ | 分词 | TODO | | 手写 LayerNorm | ⭐⭐ |…

完整内容见 GitHub 原始 README 或本页 。

常见问题

AI-Interview-Code 用什么语言开发?

主要使用 Jupyter Notebook 编写,采用 Apache License 2.0 许可证,目前有 595 个 Star。

AI-Interview-Code 可以免费商用吗?

仓库采用 Apache License 2.0 许可证,可免费使用与修改,商业使用请遵守许可证条款(例如保留版权声明与许可声明)。

如何获取 AI-Interview-Code 的源码?

可以直接克隆仓库:git clone https://github.com/bbruceyuan/AI-Interview-Code.git;安装与运行步骤见仓库 README。

AI-Interview-Code 最近还在维护吗?

仓库最近一次更新为 5月4日,当前有 1 个未关闭 Issue;Star 数为 595,可作为社区活跃度的参考。

简要分析

热度分
1246
价值分
424
活跃状态
活跃

语言占比

Jupyter Notebook

README

AI-Interview-Code

ApeCode.ai ApeRouter

AI 大模型相关算法中手写的面试题,(非 LeetCode),一般比 LeetCode 更考察一个人的综合能力,又更贴近业务和基础知识一点

目录

题目 难度 知识点 文字解读 视频解读
手写 Self-Attention ⭐⭐⭐ 注意力机制 手写 Self-Attention 的四重境界 bilibili
Youtube
手写 Multi-Head Self-Attention ⭐⭐⭐ 注意力机制 手写 Multi-Head Self-Attention bilibili
Youtube
手写 Group-Query Attention ⭐⭐⭐ 注意力机制 手写大模型组件之Group Query Attention,从 MHA -> MQA -> GQA bilibili
Youtube
手写 Transformer Decoder(Causal Language Model, LM) ⭐⭐⭐⭐ Transformer 架构 手写 Transformer Decoder bilibili
Youtube
计算 LLM (Decoder) 模型的参数量 ⭐⭐⭐ 模型参数量 TODO bilibili
Youtube
LLM 模型训练推理显存占用预估 ⭐⭐⭐⭐ 显存占用 LLM 大模型训练-推理显存占用分析
手写 AUC ⭐⭐ 模型评估 TODO
手写 KMeans ⭐⭐⭐⭐⭐ 聚类 TODO
手写 线性回归 ⭐⭐⭐⭐⭐ 线性回归 TODO
手写 BPE 分词器 ⭐⭐⭐⭐⭐ 分词 TODO
手写 LayerNorm ⭐⭐ 归一化 TODO
手写 BatchNorm ⭐⭐ 归一化 TODO
手写 Softmax ⭐⭐ 激活函数 TODO

一般不会考的

题目 难度 知识点 文字解读 视频解读
手写 LoRA ⭐⭐⭐⭐⭐ 目的是为了深入了解 LoRA LoRA 原理和 PyTorch 代码实现
中文可运行 Notebook
bilibili

🦧 More from the Author

评论

暂无评论