大模型作为生成式人工智能技术如 ChatGPT 的核心基础,正迅速改变产业布局,并开始塑造一种全新的用户互动模式,形成舆论引导、社会治理、信息服务等方面的不对称优势。自2020年GPT-3推出到2022年ChatGPT、2023年GPT-4及2024年Google Gemini和Claude 3的快速迭代,目前大模型方向已沉淀出关键算法与重要技术,如Transformer算法及改进架构、Scaling Laws、超大规模预训练、模型对齐、原生多模态、超长文本等。因此在本节将会重点讨论大模型相关的算法!
大纲 | 小节 | 链接 |
---|---|---|
ChatGPT 狂飙 | 01 GPT 系列详解 | silde, 视频 |
ChatGPT 狂飙 | 02 RLHF 强化学习 | silde, 视频 |
ChatGPT 狂飙 | 03 InstructGPT 解读 | silde, 视频 |
多模态 | 01 SORA 视频生成大模型 | silde, 视频 |
文字课程内容正在一节节补充更新,每晚会抽空继续更新正在 AISys ,希望您多多鼓励和参与进来!!!
文字课程开源在 AISys,系列视频托管B 站和油管,PPT 开源在github,欢迎取用!!!
非常希望您也参与到这个开源课程中,B 站给 ZOMI 留言哦!
欢迎大家使用的过程中发现 bug 或者勘误直接提交代码 PR 到开源社区哦!
希望这个系列能够给大家、朋友们带来一些些帮助,也希望自己能够继续坚持完成所有内容哈!