数据工程#
《数据工程 Data Engine》最近 LLM 大模型开源社区研究热点开始从 Model Engineering 转移到 Data Engineering，越来越多人开始意识到数据质量、向量数据库、开源数据集、Prompt 等数据相关对大模型的重要性。
不过相对模型层面的研究 Data Engineering 其理论还不太成熟，例如：好数据的准确定义是什么？如何优化数据的结构组成？数据的优化目标是什么？对训练模型的影响是什么？因此对 Data Engineering 进行理论分析和研究可以帮助大模型更好地训练和学习。
内容大纲#
PPT和字幕需要到 Github 下载，网页课程版链接会失效哦~建议优先下载 PDF 版本，PPT 版本会因为字体缺失等原因导致版本很丑哦~
大纲 |
小节 |
链接 |
|---|---|---|
备注#
文字课程内容正在一节节补充更新，每晚会抽空继续更新正在 AI Infra ，希望您多多鼓励和参与进来！！！