Dear Tunars, 本次 Tunight 的活动地点更新为*三教 1102*
明晚不见不散！ 喵喵 在2025年12月19日星期五 UTC+8 09:30:32<Xiaoyi Liu> 写道： > Dear Tunars, > > 本周末的 Tunight 活动信息如下： > > 清华 PACMAN > 实验室近期联合鹏城实验室发布了基于全国产算力训练的端侧模型——鹏城脑海-2.1-开元-2B（PCMind-2.1-Kaiyuan-2B，简称开元-2B），它的一大特点是保证了包括训练数据在内的全流程开源。TUNA > > 很荣幸邀请到了 PACMAN 实验室的罗开荣同学为我们介绍开元-2B 模型及其训练过程中使用的框架，欢迎大家一起学习！ > > —- > > 开元-2B依托鹏城实验室“脑海2”集群进行模型预训练，主要特点包括： > > 1. 全流程开源：不同于一般仅开源模型权重的“开源”模型，开元-2B > 完全基于符合开源许可的数据进行训练，并开源了处理后的训练数据、数据处理框架及训练框架； > 2. 全国产算力训练：数据处理基于鲲鹏 920 集群，模型训练基于昇腾 910A 集群，并通过模型结构调整适配国产硬件的数值精度； > 3. 高效训练：综合改进数据处理和训练策略，使用 2.2T 数据、20 亿总参数、14 > 亿非嵌入参数进行训练，最终模型在全开源系列模型中实现了参数-性能的帕累托最优。 > > 具体细节可参见技术报告： https://arxiv.org/pdf/2512.07612 > > - HuggingFace模型链接： https://huggingface.co/thu-pacman/PCMind-2.1-Kaiyuan-2B > - HuggingFace数据链接： > https://huggingface.co/datasets/thu-pacman/PCMind-2.1-Kaiyuan-2B > - 数据处理框架： https://github.com/thu-pacman/Kaiyuan-Spark > - 训练框架： https://github.com/thu-pacman/kaiyuan-mindformers > > 活动信息： > - 活动网页： https://tuna.moe/event/2025/kaiyuan/ > - 主讲人：罗开荣 > - 时间：2025/12/20（校历第十四周周六） 19:00 UTC +08:00 > - 活动形式：线下 + 线上会议 + 直播 > - 地点：待定，预计为三教 1103, 请关注后续邮件更新 > - 线上会议：腾讯会议 717-212-038 密码 251220 > - 直播链接：https://youtube.com/live/64rnj9Hzygk > > 欢迎一起来玩！ > > 喵喵 > -- 您收到此邮件是因为您订阅了 Google 群组的“TUNA 主邮件列表”群组。 要退订此群组并停止接收此群组的电子邮件，请发送电子邮件到[email protected]。 如需查看此讨论，请访问 https://groups.google.com/d/msgid/tuna-general/5579f848-0673-488b-b255-34e5841f859en%40googlegroups.com。
