乾元BigBangTransformer
BBT-2-12B-Text基于中文700亿tokens进行预训练，经过指令微调的BBT-2基础模型可以回答百科类和日常生活的问题。BBT-2.5-13B-Text基于中文+英文 2000亿tokens进行预训练。
分类：AI训练模型
标签： AI自然语言处理模型
评分：
BigBang Transformer[乾元]是基于GPT Decoder-only架构的大规模预训练模型。继2022年开源BBT-1-0.2B模型之后，我们正式开源最新系列的BBT模型：BBT-1-1B，BBT-2-12B-Text，BBT-2.5-13B-Text。预训练语料库覆盖14个高质量数据源，覆盖书籍、百科、论文、小说、新闻、政策文件、中文博客、社交媒体等多个数据源种类。BBT-2-12B-Text基于中文700亿tokens进行预训练，经过指令微调的BBT-2基础模型可以回答百科类和日常生活的问题。BBT-2.5-13B-Text基于中文+英文 2000亿tokens进行预训练。
模型开源后所有开发者可以：
- 可以直接调用大模型进行对话
- 在我们训练的基础上使用自由语料库继续训练
- 对大模型进行微调训练以满足各种下游任务
关于乾元BigBangTransformer特别声明
本站AI工具箱提供的乾元BigBangTransformer都来源于网络，不保证外部链接的准确性和完整性，同时，对于该外部链接的指向，不由AI工具箱实际控制，如该网页内容出现违规内容，可以直接联系网站管理员进行删除，AI工具箱不承担任何责任。
类似工具
AI工具箱是一款优质的AI在线工具集合，提供各种实用工具，帮助您在工作和生活中更高效、便捷地处理任务。AI工具箱提供了AI工具排行榜，收录了众多免费的AI工具，为您提供一个方便的AI工具导航平台。无论您是需要文本分析、图像处理还是数据挖掘等领域工具，AI工具箱都能满足您的需求，快来体验吧！