乾元BigBangTransformer | Ai工具箱-萝卜智能

BigBang Transformer[乾元]是基于GPT Decoder-only架构的大规模预训练模型。继2022年开源BBT-1-0.2B模型之后，我们正式开源最新系列的BBT模型：BBT-1-1B，BBT-2-12B-Text，BBT-2.5-13B-Text。预训练语料库覆盖14个高质量数据源，覆盖书籍、百科、论文、小说、新闻、政策文件、中文博客、社交媒体等多个数据源种类。BBT-2-12B-Text基于中文700亿tokens进行预训练，经过指令微调的BBT-2基础模型可以回答百科类和日常生活的问题。BBT-2.5-13B-Text基于中文+英文 2000亿tokens进行预训练。模型开源后所有开发者可以：1. 可以直接调用大模型进行对话2. 在我们训练的基础上使用自由语料库继续训练3. 对大模型进行微调训练以满足各种下游任务

数据评估

乾元BigBangTransformer浏览人数已经达到926，如你需要查询该站的相关权重信息，可以点击"5118数据""爱站数据""Chinaz数据"进入；以目前的网站数据参考，建议大家请以爱站数据为准，更多网站价值评估因素如：乾元BigBangTransformer的访问速度、搜索引擎收录以及索引量、用户体验等；当然要评估一个站的价值，最主要还是需要根据您自身的需求以及需要，一些确切的数据则需要找乾元BigBangTransformer的站长进行洽谈提供。如该站的IP、PV、跳出率等！

特别声明

本站Ai工具箱-萝卜智能提供的乾元BigBangTransformer都来源于网络，不保证外部链接的准确性和完整性，同时，对于该外部链接的指向，不由Ai工具箱-萝卜智能实际控制，在2024年2月28日下午9:52收录时，该网页上的内容，都属于合规合法，后期网页的内容如出现违规，可以直接联系网站管理员进行删除，Ai工具箱-萝卜智能不承担任何责任。

Ai工具箱-萝卜智能致力于优质、实用的网络站点资源收集与分享！本文地址https://tools.aiydn.com/ai/3513.html转载请注明

相关导航

阅文妙笔大模型

全面探索有声、漫画、动画、衍生等开发链条的AI应用。

言犀

人机交互平台，懂业务更懂你

MediaGPT：中文自媒体大模型

一个针对自媒体领域进行特殊训练的模型

通义晓蜜

全渠道联络中心与Al应用深度整合的整体方案，通义对话机器人、人工辅助、云联络中心

K2-上海交通大学

地球科学的开源大预言模型，首先在收集和清理过的地球科学文献（包括地球科学开放存取论文和维基百科页面）上对 LLaMA 进行进一步预训练，然后使用知识密集型指令调整数据（GeoSig...