BigBang Transformer[乾元]是基于GPT Decoder-only架构的大规模预训练模型。继2022年开源BBT-1-0.2B模型之后,我们正式开源最新系列的BBT模型:BBT-1-1B,BBT-2-12B-Text,BBT-2.5-13B-Text。预训练语料库覆盖14个高质量数据源,覆盖书籍、百科、论文、小说、新闻、政策文件、中文博客、社交媒体等多个数据源种类。BBT-2-12B-Text基于中文700亿tokens进行预训练,经过指令微调的BBT-2基础模型可以回答百科类和日常生活的问题。BBT-2.5-13B-Text基于中文+英文 2000亿tokens进行预训练。
模型开源后所有开发者可以:
1. 可以直接调用大模型进行对话
2. 在我们训练的基础上使用自由语料库继续训练
3. 对大模型进行微调训练以满足各种下游任务
类似的工具
零一万物-官网01.ai
以 Project AI2.0 之名入局大模型
xAI Grok
使用xai的大型语言模型(LLM)进行聊天
Kimi Chat
一口气读完二十万字的小说
MediaGPT:中文自媒体大模型
一个针对自媒体领域进行特殊训练的模型
封神榜-IDEA研究院
最大的开源预训练模型体系
KwaiYii快意大模型
独立自主研发的一系列大规模语言模型
其他人也看的工具
书生
定义任意任务和轻量级自适应融合
Genius Sheets
Genius Sheets是一款基于人工智能的工具,可以根据文本提示提供即时分析。它允许用户从现有的Excel或谷歌Sheets工作簿中生成报告和财务模型,从而使用户能够以全新的方式与数据交互。
AIPrompter提示词插件
快速地帮你生成提示词,让你更容易使用AIGC产品
Morphlin
Morphlin 是一款基于人工智能的工具,旨在通过为交易者提供有效的借贷策略、网格策略以及跨市场和交易所的实时信号推送通知来增强交易者的能力。
AI画一画-双旦专享9折
使用图转视频,一起开启绘画的奇妙之旅
轩辕大模型
国内首个开源的千亿级中文对话大模型
AI 中文社
