简介
BigBang Transformer[乾元]是基于GPT Decoder-only架构的大规模预训练模型。继2022年开源BBT-1-0.2B模型之后，我们正式开源最新系列的BBT模型：BBT-1-1B，BBT-2-12B-Text，BBT-2.5-13B-Text。预训练语料库覆盖14个高质量数据源，覆盖书籍、百科、论文、小说、新闻、政策文件、中文博客、社交媒体等多个数据源种类。BBT-2-12B-Text基于中文700亿tokens进行预训练，经过指令微调的BBT-2基础模型可以回答百科类和日常生活的问题。BBT-2.5-13B-Text基于中文+英文 2000亿tokens进行预训练。模型开源后所有开发者可以：1. 可以直接调用大模型进行对话2. 在我们训练的基础上使用自由语料库继续训练3. 对大模型进行微调训练以满足各种下游任务
相关资讯
河北省举办首届NeuroMaster脑科学人工智能挑战赛
河青新闻网讯 11月17日，2024世界机器人大赛——河北省首届NeuroMaster脑科学人工智能挑战赛，在石家庄市第一中学成功举办。NeuroMaster脑科学人工智能挑战赛竞赛方向围绕脑机接口在典型领域的应用发展，竞赛内容设
2025-01-15 11:08:38
聚焦人工智能“互联网之光”博览会今日开幕
大江网 大江新闻客户端讯 全媒体记者陈春伟报道：11月19日，由世界互联网大会和浙江省人民政府共同主办的2024年世界互联网大会“互联网之光”博览会在乌镇盛大开幕。本届博览会设置了五大活动板块，包括展览展示、
2025-01-15 10:48:35
AI造谣乱象“野蛮生长”？专家：可设置敏感关键词禁止生成显著违法信息内容
央广网北京11月19日消息（记者王迟）近年来，人工智能（AI）技术发展迅速，成为全球科技领域的热点。AI已经从单纯的学术研究发展成为改变人类生活方式的重要力量。然而，却有一些别有用心之人将其变为造谣、敛财
2025-01-15 10:28:26
“互联网之光”博览会今天开幕全面聚焦人工智能
作为2024年世界互联网大会乌镇峰会的重要活动之一，今天上午，“互联网之光”博览会正式开幕。在2024年世界互联网大会“互联网之光”博览会的现场，记者看到，“互联网之光”的开幕式就在这里进行。今年，“互联网之光”
2025-01-15 10:08:24
探营世界互联网大会“互联网之光”博览会：看AI如何打败AI
上传一张照片，就能利用AI技术鉴别照片是不是其他AI的伪造品；不法分子使用了AI换脸技术，也能被AI精准识破。11月19日，2024年世界互联网大会乌镇峰会开幕，人工智能再次成为热议话题。在“互联网之光”博览会的蚂
2025-01-15 09:48:17
