ColossalChat是Colossal-AI发布的免费开源ChatGPT聊天机器人的替代选择,目前在GitHub上已获得了26,000颗星标。
身为当今领先的开源大型人工智能模型解决方案,Colossal AI 是首家采用 LLaMA 预训练模型的公司,开发出整套 RLHF 机制,覆盖监督数据收集、微调、奖励模型训练和强化学习微调等环节,并分享了ColossalChat——这是一个与 ChatGPT 技术解决方案非常相似的开源项目。
这个开源项目包含以下要素:
- 示范展示:这是一个交互式展示,用户可以在线试用而无需注册或排队等待。
- 训练代码:公开可用的RLHF训练代码,内含具备70亿和130亿参数的模型。
- 数据集:包含104,000条开源中文和英文双语数据。
- 推断:只需4GB GPU内存即可执行拥有70亿参数的4位量化推断模型。
- 模型权重 - 只需一台服务器上微小的计算量即可快速复制。
ColossalChat官网
>>直达ColossalChat官网