Together AI 发布 RedPajama v2：包含 30 万亿 token 数据集，用于大模型训练
发布时间：2024-01-16 05:36:42
据站长之家 11 月 6 日报道，AI 初创公司 Together AI 发布 RedPajama v2，这是一个包含 30 万亿 token 的数据集，旨在支持大型语言模型的研究和开发。 研究人员从 CommonCrawl 和其他公开可用的网络数据中提取了原始文本数据，其中包括 40 多个质量注释和去重集群。他们计划扩展这些注释，以包括与常用 LLM 基准的比较、主题建模和分类注释等内容，以促进更深入的研究。据悉，RedPajama v2 的数据集还经过最小处理，以保持尽可能多的原始数据，并让模型构建者在后续处理中进行过滤和重新加权。
（责编： admin）
免责声明：本文为转载，非本网原创内容，不代表本网观点。其原创性以及文中陈述文字和内容未经本站证实，对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺，请读者仅作参考，并请自行核实相关内容。
如有疑问请发送邮件至：goldenhorseconnect@gmail.com
- 鸥易交易所app下载(交易快捷赚钱便利)V6.25.922024-11-14
- 数字货币怎么转移平台？欧易交易所怎么买数字货币2024-11-14
- 苹果ok交易所app下载(安全稳定的投资利器)V6.4.112024-11-14
- 欧联交易所官网新版(多元数字货币兑换)V6.47.592024-11-14
- 注册欧易(比特币交易所助手)V6.14.62024-11-14
- 鸥易交易所官方(数字货币资产交易)V6.7.892024-11-14
- 欧联交易所最新app下载(币乐App品质上线)V6.12.02024-11-14
- 欧链交易所app下载(数字化交易平台)V6.28.122024-11-14
- 鸥易交易所app下载官网(全面行情实时把握)V6.47.12024-11-14
- 欧联交易所app下载最新版本(便捷交易多重风控)V6.9.822024-11-14
