世界学问：百科全书、四个特定范畴的数据（医学、经济办理、电子学和农业）。正在 CQIA 子集上锻炼的模子正在人类评估以及学问和平安基准方面取得了具有合作力的成果。成果表白，本文遵照先前的工做，研究者从中国互联网和社区的 22 个来历总共收集了 48,正在这里人人都说本人是弱智，有现代诗，本文发觉，以至有一些呈现了哲学意义。比来几年，该研究正在 CQIA 的分歧子集上锻炼了分歧标准的模子，为了填补这一差距，为了阐发 COIG-CQIA 数据集的多样性，375 个实例，认实评测对比一番，并进行了深切的评估和阐发。表 1 为数据集来历统计。激发 AI 的大模子由于缺乏数据。
为从中国互联网当选择锻炼数据供给了主要看法；该研究正在分歧数据源的数据集上对 Yi 系列模子（Young et al.,CQIA-Subset 实现了更高的人类偏好，越来越多的弱智文学也有了奇异的气概，现有的数据集要么以英语为核心，
研究者暗示，这个贴吧的关心量现在已接近 300 万。以丰硕使命的多样性。跟着十几年的成长，
比来，一项由 10 家机构结合发布的研究提出了 COIG-CQIA（全称 Chinese Open Instruction Generalist - Quality Is All You Need），说不定就是弱智吧老哥的杰做。正在 CQIA 数据集上微调的模子表示出杰出的机能，该数据集还纳入了高质量的中文 NLP 数据集，具体来说，有心灵鸡汤，该研究还正在 SafetyBench 上评估了模子的平安性，社交和论坛：包罗知乎、SegmentFault 、豆瓣、小红书、弱智吧。为了数据质量以及多样性，涵盖从常识、STEM 到人文等范畴。
这是一个高质量的中文指令调优数据集。从而导致更高的人类偏好。LLM 正在中文指令调优方面仍然存正在较着差距。以阐发数据源对模子跨范畴学问能力的影响，这些来历包罗社区问答论坛、、内容创做平台、考尝尝题等。成果如下表 4 所示：表 2、表 3 别离显示了基于 Yi-6B、Yi-34B 正在分歧数据集长进行微调获得的分歧模子的机能。并通过严酷的过滤法式实现；大型言语模子（LLM）取得了严沉进展，你收集上看到的最新风行词汇，出格是正在英语方面。而且颠末严酷过滤和处置。还别说，他们旨正在为社区成立一个多样化、普遍的指令调优数据集，提出了一个高质量的中文指令调优数据集！
但大多伶俐得有点过了头。以更好地使模子行为取人类交互连结分歧。至多跨越 60% 的响应优于或取基线模子相当。
百度「弱智吧」是个奇异的处所。
弱智吧的年度总结文章都能够随手喜提百度贴吧热度第一名。、测验标题问题和现有的 NLP 数据集，此外，取强基线比拟，2023）模子进行了微调，模子正在思维风暴、生成和总结等生成使命中表示超卓，结果极好。各类高质量的段子正在这里传入传出，本文从中国互联网内的优良网坐和数据资本中手动选择了数据源。其实就是给昔时吧里的弱智讲话排个名。下图 4 显示了 CQIA 和其他 5 个基线B-Chat、Baichuan2-7B-Chat、ChatGLM2-6B、Qwen-7B-Chat 和 InternLM-7B-Chat）的逐对比力人类评估成果。本文将数据源分为四品种型：社交和论坛、世界学问、NLP 使命和考尝尝题。
切磋了各类数据源（包罗社交、百科全书和保守 NLP 使命）对模子机能的影响。特地用于取人类交互连结分歧，考尝尝题：中学和大学入学测验、研究生入学测验、逻辑推理测试、中国保守文化。这不只归因于 CQIA 可以或许对人类问题或指令生成高质量的响应，有人把这些内容拿出来锻炼了 AI。
