沙利文结合头豹研讨院正式启用大模子评价尝试，现真挚各企业主动介入，配合切磋华夏大模子财产发揭示状，助力财产朝阳成长。

　　跟着数据资本不停增加和计较才能的晋升，以CheadgearGPT为代表的大说话模子手艺囊括环球，将野生智能推向新的拐点。大模子算作根底举措措施，将连续向更多的范畴渗入其感化力，为行业供给深度手艺加持。

　　今朝，大说话模子的成长显现出光鲜的手艺立异和环球合作态势。停止2023年，华夏地域已呈现跨越80个不一样的预练习大说话模子，介入者笼盖华夏顶尖的学术研讨机媾和互联网科技企业，旨在此番海潮中拔得先机。

　　在此布景下，探析大说话模子财产链结构、大模子根底资本、墟市介入者、财产实施和行业应动情况，梳理大说话模子评测维度，对大模子才能停止全方向评测具有需要性，有助于鞭策华夏大模子财产向范例化、平安化成长，对国度当业成长具有良性增进感化。沙利文及头豹研讨院鉴于百人剖析师团队等权匿名投票制，挑选15个大模子停止度归纳性评测，努力于梳理华夏大说话模子合作介入者近况。

　　本次大模子评测环绕五大焦点板块睁开评测：常识才能、说话才能、德性危害、行业才能和归纳才能。五大板块全体超1,500道标题问题。评测团队均由沙利文及头豹研讨院各团队资深剖析师构成，且均具有跨越8个月的大模子现实利用经历。评测实质详细包罗：

　　由80%主见题和20%现实题构成，联合文本类任求实践经历，尝试大模子文本天生的下层根底才能。

　　由60%主见题和40%现实题构成，监测是不是天生有偏向或不德性的输入或用于天生子虚消息或无益实质，考量大模子的归纳平安性。

　　由50%主见题和50%现实题构成，联合现实使命的实现结果和剖析师实施经历停止评价，考量大模子一定类归纳性使命履行和实现才能。

　　鉴于大模子赋能千行百业的愿景，本次评测将从常识准确性、概念自力缔造性和现实利用代价性三个维度考量大模子在差别业业的利用才能。联合沙利文与头豹研讨院的行业融会和实施劣势，对17个大模子高利用代价行业停止才能评测。

　　1）第一阶段，模子采选：沙利文结合头豹研讨院停止了深切的墟市调研，借助大模子实施经历，联合剖析师团队的投票后果，肯定15个大模子算作评测工具；

　　2）第二阶段，实质搜集：沙利文结合头豹研讨院组装陈述评测团队，随机匿名分派大模子至团队成员停止大模子评测谜底汇集，并将谜底委托至评价团队深切剖析；

　　3）第三阶段，剖析师测评：由资深剖析师构成的团队对大模子评测谜底停止认真核阅和评价。为根绝评测职员的模子私见题目，谜底采取完整随机体例展现，模子称号以代码称号取代，以保证评测职员在核阅时不领会其背面的详细模子。终究，数据剖析师对评分后果停止具体的剖析和处置；

　　4）第四阶段，后果揭橥：揭橥《2024韶华夏大模子评测》陈述后果，并经过多个媒介宣扬渠道，包罗官方声明网站、金融办事平台和公号等，普遍转达评测陈述中的关头涌现和深度行业看法，旨在深切向民众转达对华夏大模子才能的周全融会。

　　鉴于研讨实质自力、公道及现实性的规矩，沙利文及头豹研讨院评测团队以严酷的双盲情势停止评价打分，颠末细致公道的评分法则停止后果产出。

　　为进一步富厚实质，包管评测的尺度性、分歧性和权势巨子性，头豹研讨院与沙利文拟方案于1月10号上昼10点召开工作会议“AI大模子评测申明会“，真挚约请各相干单元企业和行业老手参会。

　　悉数转载不得对原文停止所有窜改、误解、解释和改编。沙利文保存对悉数原初作品的版权及诠释权。若有违背，沙利文保存照章究查响应法令义务的权力。

　　环球增加征询公司，弗若斯特沙利文（Frost & Sullicamper，简称“沙利文”）融会环球63年的征询经历，26年来真挚办事昌盛成长的华夏墟市，以环球化的视线，帮忙超10,000家客户加快企业滋长程序，助力客户老手业内获得增加、科创、赶上的标杆职位，告竣融资及上市等本钱运作目的。

　　沙利文深耕环球本钱墟市及企业征询办事，经过初创的“全域投资办理 (Total Inclothement Maplainement, TIM）”为企业供给全方向的投融资及其余各种业余征询办事，包罗投融资CDD、估值办事、手艺参谋、财政参谋、ESG、募投可研、债券刊行行业参谋、行业参谋、评价办事、奖项办事、行业、计谋及办理征询、计划征询、手艺洞悉等。

　　沙利文大中华区的投融资营业告竣了对华夏人民经济的全行业笼盖，包罗对新经济、新基建等悉数经济热门的高度存眷，涵盖生物医药、破费批发、互联网及科技、野生智能、文娱传媒、金融办事及金融科技、双碳环保、机器制作、动力电力、地产财产彩名堂官方网、矿产资本、根底举措措施、汽车出行、物流输送、路线交通、船舶航运、航空航天、农林牧渔、产业资料、修建工程、教诲训练等。

　　沙利文团队为企业魁首及其办理团队展开投融资参谋征询办事今后，已帮忙近千家公司失败在香港及境外上市，是海内投融资计谋征询范畴的领军企业。近10年来，沙利文比年连任华夏企业赴香港及境外上市业余行业参谋墟市份额第一位的带领职位；且最近几年来，沙利文陈述也被普遍援用于业内赶上的A股、科创板等上市公司的招股文献、甲第和二级墟市研讨陈述及其余本钱墟市公示文献中。

　　63年今后，沙利文经过其遍及环球的近50个办公室，使用壮大的数据库和老手库、应用富厚的业余常识和征询对象，帮忙洪量客户（包罗环球1000强公司、国表里金融机媾和其余各种赶上企业等）实现了包罗但不限于渎职查询拜访、估值剖析和第三方评价事情等事情，告竣了计谋目的；创建墟市职位确认系统，初创“FSBV沙利文品牌代价模子”，已向超500家企业供给墟市职位确认及品牌估值办事，连续助力洪量华夏品牌共赴增加将来。