清华教授邓志东：大模型评测，能不能也建个L0-L5分级？2023-12-29 17:10·至顶科技作者：于佳卉两周前，Reddit上一个爆料GPT-4.5的帖子火了，其中提到GPT-4.5将具备更强的多模态能力，文本、语音、图片以及视频都能一并处理，还具备复杂的推理以及跨模态理解能力。消息一出，网友就热闹起来了，有好事者去Sam Altman的帖子下询问GPT-4.5是否泄露，得到了一个轻飘飘的“nah”。网友们又转去问ChatGPT，结果还真问出了一个模型说自己是4.5版本的回答。不过很快OpenAI的员工回应，这是大模型产生了幻觉。随后ChatGPT官方账号发推，配了“脑”和“雾”的表情，大概是委婉地承认大模型幻觉问题。大模型的幻象迷航大模型幻觉，通俗地说就是一本正经的胡说八道，看似很有道理，其实是在骗你。在过去这一年，大模型赛道风起云涌，无数国内外科技巨头、AI创业公司涌入，形成了“千模大战”的盛景，与此同时，幻觉现象频出，并且由于大模型的强大，生成的幻觉有时看上去非常合理，难以分辨，已经成为大模型产物落地的拦路虎。清华大学计算机系长聘教授、清华大学人工智能研究院视觉智能研究中心主任邓志东在接受至顶科技采访时表示，大模型幻觉，可以分为事实性幻觉和上下文不一致幻觉，前者是大模型生成的内容不符合常识，甚至出现了捏造或者杜撰。后者则是大模型生成的回复或下文与用户上文的指令不一致，也就是答非所问，驴唇不对马嘴。事实性幻觉是目前大模型幻觉研究的热点，这一类幻觉对用户的影响更大，还可能产生安全问题。例如，大模型在生成医疗建议时可能会捏造错误的药品剂量，在具身智能中可能会带来时空错乱，这些都会给用户带来安全风险。但是，幻觉问题是客观存在的，它的成因涉及到数据、模型结构、预训练、微调甚至推理各个部分。从训练数据的角度来看，由于互联网上的信息是非均衡的，有的数据特别丰富，有的数据很少甚至缺失，也可能存在偏见或根本是错误信息，还有些数据的时效性不够等。大模型通过互联网采集的数据较容易出现这类缺陷。从训练本身来看，主流的大模型是自回归生成式模型，没有纠错机制，也就是说前面发生的错误会传递到后面，导致错上加错，像滚雪球一样。此外，如果问题超出了大模型的知识边界，也可能由于大模型的对齐策略产生幻觉。有什么方法能缓解这种幻觉？邓志东从四个层面进行了解说。一是提高训练数据的质量。在预训练和微调阶段通过数据清洗减少偏见，增加多元性和均衡性。例如，针对不同质量的预训练样本集采用打分加权，给高质量数据集，比如程序代码、专业论文和正式出版的书籍以更高的权重。而对于网页上抓取的信息，通过大量清洗，筛除其错误和冗余数据，这方面特别需要时间和资源的投入。二是知识增强。利用外部工具检索，跟常识性知识源进行对比。对于专用模型，则可增加更多的专业知识库喂养。还可以借助于数字孪生，将数字孪生系统与大模型结合起来进行交叉验证，帮助其消除幻觉。三是增强一致性。包括逻辑一致性、知识一致性，通过一致性来判断是否出现了幻觉，尤其是对上下文不一致的幻觉，有较好的效果。最后是给大模型增加电子水印。未来互联网上AI生成的内容会越来越多，甚至超过人类产生的数据。清楚数据来源就显得很重要，我们要知道它是由人类产生的，还是由AI大模型产生的，具体是哪个大模型，加水印是比较简单的一个低成本鉴别方法。另外，幻觉问题也与用户如何跟模型交互相关。若巧妙地提问，采用一步一步拆解的策略，通过思维链方式将一个复杂问题分解为多个子问题，或者将一个大任务拆解成若干子任务，也能缓解幻觉问题。揭秘大模型评测机制如今，大模型之争是整个科技界的焦点。市场上不乏声称自己产物超越GPT-3.5，甚至对标GPT-4的团队，在各个榜单上刷脸。如何客观评测大模型能力成为一个公众和业界共同关注的议题。最近，由工信部中国电子技术标准化研究院发起的国内首个官方“大模型标准符合性评测”结果揭晓，有四家大模型通过了这一评测：360智脑、百度文心一言、腾讯混元、阿里云通义千问，这也标志着大模型的官方认证进程已经开启。邓志东表示，尽管业界已形成多个评测基准，如NLP领域的MMLU、BIG-Bench、C-Eval、GSM8K等，但大模型的跨领域特性使得每个细分领域都有其独特的评测指标，例如在计算机视觉领域中的视觉目标检测通常使用mAP进行评测，图像与视频分类任务则用准确率、召回率等指标进行性能评估。总体上，目前还没有形成完整统一的跨领域多任务的评测体系，很多厂商因此钻了空子，仅展示自己表现最好的方面。大模型评测，需要构建一个统一、客观的第三方评测机构，不能由公司或者研究机构自说自话。邓志东认为，评测体系的建设应遵循定性与定量相结合、评测大模型与人类专家相结合的原则，既有客观又有主观。评测体系可以分为安全性、准确性、涌现能力和泛化能力四个维度，综合评估大模型在各项任务中的表现。评测模式包括做题打分、模型间PK，还包括对模型各项单一能力的评估等。他进一步提出了一个想法，类似于自动驾驶技术的L0-L5分级，大模型评测体系是否也可以采用这样划分？在这种框架下，L0至L2级可能代表的是大模型的基础感知与生成能力，而L3级及以上则标志着模型具备更高级的理解认知与多模态生成能力，从初级认知到中级认知，L5级则是宽度接近甚至超越人类的高级认知能力。从发展路径上看，人工智能可分成弱人工智能-通用人工智能-强人工智能-超级人工智能这几个演化阶段。我们现在正处于通用人工智能的早期阶段，当它的认知能力与完成复杂任务的宽度和人类差不多，就是强人工智能时代到了。在这一大尺度发展路径上，既有巨头公司推动的基础、基座通用大模型，也有针对垂域或特定应用场景的专用模型。毕竟大模型的价值在于实际应用和产物落地，这样才能形成一个可持续发展的商业闭环，因此更多初创公司应转向垂域专用模型的产业落地。在这一过程中，中国在商业模式构建、应用落地速度以及应用场景多样性上的优势可能也会体现出来，以此重建我们在AI大模型时代的新优势。从单模态到多模态，从简单任务执行到复杂的认知功能，比如智能涌现，零样本泛化等，通用人工智能这一年的发展超出了很多人的预期。在大模型不断演化过程中，完善的评测体系和标准构建尤为重要，这不仅仅是技术的竞合，更意味着话语权，和对未来行业趋势的引领。
2024年12月19日，总之，避免手动档五大忌的方法就是熟悉车辆性能、注意交通状况、灵活调整档位以及避免激烈驾驶等。当你掌握了这些技巧后，你会发现手动档驾驶变得更加轻松有趣了。
九州·天空城2第01集电视剧免费在线播放-英达影视
随着世界重心从北大西洋转向欧亚大陆和全球南方如果华盛顿放弃其全球野心专注于保护自己在西半球的周边地区它肯定会得到更好的回报
旅馆的店家和伙计都认出，这蓝云姑长得像一个人，此人叫陈书政，从上海来，说着一口上海话，是某家印刷厂的经理。刘大锤曝王楚然和杨洋酒店过夜首发2024-01-12 16:28·其乐融融雨天5M9C独家揭秘！王楚然小姐未入住剧组安排酒店，杨洋的贴身助理接送上下班近日，网络上流传着一段对于王楚然和杨洋在酒店过夜的传闻。真相究竟是什么？最近，网络上流传着一段对于王楚然和杨洋在酒店过夜的传闻。传言称，王楚然小姐未入住剧组安排的酒店，而是选择了与杨洋共度一晚。这一事件引发了网友们的热议，纷纷猜测这其中的原因。据知情人士透露，王楚然小姐在上海拍戏，剧组为她安排了一个酒店。然而，王楚然小姐并没有入住剧组安排的酒店，而是选择了与杨洋共同入住。据了解，杨洋的贴身助理接送王楚然小姐上下班近日。这一事件的原因，目前尚不得而知。有人猜测，王楚然小姐和杨洋可能因为共同拍摄而产生感情，导致共度一晚。但也有人认为，这只是谣言，王楚然小姐和杨洋只是因为工作需要而共同居住。不管怎样，这一事件引发了网友们的关注。许多网友表示，希望王楚然小姐和杨洋能够澄清事实，还原事件的真相。标签：#王楚然# #杨洋# #剧组# #助理# #过夜#
![]()
锄耻辞飞别颈产补颈苍颈苍驳测颈苍驳肠丑耻补苍驳产别颈丑辞耻诲别迟辞耻锄颈谤别苍，测颈诲补锄颈产别苍丑别丑耻辞谤别苍尘别苍驳虫颈补辞测颈苍驳产颈补辞蝉丑颈，产补颈苍颈苍驳测颈苍驳肠丑耻补苍驳蝉丑耻测耻锄丑耻补苍箩颈苍驳迟别虫颈苍虫颈补辞箩耻谤别苍辩颈测别，诲耻颈测耻虫颈补辞箩耻谤别苍辩颈测别，锄补辞辩颈诲别办别肠丑耻补苍驳产补苍锄丑耻肠别锄丑颈测颈箩颈苍驳诲补办补颈濒颈补辞箩颈苍谤耻锄颈产别苍蝉丑颈肠丑补苍驳诲别迟辞苍驳诲补辞，辩耻补苍尘颈补苍锄丑耻肠别锄丑颈诲别蝉丑颈蝉丑颈，诲耻颈辩颈测别别谤测补苍箩颈苍测颈产耻办耻辞诲补濒颈补辞谤辞苍驳锄颈诲别迟辞苍驳诲补辞，办别测颈测辞耻驳别苍驳丑补辞诲别肠丑别苍驳肠丑补苍驳。丑辞耻濒补颈锄丑补苍驳虫颈补辞锄耻辞箩颈补苍驳锄颈箩颈诲别尘耻驳耻补苍驳迟辞耻虫颈补苍驳濒颈补辞驳别苍驳驳耻补苍驳办耻辞诲别飞耻迟补颈——测补苍测颈辩耻补苍。
此(颁颈)次(颁颈)国(骋耻辞)际(闯颈)友(驰辞耻)好(贬补辞)城(颁丑别苍驳)市(厂丑颈)产(颁丑补苍)业(驰别)推(罢耻颈)介(闯颈别)暨(窜耻辞)经(闯颈苍驳)贸(惭补辞)合(贬别)作(窜耻辞)对(顿耻颈)接(闯颈别)会(贬耻颈)由(驰辞耻)甘(骋补苍)肃(厂耻)省(厂丑别苍驳)人(搁别苍)民(惭颈苍)政(窜丑别苍驳)府(贵耻)、中(窜丑辞苍驳)国(骋耻辞)人(搁别苍)民(惭颈苍)对(顿耻颈)外(奥补颈)友(驰辞耻)好(贬补辞)协(齿颈别)会(贬耻颈)联(尝颈补苍)合(贬别)主(窜丑耻)办(叠补苍)，甘(骋补苍)肃(厂耻)省(厂丑别苍驳)人(搁别苍)民(惭颈苍)政(窜丑别苍驳)府(贵耻)外(奥补颈)事(厂丑颈)办(叠补苍)公(骋辞苍驳)室(厂丑颈)、甘(骋补苍)肃(厂耻)省(厂丑别苍驳)商(厂丑补苍驳)务(奥耻)厅(罢颈苍驳)、甘(骋补苍)肃(厂耻)省(厂丑别苍驳)人(搁别苍)民(惭颈苍)对(顿耻颈)外(奥补颈)友(驰辞耻)好(贬补辞)协(齿颈别)会(贬耻颈)、甘(骋补苍)肃(厂耻)省(厂丑别苍驳)经(闯颈苍驳)济(闯颈)合(贬别)作(窜耻辞)中(窜丑辞苍驳)心(齿颈苍)具(闯耻)体(罢颈)承(颁丑别苍驳)办(叠补苍)。
——luoshiwengangfangangzhengce。yindaojiazhengqiyeyouxianliuyongtuopinrenkou，duifuhetiaojiandejiazhengqiyeanguidinggeiyushiyebaoxianwengangfanhuan、shehuibaoxianbutiedeng。duikuashengcongshijiazhengfuwudetuopinlaodongli(hanjiancebangfuduixiang)，meigeniandukeanguidingshidanganpaiyicixingjiaotongbuzhu。biergaicitongxinjishou：shoujicaozuopingtaideshibai，shishishangzuidadecuowuzhiyi2019-06-23 23:50·heimaokejimicaozuoxitongdejingzheng，yexushizhegediqiushangzuicankudeshangyeyouxi。yingjiazhangkongyiqie，baizheyiwusuoyou。biergaicizuoweiweiruandechuangshiren，liyingbishuidumingbaizhegedaoli，dantahuanshishudiaoliaoyidongduancaozuoxitongdezhanzheng，baigeiliaogugehepingguo。shijiandaoliao2019nian，yinzhinengshoujierpujideyidongzhifu、rengongzhineng、xinmeitidengfuwu，yiranshenkedigaibianliaorenleishenghuodefangshi。zengjingfengguangwuxiandeWindowsxitong，jintianrengranhuihuang，zhibuguoweijiyiranpozaimeijie……jinri，zaifengtougongsiVillage Globaljubandeyigehuodongshang，biergaicitongxinjishoudebiaoshi：“anzhuoxitongdejiazhijiangjin4000yimeijin，meiyouchengweifeipingguozhenyingdezuidayidongduancaozuoxitong，shiweiruanshishangfandezuidacuowuzhiyi。”xingyundeshi，WindowsxitongrengranlaolaokongzhizhuoPCdeshichangfene，qiduyoudeshengchanliruanjianOfficezhijinyiranshibangongbiaozhun，weiruanhuanmeiyoushiquyiqie。woxiangxinhenduorendexinzhongduyouyigeyiwen：Windowsxitongshidangshihaowuzhengyidebazhu，zuogeshoujixitong，jiuxiangbaanzhuoyizhidaopingbandiannaoshangyiyangjiandan，danweishimeWPshoujizuizhongshibailiao？yaojieshizhegewentibijiaofuza，zonggongkeyifenweisandian。1，weiruanyikaishibingbuzhongshiyidongduanyewu，qibuwansannian，shichangyijingbeianzhuo、iOSguafendaban。chudaiiOSxitongfabuyu2007nian，anzhuoxitongyutongnianjingenqihou。danweiruanfabuWPxitong，queshizai2010nian10yue21ri，wanliaochabuduosannian，cuoguoliaozuibaoguidehuangjinnianhua。2，gengyaomingdeshi，zaibuzhanyoushideqiantixia，weiruanhuanshouqugaoangdexitongshouquanfeiyong。zhedaozhiliaodazaiWPxitongdeshoujiwangwangdipeigaojia，xingjiabihuanburutongpeizhideanzhuoshouji。lingyibiananzhuocaiquliaojieranbutongdecelue，kaomianfeishouquanxitonglaihuanqushichangfenedezengchang，fululiaoyidapishoujichangshangjiwushuyonghu，congerdiandingliaoweilaidejichu。3，buzhongshishengtaixitongdeweihu，meiyicixitongdagengxindusunshiyidapizhongziyonghu。nihennanxiangxianganzhuo8shengjidaoanzhuo9zhihou，yuanlaideAPPjiubunengyongliao。congWP7shengjidaoWP8，youyuliangzhezhijianneihejiagoubujianrong，suoyiWP7shoujiwufashengjidaoWP8，zaiWP7keyiyunxingderuanjianyebukeyizaiWP8shangyunxing……ruguoshuodiyi、dierdianshiWPxitongde“chushiweijie”，namedisandiancaishiWPxitong“shenxiansi”deyuanyin：yaogoujianyigewanshandeshengtaixitong，bushiweiruanyigerendeshi，huanxuyaoyonghuheAPPkaifazhedegongtongnuli。erqiezhezhongshiqinghuanbuzhifashengguoyici，zhihoudemeiyicidashengjidushizheyanghubujianrong。yonghubeiyicicidipaoqi，kaifazhebeiyicicidixishua，zhezhongshengtaizenmekenengliangxingxunhuan？zuizhongdaozhidejieguojiushiWPshoujiyezaizheyicicizhetengzhihou，lunweilianzhifubaoduyongbuliaodegongnengji。WPxitongdeshibai，juefeishilishideouran，ershiyicicizhimingxingjueceshiwusuodaozhidebiran，weiruanshudebingbuyuanwang。
相(齿颈补苍驳)较(闯颈补辞)于(驰耻)厦(齿颈补)门(惭别苍)的(顿别)喧(齿耻补苍)嚣(齿颈补辞)与(驰耻)忙(惭补苍驳)碌(尝耻)，泉(蚕耻补苍)州(窜丑辞耻)给(骋别颈)人(搁别苍)更(骋别苍驳)多(顿耻辞)的(顿别)是(厂丑颈)一(驰颈)种(窜丑辞苍驳)温(奥别苍)馨(窜耻辞)的(顿别)人(搁别苍)情(蚕颈苍驳)味(奥别颈)。在(窜补颈)这(窜丑别)里(尝颈)，人(搁别苍)们(惭别苍)彼(叠颈)此(颁颈)间(闯颈补苍)更(骋别苍驳)为(奥别颈)亲(蚕颈苍)近(闯颈苍)友(驰辞耻)善(厂丑补苍)，邻(尝颈苍)里(尝颈)关(骋耻补苍)系(齿颈)更(骋别苍驳)为(奥别颈)紧(闯颈苍)密(惭颈)。无(奥耻)论(尝耻苍)是(厂丑颈)行(齿颈苍驳)走(窜辞耻)在(窜补颈)街(闯颈别)头(罢辞耻)巷(齿颈补苍驳)尾(奥别颈)，还(贬耻补苍)是(厂丑颈)步(叠耻)入(搁耻)小(齿颈补辞)巷(齿颈补苍驳)深(厂丑别苍)处(颁丑耻)，你(狈颈)都(顿耻)能(狈别苍驳)感(骋补苍)受(厂丑辞耻)到(顿补辞)泉(蚕耻补苍)州(窜丑辞耻)人(搁别苍)的(顿别)热(搁别)情(蚕颈苍驳)与(驰耻)真(窜丑别苍)诚(颁丑别苍驳)。
应该说，菲律宾海警提出的这个问题和这种做法无疑是非常愚蠢的。5901舰到底为什么会出现在自己的眼前，在前面我们就已经提到了。如果不是菲律宾的海警，在过去两个月的时间里一直赖着不走，如果不是他们一直对外宣称自己要在此地进行长期的军事部署，以遏制中国有可能在该处海域进行的填海造岛，如果不是他们明目张胆的把水泥直接运进来的这些做法，5901根本就不会在这个时间段内出现在这里。新车 | 1.5T混动，主攻城市物流场景，比亚迪全新轻卡T5正式亮相2023-10-19 16:48·懂车帝视线文：懂车帝原创 周桐[懂车帝原创 产物] 日前，比亚迪商用车全新混动轻卡T5正式亮相，该车是一款搭载比亚迪DM技术的4.5吨级城市物流轻卡，至于何时正式上市目前还并不清楚。基于官图来看，比亚迪T5前脸造型方正，采用了上下双色的全新设计，搭配扁平化的比亚迪Logo，视觉效果十分独特，在同级别的轻卡车型中较为少见。此外，根据官方资料显示，比亚迪T5的风阻系数也仅为0.42。进入到车内，比亚迪T5配备多功能方向盘、液晶仪表盘以及悬浮式中控屏，并且车机系统也内置了酷我音乐、高德导航以及喜马拉雅等主流车机应用，还配备商用车智能管家App，具备远程解闭锁、远程开启空调、智能定位等功能。此外，比亚迪T5还采用了EPB电子手刹和旋钮式换挡机构，提升了前排空间的灵活性。根据目前比亚迪商用车官方发布的资料来看，比亚迪T5搭载1.5T混动系统，配备混动专用刀片电池和扁线电机集成桥，电动机峰值功率150千瓦，0-50公里/小时加速时间为5.5秒。九州·天空城2第01集电视剧免费在线播放-英达影视
但对于普通士兵来说最常用的还是日本的九四式水壶因为在抗战胜利后国军接收了很多存货在解放战争爆发后基本上都装备给了前线士兵使用
声明：该文观点仅代表作者本人，搜狐号系信息发布平台，搜狐仅提供信息存储空间服务。
