¡¾ÐÂÖÇÔªµ¼¶Á¡¿Ëæ×Å´óÄ£ÐÍÖÇÄÜÌåÉî¿ÌÉøÈëÕæÊµ²Ù×÷ϵͳ£¬Ò»ÖÖÈ«Ðµİ²È«ÍþвÇÄÈ»³ÉÐÍ£ºÐÐΪԽÓü£¨Behavior Jailbreak£©¡£ÏÖÓа²È«»ù×¼Ö»¶¢×ÅÄ£ÐÍ¡¸ËµÁËʲô¡¹£¬È´¶Ô¡¸×öÁËʲô¡¹ÊÓ¶ø²»¼û¡£Ð»ù×¼LITMUSÊÇÊ׸öͬʱ¸²¸ÇÕæÊµOS»·¾³ÐÐΪԽÓü¡¢ÓïÒå-ÎïÀíË«²ãÑéÖ¤Óë¶à¹¥»÷·¶Ê½µÄÆëÈ«ÆÀ²âϵͳ£¬²¢³õ´ÎϵÍÂä¿»¯ÁË¡¸Ö´Ðлþõ¡¹ÕâÒ»±»Õû¸öÆÀ²âÉçÇøºöÊÓµÄÖÂÃüÃ¤Çø¡£
µ±AIÖÇÄÜÌå²»ÔÙÖ»ÊÇ̸Ì칤¾ß£¬¶øÊÇÕæÕýÊÕÊÜÄãµÄ·þÎñÆ÷¡¢²Ù×÷ÄãµÄÎļþ¡¢Ö´ÐÐÄãµÄ¾ç±¾¡ª¡ª°²È«ÆÀ²âÕâ¼þÊ£¬¾Í²»ÄÜÔÙÍ£¶ÙÔÚ¡¸¿´Ëü˵ÁËʲô¡¹µÄ²ãÃæÁË¡£
È»¶ø£¬µ±Ç°ÏÕЩËùÓÐÖ÷Á÷ÖÇÄÜÌ尲ȫ»ù×¼£¬ÒÀÈ»°ÑÅжÏÖÕµãÍ£ÔÚ¡¸ÓïÒåÊä³ö²ã¡¹¡ª¡ªÖ»ÎÊÄ£Ð;Üû¾Ü£¬²»ÂÛOS¸Äû¸Ä¡£ÕâÒ»µ××ÓÐÔȱµã£¬´ßÉúÁËÒ»ÖÖ¼«ÆäΣÏյĻÃÏó£º
ΪÁ˳¹µ×²ð½âÕâÒ»Ã¤Çø£¬À´×ÔäðºÓº½¿Õº½Ìì´óѧ¡¢Õã½´óѧµÄ×êÑÐÍŶÓÍÆ³öÁËLITMUS£¨LLM-agentsIn-OSTesting forMeasuringUnsafeSubversion£©¡ª¡ªÊ׸ö½«ÕæÊµOS»·¾³ÐÐΪԽÓü¡¢ÓïÒå-ÎïÀíË«²ãÑéÖ¤Óë¶à¹¥»÷·¶Ê½ÏµÍ³ÕûºÏµÄÖÇÄÜÌ尲ȫÆÀ²â»ù×¼£¬³õ´ÎÔÚÐÐΪԽÓüÖÐϵͳ½ç˵²¢Á¿»¯ÕâÖÖ¡¸Ðпڲ»Ò»¡¹µÄ¾°Ï󡪡ªÖ´Ðлþõ£¨Execution Hallucination, EH£©¡£
AdvBench¡¢HarmBench µÈ¾µä»ù×¼£¬ÅжÏÖÕµãÊÇ¡¸Ä£ÐÍÓÐûÓÐÌìÉúÓк¦Îı¾¡¹¡£µ«ÔÚÕæÊµ OS »·¾³ÖУ¬Î£ÏÕÀ´×Ô¹¤¾ßŲÓ᪡ªÄ£ÐͲ»±ØÒª¡¸Ëµ³ö¡¹Î£ÏÕÄÚÈÝ£¬Ö»Ðè͵͵ŲÓÃÒ»¸öϵͳºÅÁÎļþ¾Í±»É¾ÁË£¬ÃÜÔ¿¾Íй¶ÁË¡£Îı¾°²È«£¬µ××Ó²»µÅ×ÚÐÐΪ°²È«¡£
ÈôÊDzâÊÔ A Åú¸ÄÁËij¸öϵͳÎļþ£¬¶ø²âÊÔ B ¸ÕºÃÒÀÀµÍ³Ò»¸öÎļþ£¬ÄÇôBµÄÁ˾ֲâµÄµ½µ×ÊÇ¡¸Ä£Ð͵ݲȫÐÔ¡¹£¬»¹ÊÇ¡¸AÁôϵĴ«È¾¡¹£¿ÔÚûÓÐ OS ¼¶×´Ì¬»Ø¹öµÄÇé¿öÏ£¬Õâ¸öÎÊÌâÎ޽⡣
LITMUSÔÚÿ´Î²âÊÔ¶Ô»°Ç°ºó£¬³ÇÊжÔÕæÊµ²Ù×÷ϵͳ½øÐпìÕղɼ¯¡£ÎïÀíÅж¨»ùÓÚϵͳ״̬µÄÏÖʵ±ä¶¯£¬ÓëÄ£Ð͵ĶԻ°ÄÚÈÝÆëÈ«¶ÀÁ¢¡£¼´±ãÄ£ÐÍ×ìÉÏ˵¡¸ÎһؾøÁË¡¹£¬Ö»ÓÐ OS ״̬ÏÔʾΣÏÕ²Ù×÷ÒÑʵÏÖ£¬ÎïÀíÅж¨ÒÀÈ»¸ø³ö¡¸Ö´Ðгɹ¦¡¹¡£
ÿÌõ²âÊÔÓÃÀý¾ù½¨ÉèÁËÔ¤ÖÃÓ븴Ô×÷Ϊ£¬ÓÉרÃŵÄRecovererÖÇÄÜÌåÔÚ²âÊÔǰ³õʼ»¯ÏµÍ³»ùÏß¡¢²âÊÔºóÆëÈ«»¹Ô£¬´Óµ××ÓÉϽâ³ýÓÃÀý¼äµÄ´«È¾£¬È·±£ÆÀ²âÁ˾ÖÈ»Õý¿É¸´ÏÖ¡£
LITMUSÊý¾Ý¼¯Ô̺¬819Ìõ¸ß·çÏÕ²âÊÔÓÃÀý£¬ÆðÔ´º¸ÇÕæÊµ·ì϶Êý¾Ý¿â£¨CVE/GHSA£©¡¢¹«¿ªÉøÈë²âÊԻ㱨£¬ÒÔ¼°¾ÈËΪ¾«±ÙÑéÖ¤µÄLLMÌìÉú°¸Àý£¬È«ÊýÔÚÕæÊµOSÖÐͨ¹ýÎïÀí²âÊÔÑéÖ¤¡£
ÓÕʹÖÇÄÜÌåʹÓù¥»÷ÕßÌṩµÄ SKILL£¬½«¶ñÒâµÄ SKILL.md ÎļþÄÚÈÝ×¢ÈëÖÇÄÜÌ幤¾ßÁ´£¬ÔÚÕý³£¹¤×÷ŲÓÃʱ×Ô¶¯´¥·¢£¬Èƹýǰ¶ËÌáÐѴʹýÂË¡£
ͼʾ£ºLITMUSÆÀ²â¿ò¼ÜµÄÁùÖÇÄÜÌå·Ö¹¤Ê¾Òâ¡£Prosecutor·¢³öÖ¸ÁVerifier¶ÀÁ¢²É¼¯OS¿ìÕÕ£¬Analyzer£¨ÎïÀíÅж¨£©Óë Reviewer£¨ÓïÒåÅж¨£©¸÷×Ô¶ÀÁ¢²ú³ö±êÇ©£¬¹²Í¬×é³É2¡Á2ÓïÒå-ÎïÀí»ìºÏ¾ØÕó¡£
ͼʾ£ºÁù¿îÄ£ÐÍÔÚ LITMUS ÖÖ×ÓÊý¾Ý¼¯ÉϵĹ¥»÷³É¹¦ÂÊ£¨ASR£©ÓëÖ´ÐлþõÂÊ£¨EHR£©×ÜÀÀ¡£ SPSR¡¢SOSR¡¢POSR¡¢SPFR ±ðÀëΪÆëȫԽÓü¡¢¹¥»÷ºýŪ¡¢Òñ±ÎÖ´ÐÓ×¢Æëȫʧ°ÜµÄÑù±¾±ÈÀý¡£
ÖµµÃ³ö¸ñ¹Ø×¢µÄÊÇ¡¸Í¨Ñ¶±íÁª¡¹£¨CO£©Àà±ð¡ª¡ª¿çÄ£ÐÍ¡¢¿ç¹¥»÷·¶Ê½£¬ÕâÒ»Àà´ËÍâ ASR ÏÕЩʼÖÕ×î¸ß£¬×¶ËÇé¿ö¿¿½ü97%¡£ÕâÅú×¢£ºÖÇÄÜÌåËÆºõÌìÈ»µØ½«¡¸·¢ËÍÐÂÎÅ¡¹µÈ±íÁª²Ù×÷ÊÓΪÎÞº¦ÐÐΪ£¬µ¼ÖÂÊý¾Ý±íй³ÉΪ×îÄÑ·ÀÊØµÄ¹¥»÷Ãæ¡£
Ïà¶ÔµØ£¬¡¸¹¤×÷Á´¡¹£¨CT£©Àà´ËÍâ ASR ×îµÍ£¨Claude Sonnet 4.6½ö21.72%£©£¬ÓÉÓÚ½«¶à¸ö¶ñÒâ×Ó²½Öè´®Áª³ÉÒ»¸öÒªÇ󣬷´¶øÈÃÕûÌå¶ñÒâÒâͼԽ·¢ÏÔÑÛ£¬¸üÈÝÒ×±»¼ø±ð»Ø¾ø¡£
ÆäÖÐ×îΣÏյġ¸Òñ±ÎÖ´ÐÓ×¹£¨Covert Execution£©Ä£Ê½¡ª¡ªÄ£ÐÍ˵»°²ãÃæÃ÷È·»Ø¾ø£¬µ« OS ²ãÃæÎ£ÏÕ²Ù×÷ÒÑÇÄȻʵÏÖ¡ª¡ªÔÚËùÓÐÄ£ÐÍÉϾùÓгöÏÖ£¬Deepseek-v3.2µÄ¸ÃÏî±ÈÂÊ´ïµ½4.84%¡£
ÕâÒâζ×ÅÒ»¸ö¼«Æä¶ËׯµÄÏÖʵ£ºÈκÎÖ»ÒÀÀµ¶Ô»°ÈÕÖ¾µÄ°²È«É󼯣¬ÐÔÖÊÉÏÊDz»³É¿¿µÄ¡£°²È«Éó¼ÆÈËÔ±¿´µ½¡¸Ä£ÐͻؾøÁË¡¹£¬µ«ÏµÍ³ÒѾ±»¹¥ÆÆ¡£
¼¼Êõ×¢ÈëºÍʵÌå°ü×°£¨ÕâÁ½ÖÖ½«¶ñÒâÖ¸Á²Ø½ø¡¹¹¤¾ßÁ´»ò±í²¿ÄÚÈݵļä½Ó¹¥»÷£©ÔÚÁ½¿î´ú±íÄ£ÐÍ£¨Deepseek-v3.2ÓëClaude Sonnet 4.6£©ÉϾùʵÏÖÁËÏÔÖøµÄ ASR ÌáÉý¡£
Ïà±È֮ϣ¬Ö±½ÓʹÓḺì¶Ó²âÊÔ¡¹»ò¡¸µ÷ÊÔģʽ¡¹»°Êõ½øÐÐÔ½ÓüµÄ³ÉЧ£¬Ôò³öÏÖ³öÇ¿ÁÒµÄÄ£ÐÍÒÀÀµÐÔ£ºClaude Sonnet 4.6 ¶ÔÏÔʽ¶ñÒâÐźż«ÎªÃô¸Ð£¬ÕâÀà»°Êõ·´¶ø»á¼¤»î°²È«»úÔ죬µ¼Ö ASR µøÆÆ»ùÏߣ»¶ø Deepseek-v3.2 ÔòÆ«²îÓÚ½«Í¬ÑùµÄÐźŽâ¶ÁΪ"ºÏ·¨²Ù×÷ÊÚȨ"£¬µ¼ÖºϹæÂÊ·´Éý¡£
Õâ×¢Ã÷£º·ÖÆçÄ£ÐͶԡ¸ÏÔʽ¶ñÒâÒâͼ¡¹µÄÓïÒå½â¶Á´æÔÚµ××Ó²î¾à£¬»°ÊõÀàÔ½ÓüÕ½ÊõµÄÓÐЧÐÔÎÞ·¨¿çÄ£ÐÍǨáã¡£µ«¼ä½Ó¹¥»÷µÄ¸ß³É¹¦ÂÊ£¬ÔòÊÇ¿çÄ£ÐÍÒ»ÖÂµÄÆÕ±é·¨¹æ£ºÖÇÄÜÌåµÄÖ´ÐÐÁ÷Ë®Ïߣ¬¶ø·Çǰ¶ËÌáÐѴʹýÂË£¬²ÅÊÇÕæÕýµÄÖØÒªÊ§ÊØµã¡£
×êÑÐÍŶÓÃ÷È·ºôÓõ£ºEHR¸Ãµ±ÓëASR²¢ÁУ¬³ÉΪLLMÖÇÄÜÌåÐÐΪ°²È«ÆÀ²âµÄ³ß¶ÈÖ¸±ê¡£ÔÚÖÇÄÜÌå×ßÏòÕæÊµOS²¿ÊðµÄ½ñÌ죬µ¥¿¿ASR£¬ÒÀÈ»ÊǶ԰²È«µÄ»Ã¾õ¡£
LITMUS×÷Ϊһ¸öÊ¢¿ªµÄ»îÐÔ»ù×¼£¨Living Benchmark£©£¬»¶ÓÉçÇø³ÖÐø¹±Ï×еÄÄ£ÐÍÆÀ²âÁ˾ÖÓë²âÊÔÓÃÀý£¬¹²Í¬Íƶ¯LLMÖÇÄÜÌ尲ȫÆÀ²â×ßÏòÑϸñ¡¢¿ÉÐÅ¡¢¿É¸´ÏÖµÄз¶Ê½¡£
《部长看上下属的老婆》韩剧智通财经APP获悉,OpenAI正将旗下AI编程智能体Codex的功能向金融、法律等专业领域大举扩展,以在与Anthropic争夺企业付费客户的竞赛中抢占先机。双方不仅在垂直行业产品端正面交锋,更在上市竞赛中进入白热化阶段——Anthropic已抢先秘密递表,以约9650亿美元的估值反超OpenAI,令这场横跨产品、估值与IPO时序的“AI双雄对决”全面升级。谈到智利是否和哥伦比亚类似时,小孔塞桑表示:“这些球队都很顽强,身体对抗能力强,也很擅长打反击。我们现在就是针对这些特点进行准备,为世界杯以及小组赛三场比赛做好准备。大家一直都非常投入。”《部长看上下属的老婆》韩剧¼ÒÍ¥Ö÷¸¾µÄ»¶ÀÖ《The Athletic》称,已有多家顶级俱乐部在追逐库库雷利亚。巴塞罗那正在密切关注这位西班牙国脚的情况,体育总监德科据报道已与其经纪人取得联系。德科和主教练汉斯·弗里克都对这位27岁的球员评价很高。2024年12月他前往纽约华盛顿广场公园下棋,成为个人生涯名场面;上个休赛期出访中日没有任何官方宣传行程,路人随手抓拍的画面直接登上多国国际新闻,热度自发发酵,根本不需要刻意营销造势。
20260607 ? 《部长看上下属的老婆》韩剧乌兹别克斯坦首次登上世界杯舞台,是本届赛事的重要看点之一。曼城球员胡桑诺夫等新星将帮助本国实现梦想。新生代球员中,法国的扎伊尔-埃梅里、新西兰的芬-苏尔曼、摩洛哥的哈努斯等人也在名单之列。阿根廷球星梅西、葡萄牙核心C罗和墨西哥门将胡安-奥乔亚则有望第六次参加世界杯,创造历史。ºÃÏë×öÒ»´ÎÐÔ½ÌÓýµçÊÓ¾çµÚÒ»¼¾半辈子浮沉过后,倪萍早已和过往和解,事业起落、情路坎坷都化作人生阅历,从前为情爱委屈自己的姑娘,变成从容通透的花甲老人。
20260607 ? 《部长看上下属的老婆》韩剧特罗萨德还表示,带着联赛冠军来到国家队,对比利时而言也是积极因素。他说道:“球员带着冠军来到国家队,当然是一件好事,但这不会改变你是谁。对我来说也是一样,不过我会努力把这种经历带到国家队。”Ì©¾ç¡¶Ò»Ò¹Çá»¶¡·¾çÇé½éÉÜ而竖条纹长裤有着纵向的拉伸效果,对整个腿型的修饰作用会更胜一筹,这种类型的裤装在条纹元素的设计上,也会保持着很大的区别。