¡¡¡¡mt4ÀúÊ·Êý¾ÝÔÆÖªÉùɽº£´óÄ£ÐÍ×ÛºÏÐÔÖÐÓ¢ÎÄË«Óï¿Í¹ÛÆÀ²âµÃ·Ö53.6£¨ÔÌâÄ¿£ºOpenCompass×îÐÂÆÀ²â°ñµ¥³ö¯£¬É½º£´óÄ£×ÓõÒÉí»·Çò³§É̵ÚÁù£©
¡¡¡¡¼´ÈÕ£¬É½º£´óÄ£×Ó´ï³ÉÐÂÒ»ÂÖµü´úÉý¼¶£¬²¢ÕýÔÚ×îеÄOpenCompass´óÄ£×ÓÆÀ²âÖв©µÃ¹éÄÉÐÔÖÐÓ¢ÎÄË«Óï¿Í¹ÛÆÀ²âµÃ·Ö53.6¡¢¹éÄÉÐÔÖÐÎÄÖ÷¹ÛÆÀ²âµÃ·Ö42.2µÄÓÅÒìÊÕЧ£¬ÕýÔÚ²åÊÖ²âÆÀµÄ»·Çò´óÄ£×Ó³§ÉÌÖÐÅÅÃûµÚÁù¡£ÆÀ²â½á¹ûÏÔʾ£¬ÆäÕýÔÚÖÐÓ¢ÎÄË«Óï¿Í¹ÛÆÀ²âÖеÄ̸»°¡¢³£Ê¶¡¢ÍÆÀí²ÅÖÇ£¬ÕýÔÚ¹éÄÉÐÔÖÐÎÄÖ÷¹ÛÆÀ²âÖеĴ´×÷²ÅÖÇÒѳ¬Ô½GPT-4¡£
¡¡¡¡¶¯×÷ÉϺ£È˹¤ÖÇÄܳ¢ÊÔÊÒ¿ªÔ´µÄ´óÄ£×ÓÆÀ²âÌåÀý£¬OpenCompass¼«Á¦ÓÚ̽Ѱ×îÏȱ²µÄ̸»°ÓëÊÓ¾õÄ£×Ó£¬Îª¹¤Òµ½çºÍÉÌÁ¿ÉçÇø¹©Ó¦È«ÅÌ¡¢¿Í¹Û¡¢ÖÐÁ¢µÄÆÀ²â²Î¿¼£¬´Ó¶ø×ñÕÕ²î±ð²ÅÖÇά¶ÈµÄÆÀ²â·ÖÊý½Ìµ¼´óÄ£×ÓµÄÓÅ»¯ÓëÏȽø¡£
¡¡¡¡OpenCompass Ô¶Ȱñµ¥´Ó¸ùèܲÅÖǺ͹éÄɲÅÖǵĴòËãÆð³Ì£¬¹¹ÔìÁËÒ»Ì׸ßÖʵصÄÖÐÓ¢ÎÄË«ÓïÆÀ²â»ù×¼£¬º¸Ç̸»°ÓëÆÊÅС¢³£Ê¶ÓëÂß¼ÍÆÀí¡¢Êýѧ´§²âÓëʹÓá¢ÖÚ±à³Ì̸»°´úÂë²ÅÖÇ¡¢ÖÇÄÜÌå¡¢´´×÷Óë¶Ô»°Áù¸ö·½Ãæ¶þÊ®ÓàÏîϸ·ÖÖ°Ôð£¬Á¦Õù¶Ô½üÆÚµÄÖ÷Á÷¿ªÔ´Ä£×ÓºÍóÒ× API Ä£×Ó¾ÙÐÐÈ«ÅÌÆÀ²âÁ˽⡣
¡¡¡¡´Ë´Î°ñµ¥ÄÒÀ¨ÁË°î±íÀï 40 ¸ö´ó̸»°Ä£×Ó£¬ÆÀ²âÊý¾Ý¼¯²ÉÓÃÖÐÓ¢ÎıÕÔ´Êý¾Ý¼¯£¬°üÂÞ¹éÄÉÐÔÖÐÎÄÖ÷¹ÛÆÀ²âºÍ¹éÄÉÐÔÖÐÓ¢ÎÄË«Óï¿Í¹ÛÆÀ²â¡£ÔÆÖªÉùɽº£´óÄ£×Ó¹éÄÉÐÔÖÐÓ¢ÎÄË«Óï¿Í¹ÛÆÀ²âµÃ·Ö53.6£¬¹éÄÉÐÔÖÐÎÄÖ÷¹ÛÆÀ²âµÃ·Ö42.2£¬ÅÅÃû°î²ú´óÄ£×Ó³§É̵ÚËÄ¡¢»·Çò´óÄ£×Ó³§É̵ÚÁù¡£´Ó¸÷ÏîÊý¾Ý¿´£¬ÆäÕýÔÚ̸»°¡¢³£Ê¶¡¢ÍÆÀí¡¢´´×÷µÈ·½Ã渡ÏÖÓÅÒ죬´ó°×³öÇ¿¾¢µÄ¹éÄÉÊÆÁ¦¡£
¡¡¡¡¶øɽº£´óÄ£×ÓÖ®ÓÚÊDz»·ÁÕýÔÚÖÚÖÚ´óÄ£×ÓÖÐÍÑÓ±¶ø³ö£¬µÃÒæÓÚÆäÕýÔÚ¼¼ÒÕÉϵÄһϵÁиĽøºÍÓÅ»¯——ÕýÔÚ±¾´Î´óÄ£×ÓÉý¼¶ÖУ¬ÔÆÖªÉùÒýÈëÁË×ÔÎÒÑݽøÆ«ºÃ½øÐÞ¼¼ÒÕ£¬Ê¹µÃ´óÄ£×Ó²»·Áͨ¹ý×ÔÎÒ¶ÔÞÄ΢µ÷£¨SPIN£©´ï³É×ÔÎÒÌá°Î¡£ÕýÔÚ¸ßÖʵØÊý¾ÝÌìÉú·½Ã棬ÔÆÖªÉù¼¯ºÏRLHFºÍRLAIF¸ñʽ£¬ÌìÉú¾Þ¶îÆ«ºÃÊý¾Ý£¬²¢²ÉÓÃk-Center GreedyË㷨ȷ±£Êý¾ÝµÄÖÚÑùÐÔºÍÕڸǶȡ£ÁíÍ⣬ÔÆÖªÉù»¹ÖþÉèÁËÒ»¸öÈ«Å̵Ä×ÔÔ¸»¯ÆÀ²âÌåÀý£¬ÒÔ´Ë´ï³É¶ÔÄ£×Ó¹¦Ð§µÄËÙ½ÝÆÀ²â£¬½ø¶øÔ®°ï´óÄ£×ӵĵü´úºÍÓÅ»¯¡£
¡¡¡¡×Ô2023Äê5Ô°䲼ÒÔºó£¬É½º£´óÄ£×ÓÓÀÔ¶±£Áô¸ßËÙµü´ú£¬ÆäÕýÔÚC-Eval»·Çò´óÄ£×Ó¹éÄÉÐÔÆÀ²â¡¢CCKS 2023Ò½ÁÆ´óÄ£×ÓÆÀ²âµÈ¾Þ×ÓÈüÊÂÉÏÂÅ»ñ¼Ñ¼¨£¬Â¶³ö³öÈ«Å̵ÄͨÓòÅÖǺÍ׿×ŵÄרҵ²ÅÖÇ£¬¿ÐýõÒÉí´óÄ£×ÓµÚÒ»Ìݶӡ£´Ë´ÎÆÀ²â£¬ÊÇɽº£´óÄ£×ӽܳöÊÆÁ¦µÄÓÖÒ»´ÎÓ¡Ö¤£¬Ò²½«Çý²ßÆäÁ¬½Ó¼Ó¿ìµü´ú£¬Ò»Á¬Òý¾±´óÄ£×ÓÑз¢ÓëÂäµØ¡£
¡¡¡¡¶¯×÷ÖаîAGI¼¼ÒղƸ»»¯µÄÏÈÐÐÕߣ¬ÔÆÖªÉùÓÚ2016ÄêÅüÍ·´òÔìAtlasÈ˹¤ÖÇÄܸùèܲ½Ö裬²¢ÒÔ´ËΪ¸ùèÜ£¬¹¹ÖþÔÆÖª´óÄÔ(UniBrain)¼¼ÒÕÖÐ̨——ÒÔɽº££¨UniGPT£©Í¨ÓÃÈÏÖª´óÄ£×ÓΪÖÐÊ࣬¼¯ºÏÖÚģ̬¸ÐÖªÓëÌìÉú¡¢³£Ê¶Í¼Æס¢ÎïÁªÆ½Ì¨µÈÖÇÄÜ×é¼þ£¬ÎªÔÆÖªÉù´ÏÓ±ÎïÁª¡¢´ÏÓ±Ò½ÁÆ¡¢´ÏÓ±½»Í¨µÈÓªÒµ¹©Ó¦¸ßЧµÄ²úÎﻯ֧Öù£¬Ò»Á¬Íƽø“U(ÔÆÖª´óÄÔ)+X(ʹÓó¡¾°)”Õþ²ß×éÖ¯¡£
¡¡¡¡É½º£´óÄ£×Ó¶¯×÷ÔÆÖª´óÄÔµÄÖÐÊ࣬Æä²ÅÖÇÌåÀýº¸Ç̸»°ÌìÉú¡¢Ì¸»°ÆÊÅС¢³£Ê¶ÎÊ´ð¡¢ Âß¼ÍÆÀí¡¢´úÂë²ÅÖÇ¡¢Êýѧ²ÅÖǵȡ£ÁíÍ⣬ΪÌáΰ°¶Ä£×ÓÕýÔÚʵÔÚ³¡¾°µÄʹÓÃÂäµØË®×¼£¬É½º£´óÄ£×ÓÕýÔÚͨÓòÅÖǸùèÜÉÏ£¬¹®¹ÌÎïÁª¡¢Ò½ÁÆ¡¢½»Í¨µÈÐÐÒµ²ÅÖÇ£¬¼«Á¦Îª¿Í»§¹©Ó¦¸üÖÇÄÜ¡¢¸üÁæÀþµÄ°ìÀí¼Æ»®£¬¼Ó¿ìǧÐаÙÒµµÄ´ÏÓ±»¯Éý¼¶¡£
¡¡¡¡Ä¿Ç°£¬ÔÆÖªÉùÕýÒÀÍÐɽº£´óÄ£×Ó¼¼ÒÕ²ÅÖǵļӿìµü´ú£¬½¥½¥³¤Ô¶µ½´ÏÓ±Ò½ÁÆ¡¢´ÏÓ±×ù²Õ¡¢´ÏÓ±¹ì½»¡¢´ÏÓ±ÕþÎñµÈʵÔÚ³¡¾°£¬¼ÌÐø¿ªÊÍAGIµÄ¸üÖÚÄܹ»¡£
¡¡¡¡ÕýÔÚ´ÏÓ±Ò½ÁÆÖÜΧ£¬ÔÆÖªÉù»ùÓÚɽº£´óÄ£×Ó´òÔìµÄÃÅÕﲡÀúÌìÉú±àÔìÒÑÂäµØ±±¾©ÓѺò¡Ôº£¬ÓÐÓÃÌá°ÎÁ˲¡Àú׫д·þ´ÓÓëÖʵأ»ÕýÔÚ´ÏÓ±ÕþÎñÖÜΧ£¬ÔÆÖªÉùÂÊÏÈ¿ª²É³öÉîÛÚÊ׸öÕþÎñ´óÄ£×Ó“ÁúÖªÕþ”,È«³¡¾°¸³ÄÜÌá°ÎÕþ¸®¹ÜϽˮ׼£»ÕýÔÚ´ÏÓ±×ù²ÕÖÜΧ,ÔÆÖªÉùͨ¹ýɽº£´óÄ£×Ó¸³ÄܼªÏéî£À¶Æû³µ´òÔì¸ÐÇéÐÍÐéÄâ°ïÊÖ,ΪÓû§´øÀ´È«³µÈ«³¡¾°µÄÇéÌÕȾÖÇÄܽ»»¥ÌåÑ飻ÕýÔÚ´ÏÓ±¹ì½»³¡¾°,ÔÆÖªÉùɽº£´óÄ£×Ó“Èëפ”ÄÏÄþ»ð³µ¶«Õ¾,´òÔì¸ü¾ßÈËÐÔ»¯µÄÖÇÄÜ¿Í·þ,°ïÁ¦´ï³É»»³Ë½ÚµãÎÞ·ì¸ßЧ»»³Ë,ΪÂÿʹøÀ´¸üËÙËÙ¡¢¸ü·½±ãµÄ³öÐÐÌåÑ飬ÁªÏµ°¸ÀýÒ²ÓÚ½üÆÚ±»ÑëÊÓ¡¶ÖØÐÄ·Ã˵¡·À¸Ä¿±¨µÀ¡£
¡¡¡¡¸ú×Å´óÄ£×Ó¼¼ÒյļÌÐøÏȽøºÍ¸Ä½ø£¬ÔÛÃÇÓгö´¦ÐÅÍУ¬ÌìϽ«±äµÃÔ½·¢ÖÇÄܺͻ¥Áª¡£ÔÛÃÇÊغò£¬É½º£´óÄ£×Ó²»·Á´ï³É¸üÖÚеijåÆÆ£¬Æôʾ¸ü¹ã¸üÉîµÄ¼¼ÒÕî³Óò£¬ÍØÕ¹¸üÖÚÉÐδ´¥¼°µÄʹÓó¡¾°¡£
¡¡¡¡ÒÔÉÏʵÖÊÓë֤ȯ֮ÐÇ̬¶ÈÎÞ±Õ¡£Ö¤È¯Ö®ÐÇ°ä²¼´ËʵÖʵÄ×ÚÖ¼ÕýÔÚÓÚÉ¢²¥¸üÖÚÐÂÎÅ£¬Ö¤È¯Ö®ÐǶÔÆä¶ÃµØ¡¢¼ø¶¨±£ÁôÖÐÁ¢£¬²»È·±£¸ÃʵÖÊ£¨°üÂÞµ«²»ÏÞÓÚÎÄ×Ö¡¢Êý¾Ý¼°Í¼Í⣩ÍêÈ«»òÕß²¿ÃÅʵÖʵÄÇÐÈ·ÐÔ¡¢ÊµÕýÔÚÐÔ¡¢ÍêÈ«ÐÔ¡¢ÓÐÓÃÐÔ¡¢ÊµÊ±ÐÔ¡¢Ô´´ÐԵȡ£ÁªÏµÊµÖʹý´íÖîλ¶ÁÕß×é³ÉÈκÎͶ×ʳ«µ¼£¬¾Ý´Ë²Ù×÷£¬Î£¼±×Ôµ£¡£¹ÉÊÐÓÐΣ¼±£¬Í¶×ÊÐèׯÖØ¡£Èç¶Ô¸ÃʵÖÊÉú»î·¡ÑÔ£¬»ò·¢¾õÎ¥·¨¼°²»Á¼ÐÂÎÅ£¬Çë·¢ËÍÓʼþÖÁ£¬ÔÛÃǽ«µ÷ÀíºËʵÊÕÊ°¡£