×ðÁú¿­Ê±¹ÙÍøµÇ¼

ÆóÒµÌìÉúʽ AI Ó¦Óõļܹ¹Ä£Ê½£ºDSFT¡¢RAG¡¢RAFT ºÍ GraphRAG

ÆóÒµ¼Ü¹¹ÊÇ it ϵͳµÄ½¹µã£¬ÎªÊµÏÖ×é֯ĿµÄÌṩ»ù´¡¹¹½¨¿é¡£×î¼Ñģʽ¿É×ÊÖú¼Ü¹¹ÍŶӸÅÊö¼Ü¹¹Ä£Ê½ºÍͨÓÿò¼Ü£¬¼ò»¯¹¤³ÌÍŶӵÄÊÂÇé¡£¹ØÓÚ¹¹½¨ÌìÉúʽ ai Ó¦ÓóÌÐò£¬ÓÐËĸö³£¼û¼Ü¹¹Ä£Ê½£ºÁìÓòÌض¨Î¢µ÷ (dsft)£ºÓÃÓÚ×éÖ¯Êý¾ÝÅàѵ llm£¬±¬·¢¸ßÖÊÁ¿ÇÒÌض¨ÁìÓòµÄÄÚÈÝ¡£¼ìË÷ÔöÇ¿ÌìÉú (rag)£º¾­¼ÃÇÒ¸ßЧ£¬¿ÉÓÃÓÚ¹¹½¨ gen ai Ó¦ÓóÌÐò£¬Æ¾Ö¤×éÖ¯Êý¾ÝÌìÉúÄÚÈÝ¡£¼ìË÷Ôöǿ΢µ÷ (ra-ft)£ºÍŽá rag ºÍ΢µ÷ÒªÁ죬Ìá¸ß llm ´ÓÓïÒåÉÏÏà¹ØºÍ²»Ïà¹ØÎĵµÖÐÑ¡ÔñÄÚÈݵÄÄÜÁ¦¡£ÖªÊ¶Í¼Æ×/rag ͼÆ×£º½«ÖªÊ¶Í¼Æ×Êý¾Ý¿â¼¯³Éµ½ rag ϵͳÖУ¬ÔöÇ¿ llm µÄÉÏÏÂÎÄÃ÷È·ºÍÍÆÀíÄÜÁ¦¡£

×î¼ÑÉè¼ÆµÄÆóÒµ¼Ü¹¹ÊÇÈκÎ×éÖ¯ IT ϵͳµÄÖ§Öù£¬ËüÖ§³ÖʵÏÖ×é֯ӪҵĿµÄµÄ»ù´¡¹¹½¨¿é¡£¼Ü¹¹°üÀ¨×î¼Ñʵ¼ù¡¢Ã÷È·¸ÅÊöµÄÕ½ÂÔ¡¢Í¨Óÿò¼ÜºÍÖ¸µ¼Ä¿µÄ£¬¹©¹¤³ÌÍŶӺÍÆäËûÀûÒæÏà¹ØÕßÑ¡Ôñ׼ȷµÄ¹¤¾ßÀ´Íê³ÉʹÃü¡£ÆóÒµ¼Ü¹¹Ö÷ÒªÓÉÖ§³ÖÓªÒµÏߵļܹ¹ÍŶÓÖÎÀí¡£ÔÚ´ó´ó¶¼×éÖ¯ÖУ¬¼Ü¹¹ÍŶÓÈÏÕæ¸ÅÊö¼Ü¹¹Ä£Ê½ºÍͨÓÿò¼Ü£¬Õ⽫ÓÐÖúÓÚ¹¤³ÌºÍ²úÆ·ÍŶӲ»±ØÆÆ·ÑÊýСʱµÄ¾«Éñ¾ÙÐп´·¨ÑéÖ¤£¬¶øÊÇ×ÊÖúËûÃǽÓÄÉ»ùÓÚģʽÉè¼Æ½¹µã¹¹½¨¿éµÄÕ½ÂÔ¡£

ÓÉÓÚÌìÉúʽ AIÕýÔڸıäÕû¸öÃûÌ㬴ó´ó¶¼×é֯ҪôÕýÔÚ¹¹½¨»ùÓÚÌìÉúʽ AI µÄÓ¦ÓóÌÐò£¬ÒªÃ´ÕýÔÚ½«ÌìÉúʽ AI µÄ¹¦Ð§»òÌØÕ÷¼¯³Éµ½ÆäÏÖÓÐÓ¦ÓóÌÐò»ò²úÆ·ÖС£ÔÚ±¾ÎÄÖУ¬ÎÒÃǽ«ÉîÈë̽ÌÖ¿ÉÓÃÓÚ¹¹½¨ÌìÉúʽ AI ½â¾ö¼Æ»®µÄ³£¼û¼Ü¹¹Ä£Ê½¡£ÎÒÃÇ»¹½«ÌÖÂÛÖÖÖÖÆóÒµ¼¶Õ½ÂÔ£¬ÒÔ±ãΪ׼ȷµÄÓÃÀýÑ¡Ôñ׼ȷµÄ¿ò¼Ü¡£

ģʽ 1£ºÁìÓòÌض¨Î¢µ÷£¨DSFT£©

´óÐÍÓïÑÔÄ£×Ó (LLM)ÔÚÆóÒµÌìÉúʽ AI ¼Ü¹¹ÖÐÊÎÑÝ×ÅÖ÷ÒªµÄ¹¹½¨¿é¡£LLM ÈÏÕæƾ֤Æä½ÓÊܵÄѵÁ·ºÍËùÕÆÎÕµÄ֪ʶÌìÉúÆæÒìµÄÄÚÈÝ¡£¿ÉÊÇ£¬OpenAI¡¢Microsoft »ò¿ªÔ´ÉçÇøµÈ¹©Ó¦ÉÌÌṩµÄ LLM ȱ·¦ÆóÒµÊý¾Ý֪ʶ¡£ÓÐʱÔÚ×éÖ¯ÖУ¬ËûÃÇÓÐ×Ô¼ºµÄ±ê×¼ºÍÔ­Ôò£¬ÔÚÌìÉúÄÚÈÝʱҲӦ×ñÕÕÕâЩ±ê×¼ºÍÔ­Ôò¡£ 

ΪÏàʶ¾ö´ËÁìÓòµÄÓÃÀý£¬Î¢µ÷ÊÇÎÒÃÇ¿ÉÒÔʹÓõÄÕ½ÂÔÖ®Ò»¡£Î¢µ÷Éæ¼°ÔÚ½ÏСµÄרҵÊý¾Ý¼¯ÉϽøÒ»²½ÑµÁ·Ô¤ÏÈѵÁ·µÄ LLM£¬¸ÃÊý¾Ý¼¯¾­ÓÉÈ«ÐÄÌôÑ¡£¬¾ßÓÐÆóÒµÆæÒìµÄÊý¾Ý¡¢±ê×¼ºÍÔ­Ôò¡£´ËÀú³ÌÓÐÖúÓÚ¶¨ÖÆÄ£×ÓµÄÊä³ö£¬Ê¹Æä¸üÇкÏ×éÖ¯µÄÒªÇ󣬴ӶøÌá¸ßÆäÔÚÆóÒµÇéÐÎÖеÄÊÊÓÃÐÔºÍÓÐÓÃÐÔ¡£

ʲôÊÇÌض¨ÁìÓò΢µ÷£¿

ÕýÈçÊʲÅËùÊö£¬Î¢µ÷´óÐÍÓïÑÔÄ£×Ó (LLM) Éæ¼°µ÷½âÔ¤ÏÈѵÁ·µÄÓïÑÔÄ£×Ó£¬Ê¹ÆäÔÚÌض¨Ê¹Ãü»òÁìÓòÌåÏÖ¸üºÃ¡£ÕâÊÇͨ¹ýʹÓÃÓɳɶÔÊý¾Ý×é³ÉµÄ½ÏС¡¢×¨ÃŵÄÊý¾Ý¼¯½øÒ»²½ÑµÁ·Ä£×ÓÀ´ÊµÏֵġ£ÕâЩ³É¶ÔÊý¾ÝÊÇÏÔʾËùÐèÐÐΪ»òÊä³öµÄʾÀý¡£

ÔÚ΢µ÷Àú³ÌÖУ¬Ä£×ӵIJÎÊý»á¾ÙÐиüУ¬ÕâÓÐÖúÓÚËõСԤѵÁ·Ä£×ÓµÄÒ»Ñùƽ³£ÄÜÁ¦ÓëʹÃüµÄÌض¨ÐèÇóÖ®¼äµÄ²î±ð¡£´ËÀú³Ì¿ÉÌá¸ßÄ£×ÓµÄÐÔÄÜ£¬Ê¹ÆäÔ½·¢×¼È·²¢ÇкÏÈËÀà¶Ô¸ø¶¨Ê¹ÃüµÄÆÚÍû¡£

DSFT ģʽ¿É×÷Ϊ×î¼ÑºòÑ¡µÄÓÃÀý

ÔÚ×é֯׷Çó¸üרҵºÍ¸üÌض¨ÁìÓòµÄÄÚÈÝÌìÉúʱ£¬Î¢µ÷»áÊ©Õ¹¾«²Ê×÷Óá£ÈôÊÇÓÃÀýÒªÇóÔÚÌìÉúÄÚÈÝʱ×ñÕÕÌض¨µÄ±ê×¼ºÍÆøÑæÆøÑ棬ÄÇô¡°Î¢µ÷¡±¾ÍÊǹ¤¾ßÏäÖеľø¼Ñ¹¤¾ß¡£

ÀýÈ磬¼ÙÉè¿Í»§Ð§ÀͲ¿·ÖÏëÒª¿ª·¢Ò»¸ö×Ô¶¯»¯ÊÂÇéÁ÷½â¾ö¼Æ»®À´È¡´úÊÖ¶¯Á÷³Ì¡£ÔÚÊÖ¶¯Á÷³ÌÖУ¬ÏÖ³¡¿Í»§Ð§ÀÍÊðÀí½«»Ø¸´Æä¿Í»§»òDZÔÚ¿Í»§¶ÔÆä²úÆ·»òЧÀ͵ÄÅÌÎÊ¡£ÏÖÔÚ£¬ÏÖ³¡¿Í»§Ð§ÀÍÊðÆÊÎö»Ø¸´¿Í»§»òDZÔÚ¿Í»§¶Ô²úÆ·»òЧÀ͵ÄѯÎÊ¡£ÊðÀíÐèÒªÏàʶ¿Í»§µç×ÓÓʼþµÄÒâͼºÍ¼ÄÒ壬×öһЩÑо¿£¬È»ºóÔڻظ´Ê±×ñÕÕ¹«Ë¾Ö¸ÄÏ¡£Õâ¸öÀú³Ìͨ³£ÐèÒªÊðÀí 2 µ½ 3 ¸öСʱ£¬²¢ÇÒ×éÖ¯»áÊÕµ½´ó×ÚѯÎÊÆä²úÆ·µÄ¿Í»§µç×ÓÓʼþ¡£

ͨ¹ý΢µ÷£¬×éÖ¯¿ÉÒÔѵÁ· AI Ä£×Ó£¬Ê¹ÆäÄܹ»Æ¾Ö¤¹«Ë¾µÄ±ê×¼ºÍ×¼Ôò×Ô¶¯Ã÷È·ºÍÏìÓ¦ÕâЩѯÎÊ¡£Õâ¿ÉÒÔ½ÚÔ¼´ó×Úʱ¼ä£¬²¢È·±£ÏìÓ¦Ò»ÖÂÇÒ׼ȷ¡£

΢µ÷ͨ³£·ÖΪÒÔϼ¸ÖÖ£º

¼àÊÓ΢µ÷£¨SFT£© 

ͨ¹ýÈËÀà·´Ïì¾ÙÐÐÇ¿»¯Ñ§Ï°£¨RLHF£© 

²ÎÊýÓÐÓÃ΢µ÷£¨PEFT£©

µÍÖÈ×Ô˳Ӧ£¨LoRA£©

Á¿»¯µÍÖÈ×Ô˳Ӧ£¨QLoRA£©

ÆóÒÃ÷ÈÕ½ÂÔ΢µ÷ģʽ

ÈôÊÇÎÒÃÇÍýÏëʹÓÃÕâÖÖģʽÀ´¹¹½¨ÏÂÒ»¸öÌìÉúʽ AI Ó¦ÓóÌÐò£¬ÄÇôΨһµÄȱÏÝÊÇ£¬Ö»¹ÜÕâÖÖģʽ¿ÉÒÔ±¬·¢ÏÕЩÍêÉƺ͸ßÖÊÁ¿µÄÊä³ö£¬µ«ËüÊÇÒ»ÖÖºÄʱÇÒÌÚ¹óµÄģʽ¡£ËüºÜºÄʱ£¬ÓÉÓÚÐèҪʹÓÃÉÏÊöÈκÎÒ»ÖÖÒªÁìÖØÐÂѵÁ· LLM£¬ÕâÐèҪ׼±¸Êý¾Ý¼¯¡¢ÑµÁ·ÓïÁÏ¿âºÍÈ˹¤±ê×¢Ô±¡£ÈôÊÇ×éÖ¯µÄÊý¾ÝÊǶ¯Ì¬µÄ²¢ÇÒ¾­³£¸üУ¬ÄÇôÕâÖÖģʽÊDz»¿ÉÈ¡µÄ£¬ÓÉÓÚÿ´ÎÊý¾Ý±¬·¢×ª±äʱ£¬LLM ¶¼ÐèÒªÖØÐÂѵÁ·£¬Õ⽫³ÉΪһ¸öÌÚ¹óµÄ½â¾ö¼Æ»®¡£ÈôÊÇÊý¾ÝʵÖÊÉϲ»ÊǺܶ¯Ì¬£¬²¢ÇÒÎÒÃÇÏ£Íû LLM ±¬·¢¸ßÖÊÁ¿µÄÌض¨ÁìÓòÊä³ö£¬ÄÇô΢µ÷ÊÇ×îºÃµÄÒªÁì¡£

ģʽ2£ºRAG£¨¼ìË÷ÔöÇ¿ÌìÉú£©

RAG »ò¼ìË÷ÔöÇ¿ÌìÉúÊÇÏÕЩËùÓÐÆóÒµÌìÉúʽ AI ¿ª·¢ÖÐʹÓõÄÊ¢ÐÐģʽ֮һ£¬ÓÉÓÚÕâÊÇ×î¾ß±¾Ç®Ð§ÒæµÄģʽ֮һ£¬¿ÉΪ¹¹½¨ Gen AI Ó¦ÓóÌÐò½ÚÔ¼´ó×Ú¿ª·¢ÊÂÇé¡£ RAG µÄ»ù±¾½á¹¹¿ÉÒÔ¹éÄÉ×ÛºÏÈçÏ£º

R  ¡ª¡ª £¨R£©Æ¾Ö¤ÏàËÆÐÔËÑË÷Ëã·¨¼ìË÷ÉÏÏÂÎÄ¡£

A – £¨A£©ÔöÇ¿¼ìË÷µ½µÄÉÏÏÂÎÄÒÔ¼° LLM µÄÖ¸ÁÌáÐѹ¤³Ì£©£¬ËµÃ÷ƾ֤ÎÒÃÇÌṩµÄÉÏÏÂÎÄÌìÉúʲôÄÚÈÝ¡£

G – LLM ½«Æ¾Ö¤ÉÏÏÂÎĺÍÖ¸ÁÌáÐѹ¤³Ì£©ÌìÉúÄÚÈݲ¢½«ÌìÉúµÄÏìÓ¦·¢Ë͸øÓû§¡£

ÔÚ RAG ģʽÖУ¬ÎÒÃǼ¯³ÉÁËÒ»¸ö¿ÉÒÔ´æ´¢ºÍË÷ÒýǶÈ루Êý×ÖÄÚÈݵÄÊý×ÖÌåÏÖ£©µÄʸÁ¿Êý¾Ý¿â¡£ÎÒÃÇʹÓÃÖÖÖÖËÑË÷Ëã·¨£¨Èç HNSW »ò IVF£©À´¼ìË÷Ç°k¸öЧ¹û£¬È»ºó½«ÆäÓÃ×÷ÊäÈëÉÏÏÂÎÄ¡£ËÑË÷ÊÇͨ¹ý½«Óû§µÄÅÌÎÊת»»ÎªÇ¶ÈëÀ´Ö´ÐеÄ¡£Ç°k ¸öЧ¹û±»Ìí¼Óµ½Ò»¸ö½á¹¹ÓÅÒìµÄÌáÐÑÖУ¬¸ÃÌáÐÑÖ¸µ¼ LLM ÌìÉúʲôÒÔ¼°ËüÓ¦¸Ã×ñÕյİ취£¬ÒÔ¼°ËüÓ¦¸Ã˼Á¿ÄÄЩÉÏÏÂÎÄ»òÊý¾Ý¡£

Ò»µ© LLM ƾ֤ÌáÐѺÍÊäÈëÉÏÏÂÎÄÌìÉúÄÚÈÝ£¬Ëü¾Í»á¾­ÓÉÔà»°¼ì²é£¨¿ÉÑ¡£©»òÉóºË²ã¡£È»ºó£¬¾­ÓÉÑéÖ¤µÄÏìÓ¦½«ÒÔÈËÀà¿ÉÃ÷È·µÄÃûÌ÷ºÆð¸øÓû§¡£

¡°RAG¡±Ä£Ê½×îÊʺϵÄÓÃÀý

µ±ÎÒÃÇÐèÒª LLM ƾ֤×éÖ¯Ìض¨Ãü¾ÝÌìÉúÄÚÈÝʱ£¬RAG ÊÇÒ»ÖÖÒ×ÓÚ¹¹½¨ÇÒ¾­¼Ã¸ßЧµÄ½â¾ö¼Æ»®¡£ÓÉÓÚ LLM δʹÓÃ×éÖ¯µÄ˽ÓÐÊý¾Ý¾ÙÐÐѵÁ·£¬²¢ÇÒѵÁ·ÐèÒª´ó×Úʱ¼ä£¬Òò´ËÎÒÃÇʹÓà RAG ģʽ¹¹½¨ Gen AI Ó¦ÓóÌÐò¡£

»ùÓÚÈ˹¤ÖÇÄܵÄÖÇÄÜÆóÒµËÑË÷¡¢ÐéÄâÖúÊÖ»ò̸Ìì»úеÈË¿ÉÒÔ×ÊÖú¿Í»§Ã÷È·ÖØ´óµÄÎĵµ¡¢ÈËÁ¦×ÊԴ̸Ìì»úеÈË¡¢ÍƼöÒýÇæÒÔ¼°ÐèÒª¿ìËÙÏàʶ³ÌÐòÒÔ¸üºÃµØЭÖú¿Í»§µÄ¿Í»§Ð§ÀÍÊðÀí£¬ÕâЩ¶¼ÊÇ RAG µÄÍêÉÆÓÃÀý¡£

һЩʢÐеĻùÓÚÆóÒµµÄÓÃÀýÊÇ£º

ͨ¹ýÔ±¹¤ÅàѵºÍÈëÖ°ÅàѵΪÈËÁ¦×ÊÔ´Ìṩ֧³Ö£º  RAG ģʽ¿ÉÓÃÓÚ¹¹½¨ÈËÁ¦×ÊÔ´Ö§³ÖÓ¦ÓóÌÐò£¬¸ÃÓ¦ÓóÌÐò½«Ìṩ¶¨ÖƵÄÅàѵÖÊÁϲ¢»Ø¸²Ìض¨ÎÊÌ⣬ÒÔÔö½ø˳ËìµÄÈëÖ°Á÷³Ì£¬´Ó¶øÈÃÈËÁ¦×ÊÔ´²¿·ÖÓÐʱ¼äרעÓÚÆäËûÁìÓò¡£

Ò½ÁƱ£½¡ÐÐÒµ£º»ùÓÚ RAG µÄÌìÉúʽ AI Ó¦ÓóÌÐò¿ÉÒÔΪҽÁÆרҵְԱÌṩÓйØÖÖÖÖÖÎÁƼƻ®ºÍҽѧÑо¿µÄÐÅÏ¢£¬ÒÔ±ã¸üºÃµØÕչ˻¤Ê¿»¼Õß¡£

Æóҵ֪ʶÍÚ¾òºÍÖÎÀíϵͳ£º  RAG ¿ÉÓÃÓÚ¹¹½¨²úÆ·£¬×ÊÖúÔ±¹¤´ÓÖØ´óµÄÄÚ²¿ÄÚÈÝ´æ´¢¿âÖвéÕҺͼìË÷Ïà¹ØµÄ×éÖ¯Ìض¨ÐÅÏ¢¡£

ÏúÊÛºÍÓªÏúÓ¦Ó㺠ʹÓà RAG£¬¿ÉÒÔÇáËɹ¹½¨¸öÐÔ»¯µÄ²úÆ·ÍƼö²¢ÌìÉúÓªÏúÔ˶¯»ò²úÆ·Ïà¹ØÊý¾ÝµÄÄÚÈÝ¡£

ÊÖÒÕÖ§³ÖÓ¦ÓóÌÐò£º »ùÓÚ Gen-AI µÄÓ¦ÓóÌÐò¿ÉÒÔ×ܽá¹ÊÕÏɨ³ý°ì·¨ºÍÏà¹ØÊÖÒÕÎĵµ£¬ÒÔ±ã¿Í»§Ð§ÀÍÊðÀí¸ü¿ìµØ½â¾öÎÊÌâ¡£

RAG µÄÆóÒÃ÷ÈÕ½ÂÔ

µ±Êý¾ÝԴʵÖÊÉÏÊǶ¯Ì¬µÄ£¨ÕâÒâζ×ÅÎÒÃÇÆÚÍûÊý¾Ý¾­³£¸üУ©Ê±£¬RAG£¨¼ìË÷ÔöÇ¿ÌìÉú£©ÊÇÒ»ÖÖÀíÏëµÄ½â¾ö¼Æ»®¡£RAG ÔÚÊý¾Ý¾­³£×ª±äµÄÇéÐÎÖÐÌåÏÖ¸üºÃ£¬ÓÉÓÚËüÔÊÐíʵʱ¸üв¢È·±£¼ìË÷µ½µÄÐÅϢʼÖÕÓëת±äͬ²½¡£Ê¹Óà RAG£¬Ã¿´Î¸üÐÂÊý¾ÝԴʱ£¬Ê¸Á¿Êý¾Ý¿âÖеÄǶÈëÒ²±ØÐèÔÚÊý¾ÝÌáȡʱ´ú¸üУ¬ÒÔ׼ȷ·´Ó¦ÕâЩת±ä¡£

´ó´ó¶¼ÆóÒµ RAG Ó¦ÓóÌÐòÔÚÆä¼Ü¹¹ÖоßÓÐÒÔÏÂÁ½¸öÖ÷ÒªÊÂÇéÁ÷³Ì£º

1. Êý¾Ý´¦ÀíºÍÌáÈ¡

´ËÊÂÇéÁ÷³ÌÉæ¼°ÒÔǶÈëµÄÐÎʽ½«Ô´Êý¾ÝÌáÈ¡¡¢×ª»»ºÍ¼ÓÔØ (ETL) µ½Ê¸Á¿Êý¾Ý¿âÖС£µ±Ìí¼ÓÐÂÊý¾Ý»òÐÞ¸ÄÏÖÓÐÊý¾Ýʱ£¬ÏµÍ³»á´¦ÀíÕâЩ¸ü¸Ä£¬ÌìÉúÐÂǶÈë²¢¸üÐÂʸÁ¿Êý¾Ý¿â¡£Õâ¿ÉÈ·±£ÎÒÃǵÄʸÁ¿Êý¾Ý¿âÓë×îÐÂÐÅÏ¢¼á³Öͬ²½¡£Ö»ÒªÊý¾ÝÔ´±¬·¢×ª±ä£¬¾Í»á´¥·¢´ËÊÂÇéÁ÷³Ì¡£Õâʹ AI ϵͳÄܹ»¿ìËÙ˳ӦÐÂÐÅÏ¢»òÏÖÓÐÐÅÏ¢µÄת±ä¡£

2. ͨ¹ýÏàËÆÐÔËÑË÷¾ÙÐмìË÷

ÔÚ´ËÊÂÇéÁ÷³ÌÖУ¬µ±ÊÕµ½Óû§ÅÌÎÊʱ£¬ÏµÍ³»á½«ÅÌÎÊת»»ÎªÇ¶È룬²¢Æ¾Ö¤ ANN¡¢KNN »òÆäËûËã·¨Õë¶Ô¸üеÄÏòÁ¿Êý¾Ý¿âÖ´ÐÐÏàËÆÐÔËÑË÷¡£¼ìË÷Ç°k ¸öЧ¹û²¢½«ÆäÓÃ×÷ʹÓà LLM ÌìÉúÏìÓ¦µÄÉÏÏÂÎÄ¡£Õâ¿ÉÈ·±£ËùÌṩµÄÐÅÏ¢¾ßÓÐÏà¹ØÐÔÇÒ»ùÓÚ×îÐÂÊý¾Ý¡£

µ±Êý¾ÝÔ´±¬·¢ÈκÎת±äʱ£¬Ö»»á´¥·¢Êý¾Ý´¦ÀíºÍÉãÈ¡ÊÂÇéÁ÷£¬´Ó¶øͬ²½×ª±ä²¢¸üÐÂʸÁ¿Êý¾Ý¿â¡£Í¨¹ýÔÚ RAG ¼Ü¹¹ÖÐʵÏÖת±ä¼ì²â»úÖÆ£¬ÏµÍ³¿ÉÒÔÎÞ·ìͬ²½¸üС£ÕâÈ·±£¼ìË÷Àú³ÌʼÖÕʹÓÃ×îÐÂÊý¾Ý£¬¶øÎÞÐè³¹µ×Ä¥Á·Õû¸öϵͳ¡£

RAG ģʽΪÆóÒµ´øÀ´ÁËÖØ´óÀûÒ棬ÓÉÓÚËü½«Êý¾Ýͬ²½ÓëÊý¾Ý¼ìË÷ÍÑÀë¡£ÕâÖÖÊèÉ¢Òâζ×Å¿ÉÒÔ¸ßЧ´¦ÀíÊý¾ÝÔ´µÄ¸üУ¬¶ø²»»áÖÐÖ¹¼ìË÷Àú³Ì£¬²¢ÇÒ²»»á¶ÔÓû§Ôì³ÉÈκÎÍ£»úʱ¼ä¡£ÕâÖÖÄ£¿é»¯¼Ü¹¹Ä£Ê½¾ßÓпÉÀ©Õ¹ÐÔºÍÎÞаÐÔ¡£ÕâʹµÃËü¸üÈÝÒ×˳ӦһֱÔöÌíµÄÊý¾ÝÁ¿ºÍһֱת±äµÄÐèÇó¡£

ÕâÖÖÒªÁì²»µ«¾­¼Ã¸ßЧ£¬²¢ÇÒ¿ÉÒÔËõ¶Ì¹¹½¨Ê±¼ä£¬Òò´Ë¹ØÓÚÐèÒª´Ó¶¯Ì¬Êý¾ÝÔ´»ñÈ¡×îкÍ׼ȷÐÅÏ¢µÄÆóÒµÀ´Ëµ£¬ÕâÊÇÒ»ÖÖÓÐÓõÄÑ¡Ôñ¡£ÕâÖּܹ¹Ä£Ê½¿É×ÊÖú¹¤³ÌºÍ²úÆ·ÍŶӿìËÙ¼¯³ÉÐÂÊý¾Ý²¢½«Æäͬ²½µ½ AI ϵͳ¡£Òò´Ë£¬¹ØÓÚƵÈÔת±äµÄÊý¾ÝÔ´£¬Ê¼ÖÕ½¨Òé½ÓÄÉ»ùÓÚ RAG µÄÒªÁ죬¶ø²»ÊÇ΢µ÷ÒªÁìÀ´Ìṩ¾öæźÍÔËӪЧÂÊ¿ÉÄÜÐèÒªµÄʵʱºÍÏà¹ØÐÅÏ¢¡£ 

ģʽ3£ºRA-FT£¨¼ìË÷ÔöÇ¿-΢µ÷£©

RA-FT ÒÑ»ñµÃ Meta¡¢Î¢ÈíºÍ¼ÓÖÝ´óѧ²®¿ËÀû·ÖУÑо¿Ö°Ô±µÄ´óÁ¦Íƹã¡£¸ÃÍŶÓ×î½ü½ÒÏþµÄһƪÂÛÎÄÌá³öÁËÒ»ÖÖпò¼Ü£¬ÒÔ½â¾öͨÓà RAG ¿ò¼ÜºÍÁìÓòÌض¨Î¢µ÷ (DSFT) ÒªÁìµÄ¾ÖÏÞÐÔ¡£ 

ΪÏàʶÊ͸ÿò¼Ü£¬Ñо¿Ö°Ô±½« RAG ÒªÁìÓë¡°¿ª¾í¿¼ÊÔ¡±¾ÙÐÐÁ˽ÏÁ¿£¬½« Fine Tuning Óë¡°±Õ¾í¿¼ÊÔ¡±¾ÙÐÐÁ˽ÏÁ¿¡£

RAG µÄ¾ÖÏÞÐÔ

ÔÚ RAG ÖУ¬ÉÏÏÂÎÄÊÇͨ¹ý¶ÔË÷Òý¾ÙÐлùÓÚÏòÁ¿µÄÏàËÆÐÔËÑË÷ÐγɵÄ¡£´ËËÑË÷¿ÉÄÜ»á´øÀ´ÓïÒåÉÏ¿¿½üÅÌÎʵ«·×Æ綨ÓÐÒâÒåµÄÎĵµ£¨»ò¿é£©£¬µ¼Ö LLM ÄÑÒÔÌìÉúÁ¬¹áÇÒÓÐÒâÒåµÄÃյס£LLM ²»ÖªµÀÄÄЩÎĵÃ÷ÈÕæÕýÏà¹Ø£¬ÄÄЩÎĵµ¾ßÓÐÎóµ¼ÐÔ¡£×ÝÈ»ÕâЩ¡°×ÌÈÅÐÔ¡±Îĵµ²»ÊǺÏÀíÃÕµ×µÄÓÅÒìȪԴ£¬ËüÃÇÒ²¿ÉÄÜ°üÀ¨ÔÚ LLM µÄÉÏÏÂÎÄÖС£ 

DSFT µÄ¾ÖÏÞÐÔ

Ñо¿Ö°Ô±»¹ÒÔΪ£¬½ÓÄÉ DSFT ÒªÁ죬LLM Ö»ÄܾÖÏÞÓÚËüËùѵÁ·µÄÄÚÈÝ¡£Ëü¿ÉÒÔ¾ÙÐÐÍƲ⣬ÉõÖÁ¸øÍÉ»¯ÎóÃÕµ×£¬ÓÉÓÚËüÎÞ·¨´ÓÍⲿȪԴ»ñȡ׼ȷÐÅÏ¢¡£  

RA-FT ÔõÑù½â¾ö DSFT ºÍ RAG ģʽµÄ¾ÖÏÞÐÔ£¿

ΪÏàʶ¾ö DSFT ºÍ»ù±¾ RAG µÄ¾ÖÏÞÐÔ£¬RA-FT ¿ò¼ÜÒÔÒ»ÖÖеķ½·¨ÍŽáÁË RAG ºÍ΢µ÷ÒªÁì¡£ÔÚ RA-FT ÒªÁìÖУ¬LLM ¾­ÓÉѵÁ·£¬±äµÃ×ã¹»ÖÇÄÜ£¬¿ÉÒÔ´ÓʹÓÃÏàËÆÐÔËÑË÷×÷Ϊ¼ìË÷Àú³ÌµÄÒ»²¿·ÖÌìÉúµÄÉÏÏÂÎÄÖÐÌôÑ¡³ö×îÓÐÓúÍ×îÏà¹ØµÄÎĵµ¡£ 

ʹÓà RA-FT£¬µ±Ä£×Ó±»¸¶ÓëÒ»¸öÎÊÌâºÍÒ»Åú¼ìË÷µ½µÄÎĵµÊ±£¬Ëü»á±»½ÌÓýºöÂÔÄÇЩ¶Ô»Ø¸²ÎÊÌâûÓÐ×ÊÖúµÄÎĵµ¡£ÓÉÓÚÔÚ΢µ÷Àú³ÌÖоÙÐÐÁËѵÁ·£¬LLM ѧ»áÁËÔõÑùʶ±ð¡°×ÌÈÅ¡±Îĵµ£¬²¢½öʹÓÃÓÐÓúͷÇ×ÌÈÅÎĵµ£¨»ò¿é£©À´ÎªÓû§µÄÅÌÎÊÌìÉúÁ¬¹áµÄÃյס£

ÔÚ RA-FT ÖУ¬ÑµÁ·Êý¾Ý¾­ÓÉ×¼±¸£¬Ã¿¸öÊý¾Ýµã¶¼°üÀ¨Ò»¸öÎÊÌâ¡¢Ò»×éÉÏÏÂÎÄÏà¹ØµÄÎĵµÒÔ¼°ÏìÓ¦µÄ˼Ð÷ʽÃյס£RA-FT ½«Î¢µ÷ÓëÓÉÎÊ´ð¶Ô×é³ÉµÄѵÁ·¼¯Ïà͎ᣬʹÓÃÄ£Äâ²»ÍêÉƼìË÷³¡¾°ÖеÄÎĵµ¡£ÕâÖÖÒªÁìÓÐÓõØΪ LLM ×öºÃÁË¿ª¾í¿¼ÊÔµÄ×¼±¸¡£RA-FT ÊÇÒ»ÖÖµ÷½â LLM µÄÒªÁ죬ʹÆäÄܹ»´ÓÏà¹ØºÍ²»Ïà¹ØµÄÎĵµ×éºÏÖжÁÈ¡ºÍµÃ³ö½â¾ö¼Æ»®¡£

RA-FTģʽµÄÆóÒÃ÷ÈÕ½ÂÔ

ÓÉÓÚ RAFT °üÀ¨ RAG ºÍ΢µ÷ÒªÁ죬Òò´Ë±¾Ç®ÉõÖÁ¸ßÓÚ DSFT ÒªÁì¡£¿ÉÊÇ£¬Ð§¹ûÁîÈËÓ¡ÏóÉî¿Ì£¬ÕâÒâζןÃÊÖÒÕÊÊÓÃÓÚÌṩ¸ßÖÊÁ¿Êä³öÒÔ¼°ÔúʵÊý¾ÝºÍȪԴÊÇ»ù±¾ÒªÇóµÄÓÃÀý¡£µ±Äú¿ÉÄÜÏ£Íû´ÓÏòÁ¿ÏàËÆÐÔËÑË÷ÖлñµÃ»ìÏýЧ¹û£¨¼ÈÓÐÏà¹ØÎĵµ/¿éÒ²ÓÐ×ÌÈÅÎĵµ/¿é£©²¢ÇÒÄú²»Ïëƾ֤×ÌÈÅÎĵµ/¿é»òÎÞÓÃÎĵµ/¿éÌìÉú»òÖƶ© LLM ÏìӦʱ£¬´ËÒªÁ콫±¬·¢×î¼ÑЧ¹û¡£¹ØÓÚÊܵ½ÑÏ¿áî¿ÏµµÄÐÐÒµ£¬½«´Ë½â¾ö¼Æ»®ÕûºÏµ½ÏÖÓÐµÄ Gen AI Éú̬ϵͳÖн«ÊÇÓÐÒæµÄ¡£ 

ģʽ4£ºÖªÊ¶Í¼Æ×/RAGͼÆ×

ÈçÄúËùÖª£¬»ù±¾ RAG ºÍ»ùÓÚ RAFT µÄÒªÁ춼ÑÏÖØÒÀÀµÓڵײãÏòÁ¿Êý¾Ý¿âºÍÖÖÖÖÏàËÆÐÔËã·¨£¨A-NN »ò K-NN£©£¬ËüÃÇÓÃÓÚ¼ìË÷·Ö¿éÊý¾Ý¼¯£¬ÒÔÓÃ×÷ LLM Öƶ©ÏìÓ¦µÄÉÏÏÂÎÄ¡£È»¶ø£¬ÕâÖÖÒªÁì×î´óµÄÎÊÌâÊÇ£¬µ±Ò»¸ö¾ßÓÐÉÏÏÂÎÄÒâÒåµÄ´ó¶ÎÂä±»·Ö³ÉС¿éʱ£¬Ëü»áʧȥÄÚÔÚ¼ÄÒåºÍ¹Øϵ¡£Òò´Ë£¬ÔÚÖ´ÐÐÏàËÆÐÔËÑË÷ʱ£¬ËüÖ»»áƾ֤Ïà¹ØÐÔÑ¡ÔñÎĵµ£¨»ò¿é£©Öе¥´ÊÏ໥¿¿½üµÄЧ¹û¼¯¡£Í¨Óà RAG ÒªÁìÖ÷ÒªÒÀÀµÓÚ»ùÓÚÏòÁ¿µÄ¼ìË÷£¬ÔÚΪÓû§ÌìÉúÏìӦʱÃæÁÙ×ÅһЩÏÞÖÆ£¬ÀýÈçȱ·¦Éî¶ÈÉÏÏÂÎÄÃ÷È·ºÍÖØ´óµÄÍÆÀíÄÜÁ¦¡£

ΪÏàʶ¾öÕâһȱ·¦£¬ÖªÊ¶Í¼Æ×Êý¾Ý¿âÒѳÉΪÁíÒ»¸ö²»¿É»òȱµÄ×é¼þ£¬¿ÉÒÔ²åÈëÏÖÓÐµÄ RAG ϵͳ£¬ÒÔ±ãÄúµÄÌìÉúʽ AI Ó¦ÓóÌÐòÔÚ×ÊÖúÓû§»Ø¸²ÎÊÌâµÄͬʱ±äµÃÔ½·¢ÖÇÄÜ¡£ÕâÖÖÊÖÒÕ³ÆΪ GraphRAG£¬ÆäÖÐÒ»ÖÖ³ÆΪ֪ʶͼÆ×Êý¾Ý¿âµÄ²î±ðÀàÐ͵ÄÊý¾Ý¿â±»Ìí¼Óµ½ÏµÍ³ÖУ¬µ± RAG µÄÏàËÆÐÔËÑË÷䱬·¢×¼È·ÏìӦʱ£¬ËüÓÐÖúÓÚƾ֤ÍⲿÓòÌض¨Ãü¾ÝЭÖúÌìÉúÄÚÈÝ¡£ 

GraphRAG ÔõÑùÊÂÇ飿

GraphRAG ÊÇÒ»Öָ߼¶ RAG ÒªÁ죬ËüʹÓÃͼÐÎÊý¾Ý¿âÀ´¼ìË÷Ìض¨Ê¹ÃüµÄÐÅÏ¢¡£Ó뽫½á¹¹»¯Êý¾Ý´æ´¢ÔÚ¾ßÓÐÐкÍÁеıíÖеĹŰå¹ØϵÊý¾Ý¿â²î±ð£¬Í¼ÐÎÊý¾Ý¿âʹÓýڵ㡢±ßºÍÊôÐÔÀ´ÌåÏֺʹ洢Êý¾Ý¡£´ËÒªÁìÌṩÁËÒ»ÖÖ¸üÖ±¹Û¡¢¸ü¸ßЧµÄ·½·¨À´½¨Ä£¡¢Éó²éºÍÅÌÎÊÖØ´óϵͳ¡£GraphRAG ʹÓûùÓÚ LLM ¹¹½¨µÄ֪ʶͼÆ×ÅþÁ¬ÄÚÈÝÖеĿ´·¨ºÍʵÌå¡£

ÉãÈ¡Á÷³Ì

GraphRAG ʹÓôóÐÍÓïÑÔÄ£×Ó (LLM) ´ÓÒ»×éÎı¾ÎĵµÖÐ×Ô¶¯ÌìÉúÏêϸµÄ֪ʶͼÆס£´Ë֪ʶͼÆ×ͨ¹ýʶ±ðºÍÅþÁ¬Ïà¹Ø¿´·¨À´²¶»ñÊý¾ÝµÄ¼ÄÒåºÍ½á¹¹¡£ÔÚË÷ÒýÁ÷³ÌÖУ¬ÏµÍ³Ê¹Óà LLM ´ÓϸÁ£¶ÈÎı¾µ¥Î»ÖÐÌáÈ¡ËùÓÐʵÌå¡¢¹ØϵºÍÒªº¦ÉùÃ÷¡£

Ëü»¹¿ÉÒÔ¼ì²âÇ×½üÏàÊàŦµãµÄ¡°ÉçÇø¡±»ò¡°¼¯Èº¡±£¬²¢½«ËüÃÇ×éÖ¯µ½²î±ðµÄϸ½ÚÌõÀí¡£ÕâÓÐÖúÓÚÃ÷È·Êý¾ÝµÄÕûÌåÓïÒå½á¹¹¡£

ÕâЩ»ùÓÚÉçÇøµÄÕªÒªÌṩÁËÕû¸öÊý¾Ý¼¯µÄÖÜÈ«¸ÅÊöºÍÕûƪÎÄÕµÄÕûÌåÇéÐΡ£ÕâʹϵͳÄܹ»½â¾ö½Ï¼òÆӵļìË÷ÔöÇ¿ÌìÉú (RAG) ÒªÁìÄÑÒÔ´¦ÀíµÄÆÕ±é»òÖØ´óµÄÅÌÎÊ¡£

¼ìË÷Á÷³Ì

µ±Óû§Ìá³öÎÊÌâʱ£¬GraphRAG »á¸ßЧµØ´Ó֪ʶͼÆ×ÖмìË÷×îÏà¹ØµÄÐÅÏ¢¡£È»ºó£¬Ëü»áʹÓÃÕâЩÐÅÏ¢À´Ö¸µ¼ºÍˢРLIAM µÄÏìÓ¦£¬´Ó¶øÌá¸ßÃÕµ×µÄ׼ȷÐÔ²¢½µµÍÌìÉú²»×¼È·»òÎóµ¼ÐÔÐÅÏ¢µÄ¿ÉÄÜÐÔ¡£

GraphRAG ģʽµÄÆóÒÃ÷ÈÕ½ÂÔ

Óë»ù±¾ RAG ϵͳһÑù£¬GraphRAG ҲʹÓÃרÃŵÄÊý¾Ý¿âÀ´´æ´¢ËüÔÚ LLM µÄ×ÊÖúÏÂÌìÉúµÄ֪ʶÊý¾Ý¡£¿ÉÊÇ£¬ÓëÌìÉúǶÈë²¢½«Æä´æ´¢ÔÚʸÁ¿Êý¾Ý¿âÖÐÏà±È£¬ÌìÉú֪ʶͼÆ׵ı¾Ç®¸ü¸ß¡£Òò´Ë£¬ÔÚ»ù±¾ RAG ¿ÉÄÜÄÑÒÔ±¬·¢×¼È·ÃÕµ×µÄÇéÐÎÏ£¬Ó¦Ê¹Óà GraphRAG¡£

µ±Ô´Êý¾Ý¸ß¶È¶¯Ì¬£¨¼´ÆµÈÔ¸ü¸Ä£©Ê±£¬ÄúÐèÒªÖØÐÞÓïÁÏ¿âµÄͼÐβ¢ÏìÓ¦µØ¸üÐÂͼÐÎÊý¾Ý¿â¡£ÎªÔ´Êý¾ÝµÄÿ´Î¸ü¸ÄÖØÐÞͼÐÎÊý¾Ý¿â¿ÉÄܱ¾Ç®¸ß°º£¬µ«¹ØÓÚ¼á³ÖÏàͬµÄÖÜÈ«Ã÷È·È´ÊÇÐëÒªµÄ¡£

ÔÚÆóÒµÇéÐÎÖУ¬½¨Ò齫 GraphRAG Óë»ù±¾ RAG ¼¯³É£¬ÒÔ½¨Éè¸üÓÐÓõÄÌìÉúʽ AI ϵͳ¡£ÕâÑù£¬ÈôÊÇ»ù±¾ RAG ÎÞ·¨¼ìË÷µ½ËùÐèЧ¹û£¬ÏµÍ³¿ÉÒÔÔÚ GraphRAG Êý¾Ý¿âÖÐËÑË÷ÉÏÏÂÎIJ¢ÎªÓû§ÌìÉúÏìÓ¦£¬¶ø²»ÊÇÔÚϵͳ¾ßÓÐ׼ȷÃյ׺ÍÉÏÏÂÎĵ«ÊèÉ¢ÔÚ²î±ð¿é»òδȺ¼¯ÔÚÒ»ÆðµÄÎĵµÖÐʱ±¬·¢»Ã¾õ»ò²»ÌìÉúÏìÓ¦¡£½« GraphRAG Óë»ù±¾ RAG ϵͳÏàÍŽá¿ÉÒÔʹ AI Ó¦ÓóÌÐòÔ½·¢Ç¿Ê¢¡£

ÒÔÉϾÍÊÇÆóÒµÌìÉúʽ AI Ó¦Óõļܹ¹Ä£Ê½£ºDSFT¡¢RAG¡¢RAFT ºÍ GraphRAGµÄÏêϸÄÚÈÝ£¬¸ü¶àÇë¹Ø×¢±¾ÍøÄÚÆäËüÏà¹ØÎÄÕ£¡

ÃâÔð˵Ã÷£ºÒÔÉÏչʾÄÚÈÝȪԴÓÚÏàÖúýÌå¡¢ÆóÒµ»ú¹¹¡¢ÍøÓÑÌṩ»òÍøÂçÍøÂçÕûÀí£¬°æȨÕùÒéÓë±¾Õ¾Î޹أ¬ÎÄÕÂÉæ¼°¿´·¨Óë¿´·¨²»´ú±í×ðÁú¿­Ê±¹ÙÍøµÇ¼ÂËÓÍ»úÍø¹Ù·½Ì¬¶È£¬Çë¶ÁÕß½ö×ö²Î¿¼¡£±¾ÎĽӴýתÔØ£¬×ªÔØÇë˵Ã÷À´ÓÉ¡£ÈôÄúÒÔΪ±¾ÎÄÇÖÕ¼ÁËÄúµÄ°æȨÐÅÏ¢£¬»òÄú·¢Ã÷¸ÃÄÚÈÝÓÐÈκÎÉæ¼°ÓÐÎ¥¹«µÂ¡¢Ã°·¸Ö´·¨µÈÎ¥·¨ÐÅÏ¢£¬ÇëÄúÁ¬Ã¦ÁªÏµ×ðÁú¿­Ê±¹ÙÍøµÇ¼ʵʱÐÞÕý»òɾ³ý¡£

Ïà¹ØÐÂÎÅ

ÁªÏµ×ðÁú¿­Ê±¹ÙÍøµÇ¼

18523999891

¿É΢ÐÅÔÚÏß×Éѯ

ÊÂÇéʱ¼ä£ºÖÜÒ»ÖÁÖÜÎ壬9:30-18:30£¬½ÚãåÈÕÐÝÏ¢

QR code
ÍøÕ¾µØͼ