核心概念
為大型語言模型賦予適合程式設計任務的個性,能顯著提升程式碼生成的準確性。
摘要
以大型語言模型進行個性化導向的程式碼生成研究
這篇研究論文探討如何利用大型語言模型 (LLM) 進行個性化導向的程式碼生成,以提升程式碼生成的準確性。
探討賦予大型語言模型特定個性是否能提升程式碼生成準確性。
使用 GPT-4o 模型,根據程式設計任務生成適合的 MBTI 個性描述。
選擇七種常用的 LLM,包括 GPT-4o、GPT-4o mini、Llama3.1、Qwen-Long、DeepSeek-Coder V2、Codestral 和 CodeLlama。
使用四個程式碼生成評測數據集:MBPP Sanitized、MBPP+、HumanEval+ 和 APPS。
比較直接使用 LLM 生成程式碼和使用個性化導向方法的準確率差異。