新京報貝殼財經(jīng)訊(記者羅亦丹)10月24日,科大訊飛董事長劉慶峰在2023科大訊飛全球1024開發(fā)者節(jié)上表示,星火認(rèn)知大模型V3.0已經(jīng)超越了ChatGPT(GPT3.5)。他進(jìn)一步解釋稱,根據(jù)《通用認(rèn)知智能大模型評測體系》構(gòu)建測試集,在10月16日至20日的測試中,星火認(rèn)知大模型V3.0的中文能力客觀測評超越ChatGPT,而根據(jù)OpenAI在官網(wǎng)發(fā)布的英文任務(wù)測試集,在10月16日至20日的測試中,星火V3.0的英文能力對標(biāo)ChatGPT48項任務(wù)結(jié)果相當(dāng),二者得分分別為85.1%(星火V3.0)和84.3%。
根據(jù)現(xiàn)場的演示,星火認(rèn)知大模型V3.0相比上一版本在文本生成、邏輯推理、代碼能力等七個方面的能力有了3%到9%不等的提升。不過,劉慶峰也表示,和GPT4相比,科大訊飛“還有一個學(xué)習(xí)的過程”。
編輯 宋鈺婷
校對 王心