iThome

OpenAI釋出AI基準測試MultiLangBench,評測20種程式語言開發能力

作者 李建興全文約 953 字

文章摘要

iThome · 文章頁摘要

基準測試MultiLangBench要求AI使用20種程式語言,從頭建立與SQLite相容的資料庫引擎,評估包含COBOL等訓練資料較少語言的開發能力

OpenAI釋出AI基準測試MultiLangBench,評測20種程式語言開發能力(新聞配圖)
配圖來源:iThome

OpenAI公開程式開發基準測試MultiLangBench,檢驗AI能否使用20種程式語言,從頭建立與SQLite相容的資料庫引擎。基準測試涵蓋COBOL、Fortran、Visual Basic等可供AI學習的程式碼與文件較少的語言,也包括Python、Java及Rust,讓開發者比較模型使用不...