何が発表されたのか
OpenAIは2026年10月19日、学習材料のコードや文書が比較的少ないプログラミング言語での評価結果を公開しました。対象にはCOBOL、Fortran、Visual Basicなどが含まれます。
評価は二つあります。MultiLangBenchは指定した言語でSQLite互換のデータベースを一から実装する試験。もう一つは、既存のCOBOLプログラムを別の言語に移し、元の動作を保てるかを測る試験です。両者の数値を同じ「移行成功率」として扱うことはできません。
主なポイント
MultiLangBenchの20言語平均で、GPT-6 Astraはテスト通過率87.4%、GPT-5.6 Solは26.8%とOpenAIは報告しています。いずれも同社の評価で、Astraの値は最大推論設定です。
COBOL移行の試験では、GPT-6.1 Solは低推論設定で86.6%、GPT-5.6 Solは5.4%。この試験はC++、Java、Kotlin、Python、Rustへの移行を扱い、観測できる出力がバイト単位で一致するかを隠されたテストで確かめます。すべてのテストを通った場合だけ成功と判定する方式です。
誰が対象になるのか
主に、長く使われてきた言語の保守や移行を検討する開発者向けの材料です。公開されたMultiLangBenchのREADMEを読むと、結果の数字だけでなく、何をどこまで試す評価なのかが分かります。
READMEによると、SQLite 3.40.1の試験を変換した約24,000件が用意されています。通常は費用を抑えるため、名前が00・01・02で始まる272件を使うよう案内しています。全件で測る場合は、その違いを明記する方針です。成績を比べる際は、どの範囲の試験を使ったかをそろえる必要があります。
プログラマー・クリエイター視点での読みどころ
編集部が注目したのは、公開された資料から試験条件を調べられる点です。手元の言語や業務に近いテストなのかを確かめ、評価に含まれない処理を洗い出す出発点になります。
とくに移行では、エラーなく動くことと、同じ結果を出すことは別です。端数の扱い、欠損データ、外部システムとの接続など、自社で守る必要のある仕様は、別途テストで確かめる必要があります。
気になる点・未確認事項
この結果は実際の企業の基幹システムを自動で置き換えた実績ではありません。OpenAI自身も、本番コードへの適用には専門家のレビューと、そのシステムの業務ルールや依存関係に対するテストが必要だとしています。
編集部は評価を再実行しておらず、独立した再現性検証は行っていません。記事の数値は公開時の試験条件に基づくもので、あらゆる既存コードで同じ精度になるとは限りません。
まとめ
まず公開リポジトリで試験内容を読み、自社の移行対象に足りない条件を確認するのがよさそうです。高い成績を、そのまま本番投入の承認に置き換えることはできません。
情報源
https://openai.com/index/low-resource-programming-languages/
原文公開日:2026-10-19
出典は上記のリンクから確認できます。発表元の説明と、編集部による分析・試算は本文中で区別しています。