世界初の AI プログラマーDevin が誕生

本記事は、公開情報に基づきインターネットインフラ、ガバナンス、運用依存関係、市場可視性との関連が示された「世界初の AI プログラマーDevin」を BTW Media がプロファイリングしたものです。

• 3 月 13 日、スタートアップ Cognition が AI ソフトウェアエンジニア Devin のリリースを発表。Devin はコーディングベンチマーク SWE-bench で最高の人間エンジニアを上回り、ソフトウェア開発における大きな変化の兆しを示した。
• Devin は、デバッグからデプロイまで、独自の開発ツール群を使用して幅広いソフトウェアエンジニアリングタスクを自律的に実行する能力を示している。
• コンピューターサイエンスと数学で素晴らしい経歴を持つ天才たちで構成される Cognition の創業チームは、AI によって人間のソフトウェアエンジニアを潜在的に置き換えることでこの分野に革命を起こそうとしており、技術コミュニティに楽観と懸念の両方を引き起こしている。

当社の分析
現在、Cognition はシリコンバレーの大物ピーター・ティール氏の Founders Fund が主導し、他の著名な投資機関から 2100 万ドルの投資を受けており、これにより Devin の進化とアップデートがさらに加速することが示唆されています。Google や OpenAI などのテクノロジー大手もこの分野に参入しており、「AI プログラマー」分野の競争は激化すると見られています。
— Chloe CHEN, BTW Media 記者

3 月 13 日、スタートアップCognitionは世界初の AI ソフトウェアエンジニア Devin を発表し、人間のソフトウェア構築方法を完全に変えると主張した。Devin はコーディングベンチマークテスト SWE-bench で画期的な成功を収め、複雑なタスクを実行する能力を示し、最高の人間エンジニアさえも上回った。このリリースは開発者の幅広い注目を集めた。

あわせて読みたい：Sora は人間に取って代わらない、その理由はこちら

あわせて読みたい：Google、Gemini AI モデルの画像生成機能を停止

わずか 10 名の小さなスタートアップ、Cognition

Devin の開発元である Cognition は、わずか 10 名の小さなスタートアップで、設立から 2 か月も経っていないとされる。現在、SWE-bench で驚異的な 13.86%のスコアを達成しており、比較すると Claude 2 は 4.80%、SWE-Llama-13bとGPT-4はそれぞれ 3.97%と 1.74%となっている。

Cognition のデモでは、Devin は開発、デバッグ、デプロイなど、プログラマーが日常的に行う基本的な作業を迅速に完了できる。さらに、独自のシェル、コードエディタ、ブラウザなど、一般的な開発ツールを備え、それらはすべてサンドボックス化された計算環境に統合されており、Devin はこれらを自律的に使用できる。

ユーザーからの自然言語による要件記述に対して、Devin はコードエディタを開き、ブラウザでデバッグを行い、コードを実行・検証し、最終的にデプロイしてユーザーのニーズに応えることができる。従来これらのタスクはプログラマーが行っていたが、今後は AI がそれを引き継ぐことができる。

開発者は、Devin が Python 代数システムsympyの対数計算エラーを自律的に解決した例を示した。Devin がコード環境をセットアップし、エラーを再現し、修正ソリューションを独自にコーディングしてテストする様子を見ることができた。

さらに、背景画像に隠された AI 生成アートのよく知られた課題では、従来はソフトウェアエンジニアが新しいツールを理解し学習するために時間を費やす必要があったが、Devin はブログを読んだり、Modal 上でControlNetを実行したりすることで、まったく新しい不慣れな技術を学習し、要件を満たすことに成功した。

さらに、Devin は最新の大規模モデル技術を自律的に実行できる。例えば、GitHub の研究リポジトリへのリンクを送るだけで、大規模言語モデルを自律的に微調整する。Upwork上の実際のプロフェッショナルなタスクでも、コンピュータービジョンモデルのコードを作成しデバッグできる。Devin はサンプルデータの結果を含むレポートをユーザー向けに作成する。

Devin は次世代のソフトウェア開発アシスタント

Cognition は Devin を、単にコーディングの提案や一部のタスクの自動化にとどまらず、完全なソフトウェアプロジェクトを自律的に完了できる次世代のソフトウェア開発アシスタントと表現している。これは、Devin が他の AI プログラミングツールとは異なり、より高い自律性とより包括的なプログラミング能力を備えていることを意味する。

Devin のリリース時点で、Cognition は固定オフィスさえ持たない小さな会社のように見えるが、その創業チームを見ると、また別の天才的な起業家ストーリーが見えてくる。

Devin を支える天才チーム

Cognition の創業者兼 CEO であるScott Wu氏は、14 年前にテレビの生データコンペティションに参加し、数学の才能を発揮して圧勝した。

共同創業者兼 CTO のSteven Hao氏は、MIT でコンピューターサイエンスの学位を取得し、以前はデータアノテーションのユニコーン企業 Scale AI でトップエンジニアの一人として勤務していた。

もう一人の共同創業者兼最高製品責任者（CPO）である Walden Yan 氏は、ハーバード大学でコンピューターサイエンスと経済学を学び、MIT PRIMES で暗号と機械学習の研究に従事し、北米のウォートン・ビジネススクール高校生投資コンペティションのファイナリストになった。

さらに驚くべき偶然として、Cognition の創業者たちは全員、国際情報オリンピック（IOI）の金メダリストであることが判明した。IOI は各国から個人参加する年次国際情報科学コンテストで、各国最大 4 名の選手を派遣する。

米国で競争の激しい情報科学分野で頭角を現し金メダルを獲得した Cognition の創業チームを「天才チーム」と呼ぶのは、誇張とは言えないだろう。

人間のソフトウェアエンジニアは代替されるのか？

しかし、Devin や類似ツールの登場に対して悲観的な意見を表明する人もおり、ソフトウェアエンジニアである Scott Wu 氏は、人間のソフトウェアエンジニアを代替するという究極の目的で生成 AI ツールを立ち上げていると指摘する。コンピューター科学者のSilas Alberti氏は、「これはコードを書くためのアシスタントというよりは、むしろ自ら仕事をこなす本物の労働者のように見える」と述べた。

Tesla の元 AI 責任者である Kapasi 氏は、「ソフトウェアエンジニアリングの自動化は、現在の自動運転の自動化と似ているように見える」と述べた。

これは開発プロセスに反映されている。最初は人間が手作業でコードを書き、次に GitHub Copilot が数行を自動補完し、その後 ChatGPT がコードブロックを書き、そして今 Devin が登場した。

同氏は、ソフトウェアエンジニアリングの自動化は、開発者が端末、ブラウザ、コードエディタなど、多くのツールを協調して使用してコードを書く方向に進化し、人間が監督を担当し、徐々により高度な作業に移行すると考えている。