arXiv論文：LLMがAIモデル設計のたたき台を作る「AgentNAS」——17タスク中11タスクでSOTAと報告

結論から言うと、AIモデルの設計を「人間が全部考える」作業から、LLMと探索アルゴリズムの共同作業に近づける研究です。arXivに2026年7月8日投稿された「Agentic Neural Architecture Search」は、LLMを使ってニューラルネットワークの構造探索を助けるAgentNASを提案しています。

従来のNASは効率化が進みましたが、どんな部品を入れ替えるかという探索空間を人間がタスクごとに作る必要がありました。一方、LLMだけで自由に設計させると、候補は広がっても、体系的に比較して詰めるのが難しくなります。この研究では、まずLLMが高品質な初期アーキテクチャを作り、それを「スロット付きアーキテクチャ」に分解します。

つまり、畳み込み層、正規化、ブロックなどの差し替え場所を名前付きで決め、従来NASが探索できる bounded な空間を自動で作ります。評価では、NAS-Bench-360とUnseen NASの分類、密な回帰、セグメンテーション、マルチラベル分類など17タスクで試し、11タスクで新しい最高性能を達成したと報告しています。

さらに、LLMが作った初期案だけでも多くの既存ベースラインを上回り、NASによる組み合わせ探索が追加の改善を出したとします。私たちに関係するのは、専門知識が必要だったモデル設計を短時間で試せる可能性です。ただしベンチマーク結果であり、実サービスの制約では再検証が必要です。