Design Arena

概要

Design Arenaは、Y Combinatorが2025年夏にインキュベートした、世界最大のAI生成デザイン向けクラウドソーシング型ベンチマークです。実際のユーザーによる好みの投票とBradley Terryスコアリングシステム（Eloランキング）を用いて、50以上のAIモデルをデザインの美しさと機能的な品質の観点からリアルタイムでランク付けし、開発者やデザイナーにAIモデル選定の客観的な指標を提供します。

主な特徴

• 対面式のデザイン比較: 同じプロンプトから2つのAIモデルが生成したデザインをユーザーに表示し、クラウドソーシングによる投票で実際の人間の好みデータを収集します
• 多カテゴリ評価: ウェブサイト生成、UIコンポーネント、画像生成、動画制作、3Dデザイン、ゲーム開発、データ可視化、ロゴデザインなど13以上のデザインカテゴリをカバーします
• リアルタイムEloリーダーボード: 対戦結果からモデルランキングを動的に更新し、50以上のLLM、12以上の画像モデル、4以上の動画モデル、22以上の音声モデルを追跡します
• Micro Evals自動評価: コード生成の自動評価を提供し、Lovable、Bolt、v0などのAIコーディングツールが同一プロンプトでどれだけの性能を出すかをテストします
• 透明な評価手法: システムプロンプトと評価方法を公開し、CAPTCHA認証でボット投票をブロックすることでデータの信憑性を保ちます

活用シーン

企業がAIデザインツールを選ぶ際、プロダクトマネージャーはDesign Arenaのリーダーボードを活用して、特定のタスク（ロゴ生成やウェブサイトデザインなど）で各モデルが実際にどう動くかを確認でき、社内テストの時間とリソースを節約できます。AIモデル開発者は、実ユーザーのフィードバックに基づく性能データを収集し、自社モデルの美的・機能的な強みと弱みを把握できます。

独自の強み

技術指標に依存する従来のベンチマークと異なり、Design Arenaの核心的な違いは「センスを測る」ことにあります。実際のユーザー行動に基づく評価システムにより、人間の本物の美的好みを反映したAIモデルランキングを作り出しています。公開初月に135か国から47,000人以上のユーザーを集め、数万件の実際の比較を処理しました。