---
title: "LMArena (Chatbot Arena) (ID)"
source: "https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)"
wiki: "systems-analysis.info/int"
article: "LMArena_(Chatbot_Arena)_(ID)"
language: "id"
categories:
  - "Category:Indonesian"
  - "Category:Large language models"
  - "Category:LLM benchmarks"
  - "Category:Machine learning"
revision_id: 3706
wiki_created_at: 2026-09-06T23:24:46Z
wiki_modified_at: 2026-09-06T23:24:46Z
downloaded_at: 2026-09-07T22:58:26Z
---

# LMArena (Chatbot Arena) (ID)

**Arena** (sebelum 28 Januari 2026 dikenal sebagai **LMArena** (*Large Model Arena*), sebelumnya **Chatbot Arena**) — platform web crowdsourcing terbuka untuk evaluasi dan peringkat komparatif large language model (LLM) dan model multimodal (teks, gambar, video) berdasarkan preferensi nyata manusia. Fondasi platform ini adalah perbandingan berpasangan anonim (blind battles) antar model dan sistem peringkat Elo; berdasarkan keduanya diterbitkan leaderboard publik yang transparan, yang dianggap sebagai salah satu benchmark independen paling otoritatif untuk model-model frontier kecerdasan buatan.<sup>[\[1\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-chiang2024-1)[\[2\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-hello_2025-2)</sup>

Platform ini lahir pada tahun 2023 sebagai proyek penelitian akademis dari organisasi **LMSYS Org** (Large Model Systems Organization) di Universitas California, Berkeley (Sky Computing Lab). Pada September 2024, proyek ini "lulus" ke domain mandiri lmarena.ai ("Graduation")<sup>[\[3\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-new_site_2024-3)</sup>. Pada April 2025, perusahaan independen **Arena Intelligence Inc.** didirikan, dan pada 21 Mei 2025 diperoleh pendanaan seed round sebesar **\$100 juta** (valuasi \$600 juta, investor utama — a16z dan UC Investments)<sup>[\[4\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-seed_prn-4)[\[5\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-tc_seed-5)</sup>. Pada 6 Januari 2026, perusahaan menutup putaran Series A senilai **\$150 juta** dengan valuasi post-money sebesar **\$1,7 miliar**<sup>[\[6\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-series_a_2026-6)</sup>. Pada 28 Januari 2026, rebranding final dilakukan — platform berganti nama menjadi **Arena** dan berpindah ke domain arena.ai<sup>[\[7\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-arena_rebrand_2026-7)[\[8\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-new_beta_2025-8)</sup>.

## Sejarah

Platform ini diluncurkan pada April 2023 dengan nama **Chatbot Arena** sebagai proyek penelitian organisasi LMSYS Org (Large Model Systems Organization) di Universitas California, Berkeley (Sky Computing Lab). Platform ini menjadi salah satu alat pertama untuk evaluasi crowdsourcing large language model melalui perbandingan berpasangan anonim (blind battles) dan sistem peringkat Elo berdasarkan preferensi nyata pengguna.

- **24 April 2023** — peluncuran teknis Chatbot Arena.
- **3 Mei 2023** — rilis publik resmi dan publikasi leaderboard pertama.
- **2023** — rilis dataset terbuka pertama: 33 ribu dialog berpasangan (Juli) dan **LMSYS‑Chat‑1M** (September, sekitar 1 juta dialog nyata).
- **1 Maret 2024** — publikasi kebijakan resmi platform, formalisasi misi sebagai sistem evaluasi terbuka berbasis komunitas (community-driven).
- **27 Juni 2024** — penambahan dukungan gambar dan awal perluasan ke tugas-tugas multimodal.
- **20 September 2024** — "Graduation": perpindahan ke domain mandiri **lmarena.ai**.
- **Akhir 2024 — musim semi 2025** — peluncuran arena-arena khusus (Arena-Hard, WebDev Arena, RepoChat Arena, Style/Sentiment Control, dan lain-lain).
- **17 April 2025** — inkorporasi resmi sebagai perusahaan independen **Arena Intelligence Inc.**, peluncuran versi beta platform yang diperbarui dengan merek LMArena.
- **21 Mei 2025** — pengumuman berdirinya perusahaan dan perolehan seed round senilai **\$100 juta** (valuasi — \$600 juta).
- **31 Juli 2025** — publikasi dataset terbuka berisi **140 ribu** dialog Text Arena terbaru.
- **6 Januari 2026** — perolehan putaran Series A senilai **\$150 juta** dengan valuasi post-money **\$1,7 miliar**.
- **Januari 2026** — peluncuran **Video Arena** (dukungan penuh modalitas video).
- **28 Januari 2026** — rebranding final: platform berganti nama menjadi **Arena** dan berpindah ke domain **arena.ai**.

Hingga Maret 2026, Arena (arena.ai) melayani lebih dari 5 juta pengguna aktif bulanan dari 150+ negara, telah mengumpulkan puluhan juta suara, dan tetap menjadi salah satu alat independen paling otoritatif untuk evaluasi model-model frontier AI berdasarkan preferensi nyata manusia.

## Cara Kerja Evaluasi

Pengguna memasukkan permintaan dan menerima dua respons dari model-model anonim yang dipilih secara acak ("A" dan "B"), kemudian memberikan suara untuk respons terbaik (atau mencatat hasil seri/tidak memuaskan). Peringkat didasarkan pada model statistik **Bradley–Terry** (regresi logistik berdasarkan preferensi berpasangan), yang secara intuitif mirip dengan Elo<sup>[\[1\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-chiang2024-1)</sup>. Platform mempublikasikan **Arena Score** beserta interval kepercayaan, serta menerapkan koreksi sampling (re‑weighting) untuk mempertahankan ketidakbiasan saat sampling tidak merata<sup>[\[9\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-policy-9)</sup>.

**Transparansi dan keterbukaan.** Pipeline evaluasi dan peringkat sumber terbuka tersedia di repositori **FastChat**<sup>[\[10\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-10)</sup>; sebagian data mentah dipublikasikan secara berkala untuk verifikasi dan penelitian (misalnya, rilis 140 ribu dialog pada Juli 2025)<sup>[\[9\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-policy-9)[\[11\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-opendata_2025-11)</sup>. Menurut *FAQ* dan peringatan di halaman utama, permintaan pengguna dapat diungkapkan kepada penyedia model dan sebagian dipublikasikan untuk tujuan penelitian — data sensitif tidak boleh dikirimkan<sup>[\[12\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-12)[\[13\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-13)</sup>.

**Aturan seleksi dan sampling.** Leaderboard mencakup model-model yang tersedia untuk umum (bobot terbuka/API publik/layanan publik). Untuk stabilisasi penilaian biasanya diperlukan ≥**1000** suara; setidaknya **20%** battle hanya dilakukan antar model publik; probabilitas sampling meningkat seiring peringkat dan ketidakpastian, sementara regresi dengan pembobotan ulang memastikan ketidakbiasan penilaian akhir<sup>[\[9\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-policy-9)</sup>.

**Metrik otomatis dan kontrol gaya.** Untuk mempercepat evaluasi dan mengurangi efek preferensi "bergaya", digunakan metode pendukung: *MT‑Bench* (LLM-as-a-judge)<sup>[\[14\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-14)</sup>, *Arena‑Hard* (pembuatan otomatis pertanyaan sulit)<sup>[\[15\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-arena_hard-15)</sup>, serta **Style/Sentiment Control** (pemodelan dan "penyembuhan" efek nada/emosi terhadap preferensi)<sup>[\[16\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-sentiment_control-16)</sup>. Untuk *Arena‑Hard‑Auto* dilaporkan tingkat konsistensi yang sangat tinggi dengan suara manusia "langsung" (hingga **≈98,6%** dalam kondisi terkontrol)<sup>[\[17\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-17)</sup>.

## Arena dan Domain Evaluasi

Platform ini telah berkembang menjadi serangkaian "arena" berdasarkan jenis tugas:

- **Text Arena** — dialog/tugas umum, tabel utama<sup>[\[18\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-text_stats-18)</sup>.
- **Vision Arena** — model multimodal "teks→gambar/video/analisis gambar"<sup>[\[19\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-19)</sup>.
- **Text‑to‑Image** dan **Image Edit** — pembuatan dan pengeditan gambar (termasuk kasus *nano‑banana*)<sup>[\[20\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-tti_page-20)[\[21\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-nanobanana_blog-21)</sup>.
- **Text‑/Image‑to‑Video** — pembuatan video<sup>[\[22\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-22)</sup>.
- **WebDev Arena** — pembuatan aplikasi web dari deskripsi<sup>[\[23\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-webdev_arena-23)</sup>.
- **RepoChat Arena** — tugas rekayasa AI pada kode/repositori<sup>[\[24\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-repochat_arena-24)</sup>.
- **Search Arena** — model dengan koneksi ke pencarian web; pertama kali diluncurkan pada April 2025 (legacy), kemudian dipindahkan ke situs utama, disertai dengan dataset dan publikasi<sup>[\[25\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-25)[\[26\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-26)[\[27\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-27)</sup>.
- **BiomedArena.AI** — evaluasi spesifik domain untuk tugas biomedis (kemitraan dengan DataTecnica)<sup>[\[28\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-28)</sup>.

## Penerapan dan Pengaruh

- **Etalase industri.** Vendor-vendor terbesar (OpenAI, Anthropic, Google, dan lain-lain) secara rutin menguji dan mendemonstrasikan model di LMArena; media industri menggambarkan platform ini sebagai acuan penting<sup>[\[5\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-tc_seed-5)[\[29\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-29)</sup>. Dalam publikasi industri NAACL‑2025, penilaian Elo Chatbot Arena disebut sebagai "**gold industry‑standard**"<sup>[\[30\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-30)</sup>.
- **Pengujian pra-rilis.** Kebijakan mengizinkan pratinjau anonim model-model yang "belum dirilis" dengan pemberitahuan kepada komunitas dan publikasi penilaian publik setelah rilis; minimal ≈1000 suara untuk stabilisasi<sup>[\[9\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-policy-9)</sup>.
- **Episode terkenal.** Pada musim semi 2025, model anonim *Llama‑4 Maverick‑03‑26‑Experimental* menjadi perbincangan (insiden seputar perbandingan dengan versi publik), yang menarik perhatian luas dari pers dan memicu pembaruan aturan/komunikasi<sup>[\[31\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-31)[\[32\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-32)</sup>. Pada Agustus 2025, "nano‑banana" terungkap sebagai **Gemini 2.5 Flash Image** dan menduduki posisi terdepan dalam arena visual<sup>[\[21\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-nanobanana_blog-21)[\[20\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-tti_page-20)</sup>.

## Keterbatasan dan Kritik

Meskipun berskala besar dan populer, pendekatan ini memiliki keterbatasan:

- **Subjektivitas dan efek gaya.** Preferensi suara bergantung pada nada/cara menjawab; tim mengimplementasikan **Style/Sentiment Control** untuk memisahkan "gaya" dari "konten"<sup>[\[16\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-sentiment_control-16)</sup>.
- **Ketidakrepresentatifan audiens.** Inti pengguna aktif adalah para penggemar teknologi/pengembang; untuk skenario domain tertentu dibuat arena-arena khusus (Search, WebDev, Biomed, dan lain-lain)<sup>[\[33\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-33)</sup>.
- **Kerentanan terhadap manipulasi dan bias.** Penelitian tahun 2025 menunjukkan bahwa tanpa perlindungan yang ketat, strategi "penggelembungan suara" dengan ratusan hingga ribuan suara adalah mungkin; kerja sama peneliti dengan LMArena menghasilkan penerapan langkah-langkah perlindungan (CAPTCHA/login/perlindungan bot/deteksi anomali) dan peningkatan "biaya serangan"<sup>[\[34\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-34)[\[35\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-35)[\[36\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-36)</sup>.
- **Kritik metodologis.** Karya *The Leaderboard Illusion* (April 2025) menunjukkan faktor sistemik dan institusional yang dapat mendistorsi medan persaingan; LMArena menerbitkan respons terperinci dan memelihara *changelog* metodologi publik<sup>[\[37\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-37)[\[38\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-38)[\[39\]](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_note-changelog-39)</sup>.

## Tautan

- Situs resmi LMArena
- Blog/kebijakan dan pembaruan LMArena
- Situs kelompok penelitian LMSYS (inkubator asal proyek)

## Daftar Pustaka

- Chiang, W.-L. et al. (2024). *Chatbot Arena: An Open Platform for Evaluating LLMs by Human Preference*. arXiv:2403.04132.
- Zheng, L. et al. (2023). *Judging LLM-as-a-Judge with MT-Bench and Chatbot Arena*. arXiv:2306.05685.
- Li, T. et al. (2024). *From Crowdsourced Data to High-Quality Benchmarks: Arena-Hard and BenchBuilder Pipeline*. arXiv:2406.11939.
- Ameli, S.; Zhuang, S.; Stoica, I.; Mahoney, M. W. (2024). *A Statistical Framework for Ranking LLM-Based Chatbots*. arXiv:2412.18407.
- Boubdir, M. et al. (2023). *Elo Uncovered: Robustness and Best Practices in Language Model Evaluation*. arXiv:2311.17295.
- Huang, J. Y.; Shen, Y.; Wei, D.; Broderick, T. (2025). *Dropping Just a Handful of Preferences Can Change Top Large Language Model Rankings*. arXiv:2508.11847.
- Xu, Y.; Ruis, L.; Rocktäschel, T.; Kirk, R. (2025). *Investigating Non-Transitivity in LLM-as-a-Judge*. arXiv:2502.14074.
- Li, H. et al. (2024). *LLMs-as-Judges: A Comprehensive Survey on LLM-based Evaluation Methods*. arXiv:2412.05579.
- Zheng, L. et al. (2024). *LMSYS-Chat-1M: A Large-Scale Real-World LLM Conversation Dataset*. arXiv:2309.11998.
- Dubois, Y. et al. (2024). *Length-Controlled AlpacaEval: A Simple Way to Debias Automatic Evaluators*. arXiv:2404.04475.
- Singh, S. et al. (2025). *The Leaderboard Illusion*. arXiv:2504.20879.
- Min, R.; Pang, T.; Du, C.; Liu, Q.; Cheng, M.; Lin, M. (2025). *Improving Your Model Ranking on Chatbot Arena by Vote Rigging*. arXiv:2501.17858.

## Catatan

1.  <span id="cite_note-chiang2024-1">↑ <sup>[1.0](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-chiang2024_1-0)</sup> <sup>[1.1](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-chiang2024_1-1)</sup> Chiang, W.-L. et al. «Chatbot Arena: An Open Platform for Evaluating LLMs by Human Preference». *arXiv:2403.04132*, 2024.</span>
2.  <span id="cite_note-hello_2025-2">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-hello_2025_2-0) «Hello from LMArena: The Community Platform for Exploring Frontier AI». *LMArena Blog*, 23 июня 2025.</span>
3.  <span id="cite_note-new_site_2024-3">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-new_site_2024_3-0) «Announcing a New Site for Chatbot Arena». *LMSYS Blog*, 20 сентября 2024.</span>
4.  <span id="cite_note-seed_prn-4">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-seed_prn_4-0) «Arena Intelligence Raises \$100M Seed Round to Build the Standard for AI Evaluation». *PR Newswire / Arena Intelligence*, 21 мая 2025. <a href="https://www.prnewswire.com/news-releases/arena-intelligence-raises-100m-seed-round.html" class="external autonumber" rel="nofollow">[1]</a></span>
5.  <span id="cite_note-tc_seed-5">↑ <sup>[5.0](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-tc_seed_5-0)</sup> <sup>[5.1](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-tc_seed_5-1)</sup> Wiggers, K. «LMArena, the Chatbot Arena spinoff, raises \$100M seed at a \$600M valuation». *TechCrunch*, 21 мая 2025. <a href="https://techcrunch.com/2025/05/21/lmarena-chatbot-arena-spinoff-raises-100m-seed/" class="external autonumber" rel="nofollow">[2]</a></span>
6.  <span id="cite_note-series_a_2026-6">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-series_a_2026_6-0) «Arena Intelligence Closes \$150M Series A at \$1.7B Valuation». *Arena Intelligence Blog*, 6 января 2026. <a href="https://news.lmarena.ai/series-a-2026/" class="external autonumber" rel="nofollow">[3]</a></span>
7.  <span id="cite_note-arena_rebrand_2026-7">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-arena_rebrand_2026_7-0) «We Are Now Arena». *Arena Blog*, 28 января 2026. <a href="https://news.arena.ai/we-are-now-arena/" class="external autonumber" rel="nofollow">[4]</a></span>
8.  <span id="cite_note-new_beta_2025-8">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-new_beta_2025_8-0) «LMArena is Growing to Support our Community Platform». *LMArena Blog*, 17 апреля 2025.</span>
9.  <span id="cite_note-policy-9">↑ <sup>[9.0](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-policy_9-0)</sup> <sup>[9.1](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-policy_9-1)</sup> <sup>[9.2](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-policy_9-2)</sup> <sup>[9.3](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-policy_9-3)</sup> *LMArena Leaderboard Policy*. *LMArena Blog*, ред. 8 сентября 2025. <a href="https://news.lmarena.ai/policy/" class="external autonumber" rel="nofollow">[5]</a></span>
10. <span id="cite_note-10">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-10) lm‑sys/FastChat (GitHub). <a href="https://github.com/lm-sys/FastChat" class="external autonumber" rel="nofollow">[6]</a></span>
11. <span id="cite_note-opendata_2025-11">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-opendata_2025_11-0) «Releasing 140K Text Arena Conversations». *LMArena Blog*, 31 июля 2025. <a href="https://news.lmarena.ai/140k-text-arena-conversations/" class="external autonumber" rel="nofollow">[7]</a></span>
12. <span id="cite_note-12">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-12) *FAQ*. *LMArena*. <a href="https://lmarena.ai/faq" class="external autonumber" rel="nofollow">[8]</a></span>
13. <span id="cite_note-13">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-13) Главная страница *LMArena* (дисклеймер о возможной публикации данных и передачи провайдерам). <a href="https://lmarena.ai/" class="external autonumber" rel="nofollow">[9]</a></span>
14. <span id="cite_note-14">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-14) Zheng, L. et al. «Judging LLM‑as‑a‑Judge with MT‑Bench and Chatbot Arena». *arXiv:2306.05685*, 2023. <a href="https://arxiv.org/abs/2306.05685" class="external autonumber" rel="nofollow">[10]</a></span>
15. <span id="cite_note-arena_hard-15">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-arena_hard_15-0) Li, T. et al. «From Crowdsourced Data to High-Quality Benchmarks: Arena-Hard and BenchBuilder Pipeline». *arXiv:2406.11939*, 2024. <a href="https://arxiv.org/abs/2406.11939" class="external autonumber" rel="nofollow">[11]</a></span>
16. <span id="cite_note-sentiment_control-16">↑ <sup>[16.0](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-sentiment_control_16-0)</sup> <sup>[16.1](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-sentiment_control_16-1)</sup> «Style and Sentiment Control in the Arena». *LMArena Blog*, 2025. <a href="https://news.lmarena.ai/style-sentiment-control/" class="external autonumber" rel="nofollow">[12]</a></span>
17. <span id="cite_note-17">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-17) Li, T. et al. «From Crowdsourced Data…» *arXiv:2406.11939* (таблицы согласованности). <a href="https://arxiv.org/abs/2406.11939" class="external autonumber" rel="nofollow">[13]</a></span>
18. <span id="cite_note-text_stats-18">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-text_stats_18-0) *Text Arena (English)*. *LMArena*. <a href="https://lmarena.ai/leaderboard/text/english" class="external autonumber" rel="nofollow">[14]</a></span>
19. <span id="cite_note-19">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-19) *Vision Arena*. *LMArena*, обновлено 2 сентября 2025. <a href="https://lmarena.ai/leaderboard/vision" class="external autonumber" rel="nofollow">[15]</a></span>
20. <span id="cite_note-tti_page-20">↑ <sup>[20.0](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-tti_page_20-0)</sup> <sup>[20.1](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-tti_page_20-1)</sup> *Text-to-Image Leaderboard*. *LMArena*. <a href="https://lmarena.ai/leaderboard/text-to-image" class="external autonumber" rel="nofollow">[16]</a></span>
21. <span id="cite_note-nanobanana_blog-21">↑ <sup>[21.0](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-nanobanana_blog_21-0)</sup> <sup>[21.1](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-nanobanana_blog_21-1)</sup> «The nano-banana Story: Gemini 2.5 Flash Image Tops the Visual Arena». *LMArena Blog*, август 2025. <a href="https://news.lmarena.ai/nano-banana-reveal/" class="external autonumber" rel="nofollow">[17]</a></span>
22. <span id="cite_note-22">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-22) *Text‑to‑Video* и *Image‑to‑Video Leaderboards*. *LMArena*, август 2025. <a href="https://lmarena.ai/leaderboard/text-to-video" class="external autonumber" rel="nofollow">[18]</a> <a href="https://lmarena.ai/leaderboard/image-to-video" class="external autonumber" rel="nofollow">[19]</a></span>
23. <span id="cite_note-webdev_arena-23">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-webdev_arena_23-0) «Introducing WebDev Arena». *LMArena Blog*, 2025. <a href="https://news.lmarena.ai/webdev-arena/" class="external autonumber" rel="nofollow">[20]</a></span>
24. <span id="cite_note-repochat_arena-24">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-repochat_arena_24-0) «Introducing RepoChat Arena». *LMArena Blog*, 2025. <a href="https://news.lmarena.ai/repochat-arena/" class="external autonumber" rel="nofollow">[21]</a></span>
25. <span id="cite_note-25">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-25) «Introducing the Search Arena». *LMArena Blog*, 14 апреля 2025. <a href="https://news.lmarena.ai/search-arena/" class="external autonumber" rel="nofollow">[22]</a></span>
26. <span id="cite_note-26">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-26) «Search Arena & What We're Learning About Human Preference». *LMArena Blog*, 23 июля 2025. <a href="https://news.lmarena.ai/search-arena-update/" class="external autonumber" rel="nofollow">[23]</a></span>
27. <span id="cite_note-27">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-27) Frick, E. et al. «Search Arena: Analyzing Search‑Augmented LLMs». *arXiv:2506.05334*, 2025. <a href="https://arxiv.org/abs/2506.05334" class="external autonumber" rel="nofollow">[24]</a></span>
28. <span id="cite_note-28">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-28) «Introducing BiomedArena.AI». *LMArena Blog*, 19 августа 2025. <a href="https://news.lmarena.ai/introducing-biomedarena/" class="external autonumber" rel="nofollow">[25]</a></span>
29. <span id="cite_note-29">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-29) Google. «Gemma 3…», 12 марта 2025 (ссылка на результаты LMArena). <a href="https://blog.google/technology/developers/gemma-3/" class="external autonumber" rel="nofollow">[26]</a></span>
30. <span id="cite_note-30">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-30) Spangher, L. et al. «Chatbot Arena Estimate…». *NAACL Industry*, 2025. <a href="https://aclanthology.org/2025.naacl-industry.77.pdf" class="external autonumber" rel="nofollow">[27]</a></span>
31. <span id="cite_note-31">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-31) «Meta's experimental Llama 4 model briefly topped AI leaderboard…». *The Register*, 7 апреля 2025. <a href="https://www.theregister.com/2025/04/07/meta_llama_arena/" class="external autonumber" rel="nofollow">[28]</a></span>
32. <span id="cite_note-32">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-32) Официальные разъяснения/посты LMArena в X по инциденту (апрель 2025). <a href="https://x.com/lmarena_ai/status/1776881220809552182" class="external autonumber" rel="nofollow">[29]</a></span>
33. <span id="cite_note-33">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-33) «Search Arena & What We're Learning…». *LMArena Blog*, 23 июля 2025. <a href="https://news.lmarena.ai/search-arena-update/" class="external autonumber" rel="nofollow">[30]</a></span>
34. <span id="cite_note-34">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-34) Min, R. et al. «Improving Your Model Ranking on Chatbot Arena by Vote Rigging». *arXiv:2501.17858*, 2025. <a href="https://arxiv.org/abs/2501.17858" class="external autonumber" rel="nofollow">[31]</a></span>
35. <span id="cite_note-35">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-35) Huang, Y. et al. «Exploring and Mitigating Adversarial Manipulation of Voting‑Based Leaderboards». *arXiv:2501.07493*, 2025. <a href="https://arxiv.org/abs/2501.07493" class="external autonumber" rel="nofollow">[32]</a></span>
36. <span id="cite_note-36">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-36) «Hundreds of rigged votes can skew…». *Fast Company*, 6 февраля 2025. <a href="https://www.fastcompany.com/91273226/rigged-votes-ai-model-rankings-chatbot-arena" class="external autonumber" rel="nofollow">[33]</a></span>
37. <span id="cite_note-37">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-37) Singh, S. et al. «The Leaderboard Illusion». *arXiv:2504.20879*, 2025. <a href="https://arxiv.org/abs/2504.20879" class="external autonumber" rel="nofollow">[34]</a></span>
38. <span id="cite_note-38">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-38) «Our Response to 'The Leaderboard Illusion'». *LMArena Blog*, 9 мая 2025. <a href="https://news.lmarena.ai/our-response/" class="external autonumber" rel="nofollow">[35]</a></span>
39. <span id="cite_note-changelog-39">[↑](https://systems-analysis.info/int/LMArena_(Chatbot_Arena)_(ID)#cite_ref-changelog_39-0) «Methodology Changelog». *LMArena Blog*. <a href="https://news.lmarena.ai/changelog/" class="external autonumber" rel="nofollow">[36]</a></span>