YandexGPT (language model) (NL)

From Systems analysis Wiki
Jump to navigation Jump to search

YandexGPT (Yet another GPT) — een familie van grote taalmodellen (Large Language Models), ontwikkeld door Yandex en voor het eerst gepresenteerd in mei 2023.[1] De YandexGPT-netwerken worden gebruikt in de ingebouwde assistent Alice, in de Zoekmachine en andere diensten, en zijn ook beschikbaar via de publieke API van het Yandex Cloud-platform.[2]

YaLM‑100B (2022) — het voorafgaande onderzoeksmodel met 100 miljard parameters en open broncode; het diende als "proof of concept", maar YandexGPT werd afzonderlijk ontwikkeld voor commercieel gebruik.[3]

Geschiedenis van releases

Belangrijkste versies
Datum Release Kernkenmerken
Jun 2022 YaLM‑100B 100 B parameters, 1,7 TB data; Apache 2.0.[3]
17 mei 2023 YandexGPT 1.0 Integratie in "Alice".[1]
7 sep 2023 YandexGPT 2 +67 % kwaliteit volgens interne tests.[4]
28 mrt 2024 YandexGPT 3 Pro / Lite Nieuwe zakelijke API-lijn.[5]
24 okt 2024 YandexGPT 4 Pro / Lite Context van 32.000 tokens; verborgen redenering (chain‑of‑thought).[6]
25 feb 2025 YandexGPT 5 Pro Pariteit met GPT‑4o in 64 % van de taken.[7]
31 mrt 2025 YandexGPT 5 Lite Instruct Model van 8 miljard parameters in open toegang; Llama-formaat.[8]

Architectuur en training

  • Basisarchitectuur: transformer, geoptimaliseerd voor de Russische taal.
  • YandexGPT 5 Lite: Llama-compatibel; pre-training ≈ 15 biljoen tokens, aansluitende fine-tuning ≈ 320 miljard.[8]

Context en limieten

  • Architecturaal maximale contextlengte — 32.000 tokens (versies 4/5).[6]
  • De publieke API beperkt één verzoek (prompt + completion) tot 7.400 tokens.[9]
  • Maximale grootte van het **antwoord** — 2.000 tokens volgens de sectie "Quotas and limits".[10]

Huidige modellen (juni 2025)

Model Parameters Context Licentie Opmerkingen
YandexGPT 5 Pro n.v.t. 32.000 proprietair Toegankelijk via API en "Alice Pro".[7]
YandexGPT 5 Lite 8 mld 32.000 Yandex GPT‑Lite License Open; Llama-compatibel.[8]
YaLM‑100B 100 mld 2.048 Apache 2.0 Oorspronkelijk project.[3]

Benchmarks

  • Interne tests: 5 Pro bereikte pariteit met GPT‑4o in 64 % van de taken; overschrijding ten opzichte van 4 Pro — 67 %.[7]
  • ru‑LLM Arena: YandexGPT handhaaft de leiderspositie op basis van ELO-rating onder Russischtalige modellen.[11]

Fine‑tuning

Voor 5 Lite wordt de LoRA-methode officieel ondersteund; een voorbeeld van uitvoering is gepubliceerd in de model card.[8]

API‑modi

  • Synchroon — snelle antwoorden (Lite).
  • Asynchroon — resource-intensieve taken (Pro).[2]

Multimodaliteit

De YandexGPT-familie blijft tekstgebaseerd; multimodale diensten ("Neuro", "YandexArt", "Yandex Vision") worden afzonderlijk ontwikkeld.[6]

Verwijzingen

  • YandexGPT in Yandex Cloud — servicepagina
  • Gewichten van YandexGPT‑5 Lite op Hugging Face
  • YaLM‑100B-repository op GitHub

Literatuur

  • Matkin, N. et al. (2024). Comparative Analysis of Encoder-Based NER and Large Language Models for Skill Extraction from Russian Job Vacancies. arXiv:2407.19816.
  • Tsanda, A.; Bruches, E. (2024). Russian-Language Multimodal Dataset for Automatic Summarization of Scientific Papers. arXiv:2405.07886.
  • Goloburda, M. et al. (2025). Qorǵau: Evaluating LLM Safety in Kazakh-Russian Bilingual Contexts. arXiv:2502.13640.
  • Togmanov, M. et al. (2025). KazMMLU: Evaluating Language Models on Kazakh, Russian, and Regional Knowledge of Kazakhstan. arXiv:2502.12829.
  • Noels, S. et al. (2025). What Large Language Models Do Not Talk About: An Empirical Study of Moderation and Censorship Practices. arXiv:2504.03803.

Noten

  1. ↑ 1.0 1.1 «“Яндекс” добавил в “Алису” аналог ChatGPT». РБК. [1]
  2. ↑ 2.0 2.1 «Getting started with YandexGPT (Quickstart)». Yandex Cloud Docs. [2]
  3. ↑ 3.0 3.1 3.2 «yandex/YaLM‑100B: Pretrained language model with 100B». GitHub. [3]
  4. ↑ «Как “Яндекс” решил зарабатывать на своём аналоге ChatGPT». РБК. [4]
  5. ↑ «“Яндекс” представил третье поколение нейросетей YandexGPT». РБК. [5]
  6. ↑ 6.0 6.1 6.2 «Более мощное семейство моделей YandexGPT 4». Habr. [6]
  7. ↑ 7.0 7.1 7.2 «“Яндекс” внедрил YandexGPT 5 Pro в чат с “Алисой Про”». AdIndex. [7]
  8. ↑ 8.0 8.1 8.2 8.3 «yandex/YandexGPT‑5‑Lite‑8B‑pretrain». Hugging Face. [8]
  9. ↑ «ChatYandexGPT API Reference (max_tokens = 7400)». LangChain Docs. [9]
  10. ↑ «Yandex Cloud service quotas and limits → Foundation Models». Yandex Cloud Docs. [10]
  11. ↑ «llmarena/llmarena — российская краудсорсинговая платформа оценки LLM». GitHub. [11]
Retrieved from "https://systems-analysis.info/int/index.php?title=YandexGPT_(language_model)_(NL)&oldid=8522"