YandexGPT (language model) (UR)

From Systems analysis Wiki
Jump to navigation Jump to search

YandexGPT (Yet another GPT) — بڑے لسانی ماڈلز (Large Language Models) کا ایک خاندان ہے جسے Yandex نے تیار کیا اور مئی 2023 میں پہلی بار متعارف کرایا گیا۔[1] YandexGPT کے نیٹ ورکس بلٹ اِن اسسٹنٹ Alice، سرچ اور دیگر سروسز میں استعمال ہوتے ہیں، نیز Yandex Cloud پلیٹ فارم کے عوامی API کے ذریعے بھی دستیاب ہیں۔[2]

YaLM‑100B (2022) — ایک پیشرو تحقیقی ماڈل ہے جس میں 100 ارب پیرامیٹرز اور کھلا سورس کوڈ موجود ہے؛ اس نے "ثبوتِ تصور" کا کردار ادا کیا، تاہم YandexGPT کو تجارتی استعمال کے لیے الگ سے تیار کیا گیا۔[3]

ریلیز کی تاریخ

اہم ورژن
تاریخ ریلیز اہم خصوصیات
جون 2022 YaLM‑100B 100B پیرامیٹرز، 1.7 ٹی بی ڈیٹا؛ Apache 2.0۔[3]
17 مئی 2023 YandexGPT 1.0 Alice میں انضمام۔[1]
7 ستمبر 2023 YandexGPT 2 داخلی ٹیسٹوں کے مطابق معیار میں +67% اضافہ۔[4]
28 مارچ 2024 YandexGPT 3 Pro / Lite نئی کارپوریٹ API لائن۔[5]
24 اکتوبر 2024 YandexGPT 4 Pro / Lite 32,000 tokens کا سیاق و سباق؛ پوشیدہ استدلال (chain‑of‑thought)۔[6]
25 فروری 2025 YandexGPT 5 Pro 64% کاموں میں GPT‑4o کے برابر۔[7]
31 مارچ 2025 YandexGPT 5 Lite Instruct 8 ارب پیرامیٹرز کا ماڈل کھلی رسائی میں؛ Llama فارمیٹ۔[8]

فن تعمیر اور تربیت

  • بنیادی فن تعمیر: transformer، جسے روسی زبان کے لیے بہتر بنایا گیا ہے۔
  • YandexGPT 5 Lite: Llama کے ساتھ ہم آہنگ؛ pre‑training ≈ 15 ٹریلین tokens، بعد از تربیت fine‑tuning ≈ 320 ارب۔[8]

سیاق و سباق اور حدود

  • فن تعمیراتی سیاق و سباق کی حد — 32,000 tokens (ورژن 4/5)۔[6]
  • عوامی API ایک درخواست (prompt + completion) کو 7,400 tokens تک محدود کرتا ہے۔[9]
  • جواب کا زیادہ سے زیادہ حجم — "Quotas and limits" سیکشن کے مطابق 2,000 tokens۔[10]

موجودہ ماڈلز (جون 2025)

ماڈل پیرامیٹرز سیاق و سباق لائسنس نوٹس
YandexGPT 5 Pro دستیاب نہیں 32,000 ملکیتی API اور Alice Pro کے ذریعے رسائی۔[7]
YandexGPT 5 Lite 8 ارب 32,000 Yandex GPT‑Lite License کھلا؛ Llama کے ساتھ ہم آہنگ۔[8]
YaLM‑100B 100 ارب 2,048 Apache 2.0 اصل منصوبہ۔[3]

Benchmarks

  • داخلی ٹیسٹ: 5 Pro نے 64% کاموں میں GPT‑4o کے ساتھ برابری حاصل کی؛ 4 Pro پر برتری — 67%۔[7]
  • ru‑LLM Arena: YandexGPT روسی زبان کے ماڈلز میں ELO درجہ بندی میں سرفہرست ہے۔[11]

Fine‑tuning

5 Lite کے لیے LoRA طریقہ کار سرکاری طور پر معاون ہے؛ استعمال کی مثال model card میں شائع کی گئی ہے۔[8]

API موڈ

  • ہم وقت (Synchronous) — تیز جوابات (Lite)۔
  • غیر ہم وقت (Asynchronous) — وسائل طلب کام (Pro)۔[2]

ملٹی موڈیلٹی

YandexGPT خاندان متنی رہتا ہے؛ ملٹی موڈل سروسز («Neuro»، «YandexArt»، «Yandex Vision») الگ طور پر ترقی پا رہی ہیں۔[6]

روابط

  • Yandex Cloud میں YandexGPT — سروس صفحہ
  • Hugging Face پر YandexGPT‑5 Lite کے weights
  • GitHub پر YaLM‑100B ریپوزیٹری

کتابیات

  • Matkin, N. et al. (2024). Comparative Analysis of Encoder-Based NER and Large Language Models for Skill Extraction from Russian Job Vacancies. arXiv:2407.19816.
  • Tsanda, A.; Bruches, E. (2024). Russian-Language Multimodal Dataset for Automatic Summarization of Scientific Papers. arXiv:2405.07886.
  • Goloburda, M. et al. (2025). Qorǵau: Evaluating LLM Safety in Kazakh-Russian Bilingual Contexts. arXiv:2502.13640.
  • Togmanov, M. et al. (2025). KazMMLU: Evaluating Language Models on Kazakh, Russian, and Regional Knowledge of Kazakhstan. arXiv:2502.12829.
  • Noels, S. et al. (2025). What Large Language Models Do Not Talk About: An Empirical Study of Moderation and Censorship Practices. arXiv:2504.03803.

حوالہ جات

  1. 1.0 1.1 «“Яндекс” добавил в “Алису” аналог ChatGPT». РБК. [1]
  2. 2.0 2.1 «Getting started with YandexGPT (Quickstart)». Yandex Cloud Docs. [2]
  3. 3.0 3.1 3.2 «yandex/YaLM‑100B: Pretrained language model with 100B». GitHub. [3]
  4. «Как “Яндекс” решил зарабатывать на своём аналоге ChatGPT». РБК. [4]
  5. «“Яндекс” представил третье поколение нейросетей YandexGPT». РБК. [5]
  6. 6.0 6.1 6.2 «Более мощное семейство моделей YandexGPT 4». Habr. [6]
  7. 7.0 7.1 7.2 «“Яндекс” внедрил YandexGPT 5 Pro в чат с “Алисой Про”». AdIndex. [7]
  8. 8.0 8.1 8.2 8.3 «yandex/YandexGPT‑5‑Lite‑8B‑pretrain». Hugging Face. [8]
  9. «ChatYandexGPT API Reference (max_tokens = 7400)». LangChain Docs. [9]
  10. «Yandex Cloud service quotas and limits → Foundation Models». Yandex Cloud Docs. [10]
  11. «llmarena/llmarena — российская краудсорсинговая платформа оценки LLM». GitHub. [11]