π ΠΠ°Π½Π΄ΡΠ°ΡΡ ΠΌΠΎΠ΄Π΅Π»Π΅ΠΉ
Π ΡΠ½ΠΎΠΊ LLM ΡΡΡΡΠΎΠ΅Π½ ΠΊΠ°ΠΊ Π΄Π²Π° ΠΏΠ°ΡΠ°Π»Π»Π΅Π»ΡΠ½ΡΡ ΠΌΠΈΡΠ°. Π ΠΎΠ΄Π½ΠΎΠΌ β Π½Π΅ΡΠΊΠΎΠ»ΡΠΊΠΎ Π±ΠΎΠ»ΡΡΠΈΡ Π»Π°Π±ΠΎΡΠ°ΡΠΎΡΠΈΠΉ, ΠΊΠΎΡΠΎΡΡΠ΅ Π΄Π΅Π»Π°ΡΡ Π·Π°ΠΊΡΡΡΡΠ΅ ΠΌΠΎΠ΄Π΅Π»ΠΈ-ΡΠ»Π°Π³ΠΌΠ°Π½Ρ ΠΈ ΠΏΡΠΎΠ΄Π°ΡΡ ΠΊ Π½ΠΈΠΌ Π΄ΠΎΡΡΡΠΏ ΡΠ΅ΡΠ΅Π· API. Π Π΄ΡΡΠ³ΠΎΠΌ β ΠΎΡΠΊΡΡΡΠΎΠ΅ ΡΠΎΠΎΠ±ΡΠ΅ΡΡΠ²ΠΎ ΠΈ ΠΊΠΈΡΠ°ΠΉΡΠΊΠΈΠ΅ Π»Π°Π±ΠΎΡΠ°ΡΠΎΡΠΈΠΈ, ΠΊΠΎΡΠΎΡΡΠ΅ ΠΏΡΠ±Π»ΠΈΠΊΡΡΡ Π²Π΅ΡΠ° ΠΌΠΎΠ΄Π΅Π»Π΅ΠΉ, ΠΊΠΎΡΠΎΡΡΠ΅ ΠΌΠΎΠΆΠ½ΠΎ Π·Π°ΠΏΡΡΡΠΈΡΡ Ρ ΡΠ΅Π±Ρ. Π ΡΠΊΠΎΠ²ΠΎΠ΄ΠΈΡΠ΅Π»Ρ Π²Π°ΠΆΠ½ΠΎ Π·Π½Π°ΡΡ ΠΎΠ±ΠΎΠΈΡ , ΠΏΠΎΡΠΎΠΌΡ ΡΡΠΎ Π²ΡΠ±ΠΎΡ ΠΌΠ΅ΠΆΠ΄Ρ Π½ΠΈΠΌΠΈ β ΡΡΠΎ ΠΏΡΠ΅ΠΆΠ΄Π΅ Π²ΡΠ΅Π³ΠΎ Π²ΠΎΠΏΡΠΎΡ Π΄Π°Π½Π½ΡΡ , Π΄Π΅Π½Π΅Π³ ΠΈ ΡΡΠΈΡΠ΄ΠΈΠΊΡΠΈΠΈ, Π° Π½Π΅ Β«ΠΊΠ°ΠΊΠ°Ρ ΡΠΌΠ½Π΅Π΅Β».
ΠΠΈΡΠΊΠ»Π΅ΠΉΠΌΠ΅Ρ ΠΎ ΡΠ΅Π½Π°Ρ ΠΈ Π²Π΅ΡΡΠΈΡΡ
ΠΠΎΠ½ΠΊΡΠ΅ΡΠ½ΡΠ΅ Π²Π΅ΡΡΠΈΠΈ ΠΌΠΎΠ΄Π΅Π»Π΅ΠΉ ΠΈ ΡΠ°ΡΡΠ΅Π½ΠΊΠΈ ΠΌΠ΅Π½ΡΡΡΡΡ ΠΊΠ°ΠΆΠ΄ΡΠ΅ Π½Π΅ΡΠΊΠΎΠ»ΡΠΊΠΎ ΠΌΠ΅ΡΡΡΠ΅Π². ΠΠΈΠΆΠ΅ β ΡΡΡΡΠΊΡΡΡΠ° ΡΡΠ½ΠΊΠ° ΠΈ ΠΏΠΎΡΡΠ΄ΠΎΠΊ Π²Π΅Π»ΠΈΡΠΈΠ½. ΠΠ΅ΡΠ΅Π΄ Π·Π°ΠΊΡΠΏΠΊΠΎΠΉ Π²ΡΠ΅Π³Π΄Π° ΡΠ²Π΅ΡΡΠΉΡΠ΅ΡΡ Ρ Π°ΠΊΡΡΠ°Π»ΡΠ½ΡΠΌ ΠΏΡΠ°ΠΉΡΠΎΠΌ ΠΏΡΠΎΠ²Π°ΠΉΠ΄Π΅ΡΠ° ΠΈ ΡΠ²Π΅ΠΆΠΈΠΌΠΈ Π±Π΅Π½ΡΠΌΠ°ΡΠΊΠ°ΠΌΠΈ.
ΠΠ°ΠΊΡΡΡΡΠ΅ (ΠΏΡΠΎΠΏΡΠΈΠ΅ΡΠ°ΡΠ½ΡΠ΅) ΠΌΠΎΠ΄Π΅Π»ΠΈ
ΠΠΎΡΡΡΠΏ β ΡΠΎΠ»ΡΠΊΠΎ ΡΠ΅ΡΠ΅Π· API Π²Π»Π°Π΄Π΅Π»ΡΡΠ°. ΠΡ Π½Π΅ Π²ΠΈΠ΄ΠΈΡΠ΅ Β«Π²Π½ΡΡΡΠ΅Π½Π½ΠΎΡΡΠΈΒ» ΠΈ Π½Π΅ ΠΌΠΎΠΆΠ΅ΡΠ΅ Π·Π°ΠΏΡΡΡΠΈΡΡ ΠΌΠΎΠ΄Π΅Π»Ρ Π½Π° ΡΠ²ΠΎΡΠΌ ΡΠ΅ΡΠ²Π΅ΡΠ΅. ΠΠ·Π°ΠΌΠ΅Π½ β Π»ΡΡΡΠΈΠΉ Π½Π° ΠΌΠΎΠΌΠ΅Π½Ρ Π²ΡΡ ΠΎΠ΄Π° ΡΡΠΎΠ²Π΅Π½Ρ ΠΊΠ°ΡΠ΅ΡΡΠ²Π°, ΠΏΡΠΎΡΡΠ°Ρ ΠΈΠ½ΡΠ΅Π³ΡΠ°ΡΠΈΡ ΠΈ Π½ΠΈΠΊΠ°ΠΊΠΎΠ³ΠΎ ΡΡ ΠΎΠ΄Π° Π·Π° Β«ΠΆΠ΅Π»Π΅Π·ΠΎΠΌΒ».
| Π‘Π΅ΠΌΠ΅ΠΉΡΡΠ²ΠΎ | ΠΠ»Π°Π΄Π΅Π»Π΅Ρ | ΠΠΎΠ·ΠΈΡΠΈΠΎΠ½ΠΈΡΠΎΠ²Π°Π½ΠΈΠ΅ |
|---|---|---|
| GPT | OpenAI | ΠΠ΅-ΡΠ°ΠΊΡΠΎ ΠΎΡΡΠ°ΡΠ»Π΅Π²ΠΎΠΉ ΡΡΠ°Π½Π΄Π°ΡΡ, ΠΎΠ³ΡΠΎΠΌΠ½Π°Ρ ΡΠΊΠΎΡΠΈΡΡΠ΅ΠΌΠ° ΠΈΠ½ΡΡΡΡΠΌΠ΅Π½ΡΠΎΠ² |
| Claude | Anthropic | Π‘ΠΈΠ»ΡΠ½ΠΎΠ΅ ΡΠ°ΡΡΡΠΆΠ΄Π΅Π½ΠΈΠ΅, Π΄Π»ΠΈΠ½Π½ΡΠΉ ΠΊΠΎΠ½ΡΠ΅ΠΊΡΡ, Π°ΠΊΡΠ΅Π½Ρ Π½Π° Π±Π΅Π·ΠΎΠΏΠ°ΡΠ½ΠΎΡΡΡ |
| Gemini | ΠΠ»ΡΠ±ΠΎΠΊΠ°Ρ ΠΈΠ½ΡΠ΅Π³ΡΠ°ΡΠΈΡ Ρ ΡΠΊΠΎΡΠΈΡΡΠ΅ΠΌΠΎΠΉ Google, ΠΌΡΠ»ΡΡΠΈΠΌΠΎΠ΄Π°Π»ΡΠ½ΠΎΡΡΡ |
ΠΠ΅ΡΠ°ΡΡ ΠΈΡ Π²Π½ΡΡΡΠΈ ΡΠ΅ΠΌΠ΅ΠΉΡΡΠ²Π°
ΠΠ°ΠΆΠ΄ΠΎΠ΅ ΡΠ΅ΠΌΠ΅ΠΉΡΡΠ²ΠΎ β ΡΡΠΎ Π»ΠΈΠ½Π΅ΠΉΠΊΠ°: ΡΠ»Π°Π³ΠΌΠ°Π½ (Π΄ΠΎΡΠΎΠ³ΠΎ, ΡΠΌΠ½ΠΎ, ΠΌΠ΅Π΄Π»Π΅Π½Π½Π΅Π΅), ΡΡΠ΅Π΄Π½ΡΡ ΠΌΠΎΠ΄Π΅Π»Ρ (Π±Π°Π»Π°Π½Ρ) ΠΈ ΠΊΠΎΠΌΠΏΠ°ΠΊΡΠ½Π°Ρ/Π±ΡΡΡΡΠ°Ρ (Π΄ΡΡΠ΅Π²ΠΎ, Π΄Π»Ρ ΠΌΠ°ΡΡΠΎΠ²ΡΡ ΠΎΠΏΠ΅ΡΠ°ΡΠΈΠΉ). ΠΠΎΠ»ΡΡΠ°Ρ ΡΠ°ΡΡΡ ΡΠΊΠΎΠ½ΠΎΠΌΠΈΠΈ Π² ΠΏΡΠΎΠ΅ΠΊΡΠ΅ ΡΠΎΠΆΠ΄Π°Π΅ΡΡΡ ΡΠ΅ΠΌ, ΡΡΠΎ ΠΌΠ°ΡΡΠΎΠ²ΡΠ΅ Π·Π°Π΄Π°ΡΠΈ ΠΎΡΠΏΡΠ°Π²Π»ΡΡΡ Π½Π° ΠΊΠΎΠΌΠΏΠ°ΠΊΡΠ½ΡΠ΅ ΠΌΠΎΠ΄Π΅Π»ΠΈ, Π° ΡΠ»ΠΎΠΆΠ½ΡΠ΅ β Π½Π° ΡΠ»Π°Π³ΠΌΠ°Π½. Π‘ΠΌ. 05-vybor-modeli ΠΈ 06-stoimost-i-ekonomika.
ΠΡΠΊΡΡΡΡΠ΅ ΠΌΠΎΠ΄Π΅Π»ΠΈ (open-weights)
ΠΠ΅ΡΠ° ΠΏΡΠ±Π»ΠΈΠΊΡΡΡΡΡ β ΠΌΠΎΠ΄Π΅Π»Ρ ΠΌΠΎΠΆΠ½ΠΎ ΡΠΊΠ°ΡΠ°ΡΡ ΠΈ Π·Π°ΠΏΡΡΡΠΈΡΡ Π² ΡΠΎΠ±ΡΡΠ²Π΅Π½Π½ΠΎΠΌ ΠΊΠΎΠ½ΡΡΡΠ΅. ΠΠ°ΡΠ΅ΡΡΠ²ΠΎ Π²Π΅ΡΡ ΡΡΠ΅ΠΊ ΠΎΡΠΊΡΡΡΡΡ ΠΌΠΎΠ΄Π΅Π»Π΅ΠΉ ΡΠΆΠ΅ ΡΠΎΠΏΠΎΡΡΠ°Π²ΠΈΠΌΠΎ Ρ Π·Π°ΠΊΡΡΡΡΠΌΠΈ ΠΏΡΠ΅Π΄ΡΠ΄ΡΡΠ΅Π³ΠΎ ΠΏΠΎΠΊΠΎΠ»Π΅Π½ΠΈΡ.
| Π‘Π΅ΠΌΠ΅ΠΉΡΡΠ²ΠΎ | Π‘ΠΎΠ·Π΄Π°ΡΠ΅Π»Ρ | ΠΠ°ΡΠ΅ΠΌ ΡΠΌΠΎΡΡΠ΅ΡΡ |
|---|---|---|
| Llama | Meta | Π‘Π°ΠΌΠΎΠ΅ ΠΈΠ·Π²Π΅ΡΡΠ½ΠΎΠ΅ Π·Π°ΠΏΠ°Π΄Π½ΠΎΠ΅ ΠΎΡΠΊΡΡΡΠΎΠ΅ ΡΠ΅ΠΌΠ΅ΠΉΡΡΠ²ΠΎ, Π±ΠΎΠ»ΡΡΠ°Ρ ΡΠΊΠΎΡΠΈΡΡΠ΅ΠΌΠ° |
| Qwen | Alibaba | Π‘ΠΈΠ»ΡΠ½ΡΠ΅ ΠΌΠΎΠ΄Π΅Π»ΠΈ, Ρ ΠΎΡΠΎΡΠ΅Π΅ ΡΠ»Π΅Π΄ΠΎΠ²Π°Π½ΠΈΠ΅ ΠΈΠ½ΡΡΡΡΠΊΡΠΈΡΠΌ, ΠΌΡΠ»ΡΡΠΈΠΌΠΎΠ΄Π°Π»ΡΠ½ΠΎΡΡΡ |
| DeepSeek | DeepSeek | Π‘ΠΈΠ»ΡΠ½ΠΎΠ΅ ΡΠ°ΡΡΡΠΆΠ΄Π΅Π½ΠΈΠ΅, ΡΠΊΠΎΠ½ΠΎΠΌΠ½Π°Ρ Π°ΡΡ ΠΈΡΠ΅ΠΊΡΡΡΠ° (MoE) |
| GLM (ChatGLM) | Zhipu | ΠΠΈΡΠ°ΠΉΡΠΊΠΈΠΉ ΡΠ»Π°Π³ΠΌΠ°Π½, Π΅ΡΡΡ ΡΡΡΡΠΊΠΎΡΠ·ΡΡΠ½Π°Ρ Π°Π΄Π°ΠΏΡΠ°ΡΠΈΡ |
| Mistral / Mixtral | Mistral AI | ΠΠ²ΡΠΎΠΏΠ΅ΠΉΡΠΊΠΈΠ΅ ΠΎΡΠΊΡΡΡΡΠ΅ ΠΌΠΎΠ΄Π΅Π»ΠΈ, ΠΊΠΎΠΌΠΏΠ°ΠΊΡΠ½ΡΠ΅ ΠΈ ΡΡΡΠ΅ΠΊΡΠΈΠ²Π½ΡΠ΅ |
Β«ΠΡΠΊΡΡΡΡΠ΅Β» β Β«Π±Π΅ΡΠΏΠ»Π°ΡΠ½ΡΠ΅ Π΄Π»Ρ ΠΊΠΎΠΌΠΌΠ΅ΡΡΠΈΠΈΒ»
ΠΠΈΡΠ΅Π½Π·ΠΈΠΈ ΠΎΡΠΊΡΡΡΡΡ ΠΌΠΎΠ΄Π΅Π»Π΅ΠΉ ΡΠ°Π·Π½ΡΠ΅: Π½Π΅ΠΊΠΎΡΠΎΡΡΠ΅ ΡΠ°Π·ΡΠ΅ΡΠ°ΡΡ ΠΊΠΎΠΌΠΌΠ΅ΡΡΠ΅ΡΠΊΠΎΠ΅ ΠΈΡΠΏΠΎΠ»ΡΠ·ΠΎΠ²Π°Π½ΠΈΠ΅ Π±Π΅Π· ΠΎΠ³ΡΠ°Π½ΠΈΡΠ΅Π½ΠΈΠΉ, Π΄ΡΡΠ³ΠΈΠ΅ β ΡΠΎΠ»ΡΠΊΠΎ Π΄ΠΎ ΠΎΠΏΡΠ΅Π΄Π΅Π»ΡΠ½Π½ΠΎΠ³ΠΎ ΠΎΠ±ΠΎΡΠΎΡΠ° ΠΈΠ»ΠΈ ΡΡΠ΅Π±ΡΡΡ ΠΎΡΠ΄Π΅Π»ΡΠ½ΡΡ ΡΡΠ»ΠΎΠ²ΠΈΠΉ. ΠΡΠ΅Π³Π΄Π° ΠΏΡΠΎΠ²Π΅ΡΡΠΉΡΠ΅ Π»ΠΈΡΠ΅Π½Π·ΠΈΡ ΠΊΠΎΠ½ΠΊΡΠ΅ΡΠ½ΠΎΠΉ Π²Π΅ΡΡΠΈΠΈ, ΠΏΡΠ΅ΠΆΠ΄Π΅ ΡΠ΅ΠΌ Π²ΡΡΡΠ°ΠΈΠ²Π°ΡΡ ΠΌΠΎΠ΄Π΅Π»Ρ Π² ΠΏΡΠΎΠ΄ΡΠΊΡ.
Π ΠΎΡΡΠΈΠΉΡΠΊΠΈΠΉ ΠΊΠΎΠ½ΡΠ΅ΠΊΡΡ
ΠΠ»Ρ ΡΠΎΡΡΠΈΠΉΡΠΊΠΈΡ ΠΊΠΎΠΌΠΏΠ°Π½ΠΈΠΉ Π°ΠΊΡΡΠ°Π»ΡΠ½Ρ Π΄Π²Π° ΡΠ»ΠΎΡ:
- ΠΠΎΡΡΡΠΏ ΠΊ Π³Π»ΠΎΠ±Π°Π»ΡΠ½ΡΠΌ ΠΌΠΎΠ΄Π΅Π»ΡΠΌ ΡΠ΅ΡΠ΅Π· ΠΏΠΎΡΡΠ΅Π΄Π½ΠΈΠΊΠΎΠ² β ΡΠΎΡΡΠΈΠΉΡΠΊΠΈΠ΅ ΠΈ ΠΌΠ΅ΠΆΠ΄ΡΠ½Π°ΡΠΎΠ΄Π½ΡΠ΅ API-Π°Π³ΡΠ΅Π³Π°ΡΠΎΡΡ, ΠΊΠΎΡΠΎΡΡΠ΅ ΠΏΡΠΎΠΊΡΠΈΡΡΡΡ Π·Π°ΠΏΡΠΎΡΡ ΠΊ GPT/Claude/Gemini ΠΈ ΠΏΡΠΈΠ½ΠΈΠΌΠ°ΡΡ ΠΎΠΏΠ»Π°ΡΡ Π² ΡΡΠ±Π»ΡΡ . Π£Π΄ΠΎΠ±Π½ΠΎ, Π½ΠΎ Π΄Π°Π½Π½ΡΠ΅ ΠΏΡΠΎΡ ΠΎΠ΄ΡΡ ΡΠ΅ΡΠ΅Π· ΡΡΠ΅ΡΡΠΈΡ Π»ΠΈΡ β ΡΠΌ. 15-compliance-i-bezopasnost.
- Π ΠΎΡΡΠΈΠΉΡΠΊΠΈΠ΅ ΠΌΠΎΠ΄Π΅Π»ΠΈ ΠΈ ΠΏΠ»Π°ΡΡΠΎΡΠΌΡ β ΡΠΎΠ±ΡΡΠ²Π΅Π½Π½ΡΠ΅ LLM ΠΊΡΡΠΏΠ½ΡΡ ΠΈΠ³ΡΠΎΠΊΠΎΠ² ΠΈ ΠΎΠ±Π»Π°ΡΠ½ΡΠ΅ ΡΠ΅ΡΠ²ΠΈΡΡ inference. ΠΠΎΠ΄Ρ ΠΎΠ΄ΡΡ, ΠΊΠΎΠ³Π΄Π° ΡΡΠ΅Π±ΡΠ΅ΡΡΡ Π΄Π΅ΡΠΆΠ°ΡΡ Π΄Π°Π½Π½ΡΠ΅ Π² ΡΡΠΈΡΠ΄ΠΈΠΊΡΠΈΠΈ Π Π€ ΠΈΠ»ΠΈ ΡΠ°Π±ΠΎΡΠ°ΡΡ Ρ Π³ΠΎΡΠΊΠ»ΠΈΠ΅Π½ΡΠΎΠΌ.
Π’ΠΈΠΏΠΈΡΠ½ΠΎΠ΅ enterprise-ΡΠ΅ΡΠ΅Π½ΠΈΠ΅
Π§ΡΠ²ΡΡΠ²ΠΈΡΠ΅Π»ΡΠ½ΡΠ΅ Π΄Π°Π½Π½ΡΠ΅ (ΠΊΠΎΠ½ΡΡΠ°ΠΊΡΡ, ΠΏΠ΅ΡΡΠΎΠ½Π°Π»ΡΠ½ΡΠ΅ Π΄Π°Π½Π½ΡΠ΅, ΠΊΠΎΠΌΠΌΠ΅ΡΡΠ΅ΡΠΊΠ°Ρ ΡΠ°ΠΉΠ½Π°) ΠΎΠ±ΡΠ°Π±Π°ΡΡΠ²Π°ΡΡΡΡ ΠΎΡΠΊΡΡΡΠΎΠΉ ΠΌΠΎΠ΄Π΅Π»ΡΡ Π² ΡΠΎΠ±ΡΡΠ²Π΅Π½Π½ΠΎΠΌ ΠΊΠΎΠ½ΡΡΡΠ΅. ΠΠ΅ΡΡΠ²ΡΡΠ²ΠΈΡΠ΅Π»ΡΠ½ΡΠ΅ ΠΌΠ°ΡΡΠΎΠ²ΡΠ΅ Π·Π°Π΄Π°ΡΠΈ (ΡΠ΅ΡΠ½ΠΎΠ²ΠΈΠΊΠΈ, summaries) β ΡΠ΅ΡΠ΅Π· Π΄Π΅ΡΡΠ²ΡΠΉ ΠΎΠ±Π»Π°ΡΠ½ΡΠΉ API. ΠΡΠΎ Π΄Π°ΡΡ ΠΎΠ΄Π½ΠΎΠ²ΡΠ΅ΠΌΠ΅Π½Π½ΠΎ ΡΠΊΠΎΠ½ΠΎΠΌΠΈΡ ΠΈ ΠΊΠΎΠ½ΡΡΠΎΠ»Ρ.
ΠΠ°ΠΊ ΡΠΈΡΠ°ΡΡ Π±Π΅Π½ΡΠΌΠ°ΡΠΊΠΈ ΡΡΠΊΠΎΠ²ΠΎΠ΄ΠΈΡΠ΅Π»Ρ
ΠΠ΅Π½ΡΠΌΠ°ΡΠΊ β ΡΡΠ°Π½Π΄Π°ΡΡΠΈΠ·ΠΈΡΠΎΠ²Π°Π½Π½ΡΠΉ ΡΠ΅ΡΡ ΠΊΠ°ΡΠ΅ΡΡΠ²Π° ΠΌΠΎΠ΄Π΅Π»ΠΈ. Π‘Π°ΠΌΡΠ΅ ΡΠ°ΡΡΠΎ Π²ΡΡΡΠ΅ΡΠ°ΡΡΠΈΠ΅ΡΡ:
| ΠΠ΅Π½ΡΠΌΠ°ΡΠΊ | Π§ΡΠΎ ΠΈΠ·ΠΌΠ΅ΡΡΠ΅Ρ |
|---|---|
| MMLU / MMLU-Pro | Π¨ΠΈΡΠΎΡΠ° Π°ΠΊΠ°Π΄Π΅ΠΌΠΈΡΠ΅ΡΠΊΠΈΡ Π·Π½Π°Π½ΠΈΠΉ |
| GPQA | Π£ΡΠΎΠ²Π΅Π½Ρ Β«ΠΊΠ°Π½Π΄ΠΈΠ΄Π°Ρ Π½Π°ΡΠΊΒ» Π² Π½Π°ΡΠΊΠ΅ |
| HumanEval | Π‘ΠΏΠΎΡΠΎΠ±Π½ΠΎΡΡΡ ΠΏΠΈΡΠ°ΡΡ ΠΊΠΎΠ΄ |
| MATH / AIME | Π‘Π»ΠΎΠΆΠ½ΡΠ΅ ΠΌΠ°ΡΠ΅ΠΌΠ°ΡΠΈΡΠ΅ΡΠΊΠΈΠ΅ Π·Π°Π΄Π°ΡΠΈ |
| MUSR | ΠΠ½ΠΎΠ³ΠΎΡΠ°Π³ΠΎΠ²ΠΎΠ΅ ΡΠ°ΡΡΡΠΆΠ΄Π΅Π½ΠΈΠ΅ |
Π§Π΅ΡΡΡΠ΅ Π»ΠΎΠ²ΡΡΠΊΠΈ Π±Π΅Π½ΡΠΌΠ°ΡΠΊΠΎΠ²
- ΠΠ΅Π½ΡΠΌΠ°ΡΠΊ β Π²Π°Ρ ΠΊΠ΅ΠΉΡ. ΠΠΎΠ΄Π΅Π»Ρ, ΠΏΠ΅ΡΠ²Π°Ρ Π½Π° MMLU, Π½Π΅ ΠΎΠ±ΡΠ·Π°ΡΠ΅Π»ΡΠ½ΠΎ Π»ΡΡΡΠ΅ ΡΡΠΌΠΌΠΈΡΡΠ΅Ρ Π²Π°ΡΠΈ Π΄ΠΎΠ³ΠΎΠ²ΠΎΡΡ. ΠΠ΄ΠΈΠ½ΡΡΠ²Π΅Π½Π½ΡΠΉ Π½Π°Π΄ΡΠΆΠ½ΡΠΉ ΡΠ΅ΡΡ β Π²Π°ΡΠ° ΡΠΎΠ±ΡΡΠ²Π΅Π½Π½Π°Ρ eval-Π²ΡΠ±ΠΎΡΠΊΠ°.
- ΠΠ΅ΡΠ΅ΠΎΠ±ΡΡΠ΅Π½ΠΈΠ΅ ΠΏΠΎΠ΄ Π±Π΅Π½ΡΠΌΠ°ΡΠΊΠΈ. ΠΠ°Π±ΠΎΡΠ°ΡΠΎΡΠΈΠΈ ΡΠ΅Π»Π΅Π²ΡΠΌ ΠΎΠ±ΡΠ°Π·ΠΎΠΌ Β«ΠΏΠΎΠ΄ΡΡΠ³ΠΈΠ²Π°ΡΡΒ» ΠΌΠΎΠ΄Π΅Π»ΠΈ ΠΏΠΎΠ΄ ΠΈΠ·Π²Π΅ΡΡΠ½ΡΠ΅ ΡΠ΅ΡΡΡ; ΡΠΈΡΡΡ ΠΌΠΎΠ³ΡΡ Π±ΡΡΡ Π·Π°Π²ΡΡΠ΅Π½Ρ.
- ΠΡΠΎΠ±ΠΈ ΠΏΡΡΡΠΌΠΈ Π·Π½Π°ΠΊΠ°ΠΌΠΈ. Π Π°Π·Π½ΠΈΡΠ° ΠΌΠ΅ΠΆΠ΄Ρ 82.1% ΠΈ 82.4% Π½Π° MMLU Π½Π° ΠΏΡΠ°ΠΊΡΠΈΠΊΠ΅ Π½Π΅ΡΠ°Π·Π»ΠΈΡΠΈΠΌΠ°. Π‘ΠΌΠΎΡΡΠΈΡΠ΅ Π½Π° ΠΊΠ»Π°ΡΡΠ΅ΡΡ, Π° Π½Π΅ Π½Π° Π΄Π΅ΡΡΡΡΠ΅ Π΄ΠΎΠ»ΠΈ.
- ΠΠ°ΡΠ΅ΡΡΠ²ΠΎ β ΡΠ΅Π½Π°/ΡΠΊΠΎΡΠΎΡΡΡ. ΠΠΎΠ΄Π΅Π»Ρ ΠΌΠΎΠΆΠ΅Ρ Π±ΡΡΡ ΡΠΌΠ½Π΅Π΅, Π½ΠΎ Π΄ΠΎΡΠΎΠΆΠ΅ Π² 10 ΡΠ°Π· ΠΈ ΠΌΠ΅Π΄Π»Π΅Π½Π½Π΅Π΅ Π² 3. Π Π΅ΡΠ΅Π½ΠΈΠ΅ β ΡΡΠΎ Π²ΡΠ΅Π³Π΄Π° ΠΊΠΎΠΌΠΏΡΠΎΠΌΠΈΡΡ.
quadrantChart title ΠΠΎΠ΄Π΅Π»ΠΈ: ΡΠΌ ββ Π΄ΡΡΠ΅Π²ΠΎ, Π±ΡΡΡΡΠΎ (ΡΡ Π΅ΠΌΠ°ΡΠΈΡΠ½ΠΎ, Π½Π΅ ΠΊΠ°ΡΡΠ° ΡΠΎΡΠ½ΡΡ ΡΠ΅Π½) x-axis "ΠΠ΅ΡΠ΅Π²Π»Π΅/Π±ΡΡΡΡΠ΅Π΅" --> "ΠΠΎΡΠΎΠΆΠ΅/ΠΌΠ΅Π΄Π»Π΅Π½Π½Π΅Π΅" y-axis "Π‘ΠΊΡΠΎΠΌΠ½Π΅Π΅" --> "Π£ΠΌΠ½Π΅Π΅" quadrant-1 "Π€Π»Π°Π³ΠΌΠ°Π½Ρ (GPT/Claude/Gemini top)" quadrant-2 "ΠΡΠΊΡΡΡΡΠ΅ ΡΠ»Π°Π³ΠΌΠ°Π½Ρ (DeepSeek/Qwen top)" quadrant-3 "ΠΠΎΠΌΠΏΠ°ΠΊΡΠ½ΡΠ΅ ΠΎΡΠΊΡΡΡΡΠ΅ (Llama small, Qwen small)" quadrant-4 "ΠΠΎΠΌΠΏΠ°ΠΊΡΠ½ΡΠ΅ Π·Π°ΠΊΡΡΡΡΠ΅ (GPT-mini, Claude Haiku, Gemini Flash)"
ΠΠ»Π°Π²Π½ΡΠΉ Π²ΠΎΠΏΡΠΎΡ Π½Π΅ Β«ΠΊΠ°ΠΊΠ°Ρ ΡΠΌΠ½Π΅Π΅Β», Π°
Β«ΠΊΠ°ΠΊΠ°Ρ Π΄ΠΎΡΡΠ°ΡΠΎΡΠ½ΠΎ ΡΠΌΠ½Π° Π΄Π»Ρ ΠΌΠΎΠ΅ΠΉ Π·Π°Π΄Π°ΡΠΈ ΠΏΡΠΈ ΠΏΡΠΈΠ΅ΠΌΠ»Π΅ΠΌΠΎΠΉ ΡΠ΅Π½Π΅, ΡΠΊΠΎΡΠΎΡΡΠΈ ΠΈ Π΄ΠΎΠΏΡΡΡΠΈΠΌΠΎΠΌ ΡΡΠΎΠ²Π½Π΅ ΠΊΠΎΠ½ΡΡΠΎΠ»Ρ Π΄Π°Π½Π½ΡΡ Β». ΠΠ± ΡΡΠΎΠΌ ΡΠ΅Π»ΠΈΠΊΠΎΠΌ β 05-vybor-modeli.
π Π§ΡΠΎ Π·Π°ΠΏΠΎΠΌΠ½ΠΈΡΡ
- ΠΠ²Π° ΠΌΠΈΡΠ°: Π·Π°ΠΊΡΡΡΡΠ΅ ΠΌΠΎΠ΄Π΅Π»ΠΈ ΡΠ΅ΡΠ΅Π· API (GPT, Claude, Gemini) ΠΈ ΠΎΡΠΊΡΡΡΡΠ΅ Π²Π΅ΡΠ° (Llama, Qwen, DeepSeek, GLM, Mistral).
- ΠΠ½ΡΡΡΠΈ ΡΠ΅ΠΌΠ΅ΠΉΡΡΠ²Π° Π²ΡΠ΅Π³Π΄Π° Π»ΠΈΠ½Π΅ΠΉΠΊΠ°: ΡΠ»Π°Π³ΠΌΠ°Π½ / ΡΡΠ΅Π΄Π½ΡΡ / ΠΊΠΎΠΌΠΏΠ°ΠΊΡΠ½Π°Ρ β ΡΠΊΠΎΠ½ΠΎΠΌΠΈΠΊΠ° ΡΠΎΠΆΠ΄Π°Π΅ΡΡΡ Π² ΠΌΠ°ΡΡΡΡΡΠΈΠ·Π°ΡΠΈΠΈ ΠΌΠ΅ΠΆΠ΄Ρ Π½ΠΈΠΌΠΈ.
- ΠΡΠΊΡΡΡΡΠ΅ ΠΌΠΎΠ΄Π΅Π»ΠΈ ΠΌΠΎΠΆΠ½ΠΎ Π΄Π΅ΡΠΆΠ°ΡΡ Π² ΡΠ²ΠΎΡΠΌ ΠΊΠΎΠ½ΡΡΡΠ΅, Π½ΠΎ ΠΏΡΠΎΠ²Π΅ΡΡΠΉΡΠ΅ Π»ΠΈΡΠ΅Π½Π·ΠΈΡ ΠΈ Π·Π°ΠΊΠ»Π°Π΄ΡΠ²Π°ΠΉΡΠ΅ Π·Π°ΡΡΠ°ΡΡ Π½Π° Β«ΠΆΠ΅Π»Π΅Π·ΠΎΒ».
- ΠΠ΅Π½ΡΠΌΠ°ΡΠΊΠΈ β ΠΎΡΠΈΠ΅Π½ΡΠΈΡ, Π° Π½Π΅ ΠΏΡΠΈΠ³ΠΎΠ²ΠΎΡ; ΡΠ΅Π°Π»ΡΠ½ΡΠΉ ΠΊΡΠΈΡΠ΅ΡΠΈΠΉ β Π²Π°ΡΠ° eval-Π²ΡΠ±ΠΎΡΠΊΠ°.
ΠΠ°Π»ΡΡΠ΅: π― ΠΡΠ±ΠΎΡ ΠΌΠΎΠ΄Π΅Π»ΠΈ ΠΏΠΎΠ΄ Π·Π°Π΄Π°ΡΡ β β ΠΊΠΎΠ½ΠΊΡΠ΅ΡΠ½ΡΠΉ Π°Π»Π³ΠΎΡΠΈΡΠΌ Π²ΡΠ±ΠΎΡΠ°: ΠΊΡΠΈΡΠ΅ΡΠΈΠΈ, trade-off, ΡΠ°Π±Π»ΠΈΡΠ° Β«ΠΊΠΎΠ³Π΄Π° ΡΡΠΎΒ».