Тема 1. Базові принципи LLM: трансформери, масштабування, instruction-tuning
Completion requirements
Transformer як базова архітектура сучасних LLM: self-attention, позиційні кодування, обчислювальні компроміси. Розвиток від pretraining до instruction-tuning. Малі мовні моделі (SLM) та сценарії їх використання.
This lesson is not ready to be taken.