NLP для Казахского

В Казахстане есть ребята из перестажеров Вихрей строящие LLM для казахского. Рецепты те же самые - расширяем токенайзер, доучиваем LLM.

Из интерсного - собрали современные сеты для оценок, cобрали ArenaHard , cобрали вариацию Shlepa и даже вариацию MMLU на основе казахского теста для старшей школы.

Ребята работают на своем энтузиазме, полайкате их что ли!