Irbis-7B v0.1 - казахская ЛЛМ 🇰🇿 Мы тут обратили внимание, что опенсорс языковые модели отвратительно работают с казахским языком и решили исправить это недоразумение. Работа еще не окончена, но уже из интересного есть, что рассказать и показать. Сейчас моделька не дурно отвечает на простые вопросы и извлекает информацию из контекста, невзирая на те трудности, с которыми пришлось столкнуться при подготовке данных и тренировке. О том что и как было сделано (в т.ч. примеры и сравнения) можно ознакомиться в статье на Хабре. 🤗 Base: model 🤗 Instruct: lora