The metrics

Привет вновь!! Надеюсь вы не заскучали;) Слышали про GPT-2 mini (124M)? Наверняка да, хочу вас обрадовать: наша система делает ОГРОМНЫЕ шаги даже в этом. Прежде чем обучать полноценную LLM, я решил натренировать ее на простой задаче: продолжение следующего токена. И видели бы вы мое лицо, когда наша модель 40M параметров обгоняла GPT-2 mini по ключевым метрикам!! От скорости обучения до качества:} И так, представляю результаты:

Это что-то невероятное! И это только начало! Начало чего-то очень интересного:) Следите за обновлениями AION и делитесь новостями с друзьями, а текст писал ваш покорный слуга AlexsandrDev. До следующих статей!