GuppyLM: языковая модель на 9 млн параметров обучается с нуля за пять минут.
Мы увидели, что в открытом доступе появился GuppyLM. Это проект, который позволяет обучить языковую модель на 9 млн параметров с нуля примерно за пять минут.
Репозиторий включает весь процесс обучения и рассчитан на быстрые эксперименты с небольшими языковыми моделями без крупной инфраструктуры.
Ещё новости:
