Dayhoff-3b-GR-HM-c
Dayhoff — это атлас данных о последовательностях белков и моделей генеративного языка — централизованный ресурс, который объединяет 3,34...
Dayhoff — это атлас данных о последовательностях белков и моделей генеративного языка — централизованный ресурс, который объединяет 3,34...
Dayhoff — это атлас данных о последовательностях белков и моделей генеративного языка — централизованный ресурс, который объединяет 3,34...
Jambert — экспериментальная доработанная модель, основанная на Jamba и специализированных задачах RAG и синтезе документов. Учитывая вопрос и...
Другая экспериментальная модель, использующая в основном синтетические данные, сгенерированные airoboros. Базовая модель jamba-v0.1 предположительно имеет длину контекста 256...
Эта модель обучена на моем наборе данных Code-290k-ShareGPT и Code-Feedback. Он настроен на Jamba-v0.1. Он очень хорош для...
Это экспериментальная настройка jamba-v0.1 на наборе данных бублика. Версия DPO может быть создана позже, но сначала я хотел...
Плотная версия Jamba-v0.1, извлекающая веса первого эксперта. Он больше не использует МО. Пожалуйста, обратитесь к этому сценарию для...
Модель генерации текста Модальности:Генерация текста Задача: Генерация текста Автор: Severian Теги: jamba, text-generation-inference, mixture of experts, custom_code, en,...
ПЕРВЫЙ ТЕСТ: — 1250 шагов (5 часов x A100) — Окончательный проигрыш: 0,98 Модальности:Генерация текста Задача: Генерация текста...
Это крошечная фиктивная версия Jamba, используемая для отладки и экспериментирования с архитектурой Jamba. Он имеет 128M параметров (вместо...