Stability AI анонсувала компактну мовну модель обсягом 1,6 млрд параметрів
Компанія Stability AI, відома генеративним ШІ для тексту і зображень, представила нову компактну мовну модель Stable LM 2 1.6B. За заявою розробників, реліз покликаний знизити бар'єри для експериментів із ШІ та розширити спільноту за рахунок менших обчислювальних потужностей.
Що відомо
За словами Карлоса Рікельме зі Stability AI, головне досягнення новинки не в розмірі, а в досконалості алгоритмів та обсязі якісних тренувальних даних сімома мовами. Завдяки цьому Stable LM 2 1.6B випереджає інші більші моделі, включно з власною Stable LM 3B.
У Stability AI кажуть, це як з комп'ютерами та мікрочипами - з часом вони стають компактнішими й потужнішими одночасно.
Технологія Stable LM зазвичай використовується для генерування і розуміння текстового контенту. З меншим розміром у неї зберігається ризик "галюцинацій" і токсичної поведінки. Компанія обіцяє вдосконалити управління ризиками.
Окремий акцент Stability AI робить на прозорість. Окрім готових моделей, компанія публікує їхні сирі версії перед фінальним циклом тренування. Це має дати розробникам можливість адаптувати алгоритми під свої потреби з найкращим результатом.
Як зазначають у Stability AI, відкритість необхідна, щоб розширити спільноту експертів у сфері генеративного ШІ.
Джерело: VentureBeat