Большие языковые модели — это хорошо, но интересно, можно ли получить сравнимое качество на малых моделях. Вести диалог с GPT-2 не получится, а тем более написать диплом или научную статью. Она и другие small language models (SLM) по большей части выдают слабый текст, даже если обучить их на всей Википедии. Возможно, тут стоит вспомнить теорию Шмидхубера, который, как известно, всё придумал. Читать далее
Большие языковые модели (LLM) звучат впечатляюще, но всегда ли нужно их использовать? Разберемся, в каких случаях стоит использовать LLM, а когда использование малых языковых моделей (SLM) окажется более разумным и экономичным решением без потери качества. Читать далее
Представительство Фонда содействия развитию малых форм предприятий в научно-технической сфере в Республике Дагестан приглашает малые инновационные компании республики принять участие в конкурсе на получение гранта в один миллион рублей, сообщили РИА «Дагестан» в региональном представительстве Фонда. «Малые предприятия, созданные менее двух лет назад и с оборотом до 1 млн рублей и соответствующие 209-ФЗ от 24 июля 2007 […]
Мультимодальные языковые модели представляют собой самый прогрессивный класс нейросетевых архитектур, объединяющих способность воспринимать и обрабатывать различные типы данных одновременно - текст, изображения, аудио и видео. Это похоже на то, как наш мозг интегрирует информацию из разных органов чувств, чтобы создать полную картину мира. Как сказал философ Марсель Пруст, “Настоящее открытие не в том, чтобы увидеть новые земли, а в том, чтобы иметь новые глаза”. Читать далее