70% новых статей на arXiv по разработке — про LLM

На arXiv тема больших языковых моделей заняла центральное место в исследованиях по программной инженерии. По данным анализа подкатегории cs.SE, сейчас чуть более 70% новых статей так или иначе связаны с LLM. Речь идёт о препринтах, опубликованных с 2022 года, то есть о материалах, которые появляются до выхода рецензируемой версии и потому хорошо показывают текущие интересы исследователей.

Основой для подсчёта стали 15 899 статей, загруженных в cs.SE с 1 января 2022 года. Для сбора данных использовали пакет arxivscraper, который обращается к API arXiv и выгружает метаданные публикаций. Затем автор анализа искал в заголовках и аннотациях упоминания «LLM» и «large language model», а также связанных терминов вроде «AI», «artificial intelligence» и «agent».

По графикам видно, что формулировка «large language model» чаще встречалась в заголовках к концу 2024 года, а сокращение LLM вышло на пик к концу 2025-го. В аннотациях плато или пик популярности LLM тоже приходятся на конец 2025 года. Это говорит не только о росте интереса к теме, но и о том, что сама терминология в публикациях со временем сместилась в сторону более короткого и привычного обозначения.

Если считать статьи, где в заголовке или аннотации встречаются сразу несколько связанных с LLM выражений, доля таких работ поднимается выше 70%. Автор исходного анализа допускает, что при сохранении нынешнего темпа роста через 18 месяцев почти все новые статьи в cs.SE будут касаться этой темы. Но он же оговаривает, что рост, скорее всего, замедлится и не дойдёт до 100%.