Тип публикации: статья из журнала
Год издания: 2026
Идентификатор DOI: 10.25729/ESI.2026.42.2.002
Ключевые слова: reflection, Simple Recurrent Neural Network, reflexive game, responding to sequences of stimuli, limit world model, рефлексия, простая рекуррентная нейронная сеть, рефлексивные игры, реагирование на последовательности стимулов, предельная модель мира
Аннотация: Выживание в изменчивой среде - задача, для решения которой необходимо выявлять и запоминать наиболее существенные закономерности среды, а также действовать с их учетом. Способность организма или агента, имитирующего организм, формировать и использовать представления о внешней среде, мы называем рефлексией в широком смысле. Статья пПоказать полностьюосвящена выявлению связи между предсказуемостью событий в среде и возникновением универсального навыка рефлексии у агентов в этой среде. В качестве агентов используются эвристические модельные объекты - простые рекуррентные нейронные сети, первичное обучение которых проводится в условиях предельных моделей мира. Данные модели реализуются, как задачи: реагирование на случайную последовательность стимулов, рефлексивная игра, реагирование на набор фиксированных последовательностей и реагирование на единственную фиксированную последовательность. Возникновение универсального навыка рефлексии после первичного обучения каждой из этих задач оценивается по качеству отклика обученных модельных объектов в проверочных задачах. Также оцениваются максимальное собственное значение Якобиана матрицы весов сети и тип траектории нейронной активности после инициирующего одиночного стимула. По совокупности характеристик, в наибольшей степени формированию универсального навыка рефлексии способствуют модели мира с предзаданной периодичностью событий (стимулов). Напротив, в условиях труднопредсказуемой среды возникновение внутренних представлений о мире оказывается затруднено. Полученные результаты позволяют систематизировать представление о рефлексии в широком смысле и упростить выбор условий среды для дальнейших исследований данного явления. Survival in a changing environment is a task that requires identifying and remembering the most significant regularities of the environment and acting with them in mind. The ability of an organism (or an agent imitating an organism) to form and use internal representations of the external environment is called reflection in a broad sense. The article is devoted to identifying the connection between the predictability of events in the environment and the emergence of a universal skill of reflection in agents in this environment. As agents, we used heuristic model objects - simple recurrent neural networks, the primary training of which was carried out within the limit world models. These models were implemented as a set of tasks (in order of increasing predictability): responding to a random sequence of stimuli, reflexive game, responding to a set of fixed sequences, and responding to a single fixed sequence. The emergence of the universal skill of reflection after the primary training on each of these tasks was assessed by the success of the trained model objects in test tasks. The maximum Jacobian eigenvalue of the weight matrix and the type of the neural activity trajectory after the initiating single stimulus were regarded too. Based on this set of characteristics, we found out that world models with a predetermined periodicity of events (stimuli) contribute to the greatest extent to the formation of the universal reflection skill. On the contrary, in unpredictable environment conditions the emergence of internal representations is baffling. These results lead to the better understanding of reflection in a broad sense and simplify the choice of environmental conditions for further research of this phenomenon.
Журнал: Информационные и математические технологии в науке и управлении
Выпуск журнала: №2
Номера страниц: 18-28
ISSN журнала: 24130133
Место издания: Иркутск
Издатель: Институт систем энергетики им. Л.А. Мелентьева СО РАН