Проект «НЕЙРОФОНИКА»
Цель: создание аудио визуального пространства инициированного процессом человеческого мышления посредством искусственного интеллекта.
Технологии: музыканты создают импровизационный фрагменты в формате живого выступления; одновременно посредством датчиков, закреплённых у них на головах формируется картина деятельности участков головного мозга; данные импульсы поступают в компьютер где, при помощи ИИ, трансформируются в визуальные динамические картины; получившиеся образы проецируются на экран, расположенный в объёмах сцены, на которой выступают музыканты.
Результат: концерт, на котором зрители имеют возможность наблюдать процесс создания музыки и визуального образа мышления музыкантов в режиме реального времени.
Музыканты – Анашкин Д.В. (гитара, копьютеры, луперы, руководитель проекта), Бомштейн М. (синты, рояль, компьютеры).
Координатор проекта - А.Лисин
Научно-техническая поддержка: к.б.н. Шемякина Н.В., к.б.н. Нагорнова Ж.В., асп. Заводова Е.М., асп. Галкин В.А. (ИЭФБ РАН);
Художник, арт-консультант: Потапов Ю.Г. (“Мансарда художников”);

У ученых свои задачи…
Одновременно с реализацией NEUROPHONICS -  шанс исследовать музыкантов:)
Исследования в естественных условиях обитания творцов, занятых своей, творческой работой - отдельное направление научных изысканий. В таких исследованиях, моменты драйва, полного погружения в творчество надо ловить, отслеживать, замечать - как самим “творцам”, так и исследователям. И это не просто). Мы поучаствовали в исследованиях содружества ученых (Шемякиной Н.В. и Нагорновой Ж.В.) и художников (Ю.Г. Потапова, “Мансарда художников”) с коллегами. Пару лет назад эта команда (изучающая физиологические/мозговые механизмы творчества) начала работать с живописцами и анализировать их состояния в процессе создания полотен, моменты, когда человек наибольшим образом погружался в художественную деятельность. Сейчас - проводили регистрацию мозговой активности у нас - импровизировавших музыкантов и наших слушателей. На голове – шлемы с электродами, в голове – биоэлектрическая активность, в мыслях и чувствах -музыка:). Задача исследователей: оценить “похожесть” состояний слушателей и похожесть состояний музыкантов - вероятность синхронизации в моменты восприятия музыки или “настройки” музыкантов друг на друга при рождающейся импровизации. Это часть большого исследования совместной деятельности и разных способов коммуникации человека.

Исследователи:
Научное руководство проектом: к.б.н. Шемякина Н.В, к.б.н. Нагорнова Ж.В. (ИЭФБ РАН), аспиранты - Заводова Е.М., Галкин В.А. (ИЭФБ РАН)

Музыканты: 
Анашкин Д.В. (гитара, компьютеры, луперы),
Бомштейн М.C.(синты, рояль, компьютеры).

Помощь в организации исследований:
Лисин А. (координатор взаимодействия, Санкт-Петербург);
Потапов Ю.Г. (художник, “Мансарда художников”, Санкт-Петербург).

Литература:

• Natalia Shemyakina, Zhanna Nagornova Neurophysiological Characteristics of Competition in Skills and Cooperation in Creativity Task Performance: A Review of Hyperscanning Research //Human Physiology 47(1):87-103, 2021; DOI 10.1134/S0362119721010126
• Natalia Shemyakina, Yuri Potapov Development of Methodology for Investigation of Artists’ Creativity and Studying the Neurophysiological Characteristics of Visual Creativity in Ecological Conditions of Artistic Studio (Review and Methodology) // Human Physiology 49(S1):S147-S166, 2024; DOI: 10.1134/S0362119723600480