Нейроискусство: зачем создают картины из нейронов мозга
Искусство и наука редко пересекаются. Когда это происходит и прикладное исследование, понятное лишь специалистам, обогащается визуальными образами, наука получает больше внимания обывателей. Сравните сами: исследования мозга[1] по всему миру ведутся каждый день, но графики, диаграммы и рентгеновские снимки не вызывают у нас сильные эмоции. Однако, как только появляются красочные рисунки, иллюстрирующие воздействие на мозг[1], новость получает большой отклик. Вне контекста научных открытий нам просто нравится смотреть на работу внутренних органов, особенно интересно следить за функционированием полушарий, отвечающих за мышление[1].
Ученые из Allen Institute for Brain Science в Сиэтле создали карту[2], которая детально отображает взаимосвязи между клетками мозга[1] мыши. До создания такого рода картин не додумался бы ни один художник — исследователи вводили флуоресцентный вирус зеленого цвета в определенную зону мозга[1] живой мыши. Вирус заражал нейроны вблизи места инъекции, и через три недели распространялся по всему мозгу[1]. В результате карта взаимосвязей, происходящих в одной из областей мозга[1], отображалась в виде зеленой флуоресцентной сетки зараженных нейронов.
Даже «обычные» карты мозга[1] впечатляют. Ученые из Университета штата Калифорния в Беркли разработали интерактивную карту[3], которая показывает, где хранятся значения определенных слов, а также как связаны слова и их значения.
Самую крупную в мире трехмерную карту нейронных сетей коры головного мозга[1]опубликовали[4] нейробиологи из Института Аллена, Гарвардской медицинской школы и NERF (исследовательского проекта в сфере нейроэлектроники). Разработка карты заняла более десяти лет: исследователи проанализировали колоссальные массивы данных по мозговой активности, и это позволило установить взаимосвязь между структурой и функциями мозга[1].
Чтобы создать карту мозга[1] мыши, на экран перед их глазами выводили горизонтальные и вертикальные линии — нейроны реагировали на эти визуальные сигналы. Затем были сделаны ультратонкие срезы мозга[1]. Это позволило получить многочисленные изображения нейронов и синапсов, которые были использованы в создании 3D-модели.
Мозг как самая главная загадка
До сих пор не существует полной карты человеческого мозга[1]. Есть несколько подходов к решению этой задачи. Один из способов заключается в расшифровке пути, по которым электрические сигналы путешествуют между нейронами, когда мозг[1] выполняет определенные функции. Проблема в том, что каждый ломтик толщиной пятьдесят миллиардных долей метра приходится тщательно фотографировать с помощью электронного микроскопа, а затем программно пытаться восстановить связи между нейронами поштучно.
Процесс занимает очень много времени, но есть способы ускорить его. Например, можно использовать различные краски, позволяющие помечать цветом разные нейроны и связи, чтобы их было лучше видно. В проекте EyeWire[5] любому пользователю в формате игры предлагают раскрасить нейронные связи на картинке с реальными нейронами сетчатки глаза, снятые электронным микроскопом. Вот так наука добивается прогресса через геймификацию.
Холст и краски нейронных связей
Выпускник факультета нейробиологии университета Пенсильвании Грег Данн убрал из уравнения научный поиск и сконцентрировался на визуальной составляющей. Он начал рисовать нейроны в стиле японской акварельной живописи суми-э (это вид монохромной живописи, в которой традиционно присутствуют только два цвета).
Столбчатая структура коры головного мозга[1]. Золото, чернила, проявитель, слюда на алюминиевой панели
Данн сначала изучает реальное изображение нейронов, затем переносит основные очертания на бумагу и начинает создавать картину. Чтобы точнее передать особенности структур нейронных связей, художник использует напыление чернил на неабсорбирующую бумагу. При этом он больше импровизирует, а не срисовывает реальное изображение — добиться такой же витиеватой структуры крайне сложно, если просто копировать исходное изображение.
Корзинчатые и пирамидальные нейроны (у которых вверх ведет большой апикальный дендрит, есть один аксон, идущий вниз, и множество базальных дендритов) в двигательной коре головного мозга[1]. Чернила на 22-каратном золоте
Если подуть на каплю чернил, узоры ее растекания по поверхности будут случайными, зависящими от воздушных завихрений, формы бумаги, микроскопических препятствий — ветвления на рисунках получаются такими же, как реальные ветвления нервных клеток.
Схема коры больших полушарий. Гравюра золотом на стали
В этой работе Данн перенес изображение на металл с помощью метода фотолитографии. Гравюру покрыли сусальным золотом. Техника позволяет вытравить копии клеточных микроструктур в тончайших золотых пластинах, каждая из которых отражает свет под определенным углом.
В основу этих работ легла техника нейровизуализации брэйнбоу (brain — мозг[1], rainbow — радуга), в которой используют флюоресцентные белки для окраски связанных друг с другом нейронов. На рисунках показана вариация брэйнбоу-окраски гиппокампа (ключевой структуры взрослого нейрогенеза) в четырех цветах.
Если взглянуть на гиппокам в различных научных работах[6], то можно сравнить уровни визуализации объектов. Здесь гиппокамп (слева) и целый мозг[1] мыши (справа), окрашенные целиком. На изображении гиппокампа делящиеся клетки обозначены красным. Розовый — обонятельная луковица, фиолетовый — субвентрикулярная зона и ростральный миграционный путь, оранжевый — гиппокамп, желтый — поверхность мозжечка.
Большая часть работ Данна посвящена нейронам, однако он уделяет внимание и другим клеткам. На рисунке выше вы видите изображение спинного мозга[1].
Мозжечок. Золото, краски, эмаль на алюминизированной панели
В картинах используется не только золото, но и прозрачные краски, лаки, герметики, специальные вспениватели, металлические порошки, химически активные ингредиенты.
На этой картине изображена растущая кора головного мозга[1] человека (на 15-й неделе беременности).
Этот рисунок показывает зрительную кору. Это лишь часть одной грандиозной картины художника, на которой изображены 750 000 нейронов и связи между ними.
Как видите, наука и искусство могут пересекаться в способах передачи информации. И если сухой язык академических статей мало привлекает людей, то для популяризации научных идей можно воспользоваться опытом художественной культуры.
Картины Грега Данна экспонируются в Институте Франклина в Филадельфии, а на сайте проекта можно посмотреть видеозаписи[7], которые показывают, как элементы выглядят под разными подсветками.
Автор:
Нейроискусство: зачем создают картины из нейронов мозга[1] / Блог компании Mail.Ru Group / Geektimes
font-face{font-family:'Fira Sans';font-style:normal;font-weight:500;src:url(/fonts/0/FiraSans/firaSans-medium.eot);src:local("Fira Sans Medium"),local("FiraSans-Medium"),url(/fonts/0/FiraSans/firaSans-medium.eot?#iefix) format("embedded-opentype"),url(/fonts/0/FiraSans/firaSans-medium.woff2) format("woff2"),url(/fonts/0/FiraSans/firaSans-medium.woff) format("woff"),url(/fonts/0/FiraSans/firaSans-medium.ttf) format("truetype")}
Искусство и наука редко пересекаются. Когда это происходит и прикладное исследование, понятное лишь специалистам, обогащается визуальными образами, наука получает больше внимания обывателей. Сравните сами: исследования мозга[1] по всему миру ведутся каждый день, но графики, диаграммы и рентгеновские снимки не вызывают у нас сильные эмоции. Однако, как только появляются красочные рисунки, иллюстрирующие воздействие на мозг[1], новость получает большой отклик. Вне контекста научных открытий нам просто нравится смотреть на работу внутренних органов, особенно интересно следить за функционированием полушарий, отвечающих за мышление[1].
Ученые из Allen Institute for Brain Science в Сиэтле создали карту[2], которая детально отображает взаимосвязи между клетками мозга[1] мыши. До создания такого рода картин не додумался бы ни один художник — исследователи вводили флуоресцентный вирус зеленого цвета в определенную зону мозга[1] живой мыши. Вирус заражал нейроны вблизи места инъекции, и через три недели распространялся по всему мозгу[1]. В результате карта взаимосвязей, происходящих в одной из областей мозга[1], отображалась в виде зеленой флуоресцентной сетки зараженных нейронов.
Даже «обычные» карты мозга[1] впечатляют. Ученые из Университета штата Калифорния в Беркли разработали интерактивную карту[3], которая показывает, где хранятся значения определенных слов, а также как связаны слова и их значения.
Самую крупную в мире трехмерную карту нейронных сетей коры головного мозга[1]опубликовали[4] нейробиологи из Института Аллена, Гарвардской медицинской школы и NERF (исследовательского проекта в сфере нейроэлектроники). Разработка карты заняла более десяти лет: исследователи проанализировали колоссальные массивы данных по мозговой активности, и это позволило установить взаимосвязь между структурой и функциями мозга[1].
Чтобы создать карту мозга[1] мыши, на экран перед их глазами выводили горизонтальные и вертикальные линии — нейроны реагировали на эти визуальные сигналы. Затем были сделаны ультратонкие срезы мозга[1]. Это позволило получить многочисленные изображения нейронов и синапсов, которые были использованы в создании 3D-модели.
Мозг как самая главная загадка
До сих пор не существует полной карты человеческого мозга[1]. Есть несколько подходов к решению этой задачи. Один из способов заключается в расшифровке пути, по которым электрические сигналы путешествуют между нейронами, когда мозг[1] выполняет определенные функции. Проблема в том, что каждый ломтик толщиной пятьдесят миллиардных долей метра приходится тщательно фотографировать с помощью электронного микроскопа, а затем программно пытаться восстановить связи между нейронами поштучно.
Процесс занимает очень много времени, но есть способы ускорить его. Например, можно использовать различные краски, позволяющие помечать цветом разные нейроны и связи, чтобы их было лучше видно. В проекте EyeWire[5] любому пользователю в формате игры предлагают раскрасить нейронные связи на картинке с реальными нейронами сетчатки глаза, снятые электронным микроскопом. Вот так наука добивается прогресса через геймификацию.
Холст и краски нейронных связей
Выпускник факультета нейробиологии университета Пенсильвании Грег Данн убрал из уравнения научный поиск и сконцентрировался на визуальной составляющей. Он начал рисовать нейроны в стиле японской акварельной живописи суми-э (это вид монохромной живописи, в которой традиционно присутствуют только два цвета).
Столбчатая структура коры головного мозга[1]. Золото, чернила, проявитель, слюда на алюминиевой панели
Данн сначала изучает реальное изображение нейронов, затем переносит основные очертания на бумагу и начинает создавать картину. Чтобы точнее передать особенности структур нейронных связей, художник использует напыление чернил на неабсорбирующую бумагу. При этом он больше импровизирует, а не срисовывает реальное изображение — добиться такой же витиеватой структуры крайне сложно, если просто копировать исходное изображение.
Корзинчатые и пирамидальные нейроны (у которых вверх ведет большой апикальный дендрит, есть один аксон, идущий вниз, и множество базальных дендритов) в двигательной коре головного мозга[1]. Чернила на 22-каратном золоте
Если подуть на каплю чернил, узоры ее растекания по поверхности будут случайными, зависящими от воздушных завихрений, формы бумаги, микроскопических препятствий — ветвления на рисунках получаются такими же, как реальные ветвления нервных клеток.
Схема коры больших полушарий. Гравюра золотом на стали
В этой работе Данн перенес изображение на металл с помощью метода фотолитографии. Гравюру покрыли сусальным золотом. Техника позволяет вытравить копии клеточных микроструктур в тончайших золотых пластинах, каждая из которых отражает свет под определенным углом.
В основу этих работ легла техника нейровизуализации брэйнбоу (brain — мозг[1], rainbow — радуга), в которой используют флюоресцентные белки для окраски связанных друг с другом нейронов. На рисунках показана вариация брэйнбоу-окраски гиппокампа (ключевой структуры взрослого нейрогенеза) в четырех цветах.
Если взглянуть на гиппокам в различных научных работах[6], то можно сравнить уровни визуализации объектов. Здесь гиппокамп (слева) и целый мозг[1] мыши (справа), окрашенные целиком. На изображении гиппокампа делящиеся клетки обозначены красным. Розовый — обонятельная луковица, фиолетовый — субвентрикулярная зона и ростральный миграционный путь, оранжевый — гиппокамп, желтый — поверхность мозжечка.
Большая часть работ Данна посвящена нейронам, однако он уделяет внимание и другим клеткам. На рисунке выше вы видите изображение спинного мозга[1].
Мозжечок. Золото, краски, эмаль на алюминизированной панели
В картинах используется не только золото, но и прозрачные краски, лаки, герметики, специальные вспениватели, металлические порошки, химически активные ингредиенты.
На этой картине изображена растущая кора головного мозга[1] человека (на 15-й неделе беременности).
Этот рисунок показывает зрительную кору. Это лишь часть одной грандиозной картины художника, на которой изображены 750 000 нейронов и связи между ними.
Как видите, наука и искусство могут пересекаться в способах передачи информации. И если сухой язык академических статей мало привлекает людей, то для популяризации научных идей можно воспользоваться опытом художественной культуры.
Картины Грега Данна экспонируются в Институте Франклина в Филадельфии, а на сайте проекта можно посмотреть видеозаписи[7], которые показывают, как элементы выглядят под разными подсветками.
!function(e){function t(t,n){if(!(n in e)){for(var r,a=e.document,i=a.scripts,o=i.length;o--;)if(-1!==i[o].src.indexOf(t)){r=i[o];break}if(!r){r=a.createElement("script"),r.type="text/javascript",r.async=!0,r.defer=!0,r.src=t,r.charset="UTF-8";;var d=function(){var e=a.getElementsByTagName("script")[0];e.parentNode.insertBefore(r,e)};"[object Opera]"==e.opera?a.addEventListener?a.addEventListener("DOMContentLoaded",d,!1):e.attachEvent("onload",d):d()} } }t("//top-fwz1.mail.ru/js/code.js","_tmr"),t("//mediator.imgsmail.ru/2/mpf-mediator.min.js","_mediator")}(window);
каждый ломтик толщиной пятьдесят миллиардных долей метра приходится тщательно фотографировать с помощью электронного микроскопа, а затем программно пытаться восстановить связи между нейронами поштучно.
Интересно, а что что мешает сделать устройство, которое бы срезало лазером очень тонкий поверхностный слой, затем водило бы над срезом электронным микроскопом (а софт для сшивания множества изображений в одно уже существует)?
Наибольшая сложность тут состоит в определении соответствий элементов между слоями, но при крайне маленькой толщине слоя — не думаю, что это слишком большая проблема.
Если есть кто знакомый с темой — можете рассказать поподробнее?
Есть и такое. Слайсером был порезан мозг[1] на тонкие лоскуты, которые были сфотографированы электронным микроскопом, а потом программно все это сшили. Не помню как назывался проект. И 3D модель этого мозга[1] есть, содержащая полный коннектом.
Я имел в виду даже не тонкие лоскуты, а немного другое: когда лазер в каждый проход испаряет очень-очень тонкий слой с поверхности (минимально возможной толщины, в идеале — в несколько молекул), электронный микроскоп сканирует открывшийся срез, лазер испаряет ещё небольшой слой и т.д.
Насколько я понимаю, испарить минимально тонкий слой куда проще, чем отделить его от основной замороженной массы, перенести куда-то и уже там сфотографировать.
— Поддержка всех почтовых сервисов (Mail.Ru, Yandex, Google, Yahoo, AOL);
— удобный и быстрый интерфейс;
— аватарки и иконки в списке писем;
— моментальные уведомления о письмах.
— автомобильная и пешеходная навигация
— поиск по адресам, категориям, названиям и координатам
— высокая детализация по всему миру
— импортэкспорт меток
var n = d.getElementsByTagName("script")[0],
s = d.createElement("script"),
f = function () { n.parentNode.insertBefore(s, n); };
s.type = "text/javascript";
s.async = true;
s.src = "https://mc.yandex.ru/metrika/watch.js";
[45] Приглашаем в гости!: https://team.mail.ru/priglashaem-v-gosti/
[46] В Облаке для Android появилась наглядная статистика по количеству фото: https://team.mail.ru/v-oblake-dlya-android-poyavilas-naglyadnaya-statistika-po-kolichestvu-foto/
[47] Закупка рекламы в премиальной видеосети NATIVEROLL.TV стала доступна через систему myTarget: https://team.mail.ru/zakupka-reklamyi-v-premialnoy-videoseti-nativeroll-tv-stala-dostupna-cherez-sistemu-mytarget/
[48] Команда мечты — MAPS.ME: https://team.mail.ru/komanda-mechtyi-maps-me/
[49] Первый кулинарный мастер-класс для родителей сотрудников в Mail.Ru Group: https://team.mail.ru/pervyiy-kulinarnyiy-master-klass-dlya-roditeley-sotrudnikov-v-mail-ru-group/
[50] AgeHackMLBootCamp — первый в Евразии хакатон, использующий машинное обучение для борьбы со старением: https://team.mail.ru/agehack-mlbootcamp-pervyiy-v-evrazii-hakaton-ispolzuyushhiy-mashinnoe-obuchenie-dlya-borbyi-so-stareniem/
[51] Как в офисе прошел научный фестиваль для детей #happykids: https://team.mail.ru/kak-v-ofise-proshel-nauchnyiy-festival-dlya-detey-happykids/
[52] Tarantool будет использоваться в системе быстрой аналитики Informatica: https://team.mail.ru/tarantool-budet-ispolzovatsya-v-sisteme-byistroy-analitiki-informatica/
[53] В Почте Mail.Ru появились умные механизмы для категоризации входящих: https://team.mail.ru/v-pochte-mail-ru-poyavilis-umnyie-mehanizmyi-dlya-kategorizatsii-vhodyashhih/
[54] Mail.Ru Group проведет в Москве новый фестиваль для поклонников компьютерных игр и поп-культуры: https://team.mail.ru/mail-ru-group-provedet-v-moskve-novyiy-festival-dlya-poklonnikov-kompyuternyih-igr-i-pop-kulturyi/
[55] Нейроискусство: зачем создают картины из нейронов мозга: https://geektimes.ru/company/mailru/blog/292103/
[56] Фантастические и реальные технологии «Терминатора»: https://geektimes.ru/company/mailru/blog/291527/
[57] Самые необычные испытания и эксперименты: https://geektimes.ru/company/mailru/blog/291491/
[58] Маршрут по Вестеросу и Эссосу: картография вымышленных и реальных миров: https://geektimes.ru/company/mailru/blog/291249/
[59] Редкие космические предметы из музейных коллекций: https://geektimes.ru/company/mailru/blog/291083/
[60] Во льдах Плавучего Континента: история исследования Арктики: https://geektimes.ru/company/mailru/blog/290977/
[61] Проблемы гаджетов и софта для здорового питания: https://geektimes.ru/company/mailru/blog/290831/
[64] Белое пятно на 15 мегабайт: https://geektimes.ru/company/mailru/blog/290375/
[65] Сутки: #broadcast_posts_today
[66] Неделя: #broadcast_posts_week
[67] Месяц: #broadcast_posts_month
[68] Blizzard выпустила переиздание StarCraft: https://geektimes.ru/post/292101/
[69] Новая промышленная революция проходит незамеченной: https://geektimes.ru/post/292099/
[70] Лучшие головоломки, про которые не знает никто*. Часть вторая: https://geektimes.ru/post/292119/
[71] «Яндекс.Маркет» и Сбербанк хотят создать российский Amazon. Какие у проекта шансы: https://geektimes.ru/company/pochtoy/blog/292107/
[72] Кастомная GPS-антенна, SIM-чип, процессор и 8Мб памяти: из чего сделан умный собачий ошейник Mishiko: https://geektimes.ru/company/mishiko/blog/292125/
[73] «Большая четверка» операторов не выполнила требование ФАС об отмене национального роуминга в РФ: https://geektimes.ru/post/292025/
[74] Бот OpenAI победил трёх топовых профессионалов в Dota 2: https://geektimes.ru/post/291983/
[75] Спорт, как хобби для здоровья, с точки зрения инженера: https://geektimes.ru/post/291995/
[76] Попытки учёных развеять мифы о прививках только укрепили заблуждения людей: https://geektimes.ru/post/292003/
[77] Как один тумблер «Электрон» погубил: https://geektimes.ru/post/291999/
[78] В России запретили Tor и VPN. Что теперь делать: https://geektimes.ru/company/pochtoy/blog/291807/
[79] Про похудение с точки зрения химика. Как я перепрограммировал свой организм: https://geektimes.ru/post/291617/
[80] Секвенирование ДНК в домашних условиях: как на коленке собрать прибор за 10 миллионов: https://geektimes.ru/post/291613/
[81] 18-летний молодой человек арестован за сообщение о «детской» ошибке в новой системе электронных билетов Будапешта: https://geektimes.ru/post/291367/
[82] Китайский интернет и софт: о наболевшем: https://geektimes.ru/post/291285/
vmchaz
17 августа 2017 в 00:40
0
Alex_Hannibal
17 августа 2017 в 09:05
0
vmchaz
17 августа 2017 в 23:24
0
mistik_max
17 августа 2017 в 16:15
0
aliev
17 августа 2017 в 16:29
0
erwins22
17 августа 2017 в 18:00
0
Только полноправные пользователи [43] могут оставлять комментарии. Войдите [19], пожалуйста.