
Новое ПО устраняет проблему с «шевелёнкой» на фото на микроуровне
Для получения чётких изображений микроскопических объектов необходимо сделать несколько последовательных снимков, а затем с помощью вычислительных алгоритмов восстановить из них одно изображение с высоким разрешением. Результат получается достаточно качественным, если объект съёмки неподвижен. Но если он в динамике, как это часто бывает, например, с микробами, то итоговое изображение всё равно получается размытым или искажённым.
Исследователи из Калифорнийского университета в Беркли нашли способ улучшить разрешение при съёмке подвижных объектов микроскопической величины. В статье об исследовании, опубликованной в издании Nature Methods, они рассказали о новом инструменте вычислительной визуализации под названием neural space-time model (NSTM), что можно перевести как «нейронная модель пространства-времени». Новинка использует небольшую в плане программного кода нейронную сеть для уменьшения так называемых артефактов движения («шевелёнки») и расчёта траекторий движения.
— Руйминг Цао, ведущий автор достижения.
По словам исследователей, NSTM можно совместить с другими методами обработки изображений без необходимости в дополнительном дорогостоящем оборудовании. Что касается эффективности, то новое ПО обеспечивает улучшение по времени на порядок, сказал Цао. Инструмент с открытым исходным кодом позволяет воссоздать один чёткий снимок быстрее на базе немногих кадров. Например, для компьютерной реконструкции хватит 10 или 20 изображений для воссоздания одного со сверхвысоким разрешением.
Участница исследования Лаура Уоллер объяснила, что по сути они с коллегами использовали нейронную сеть для моделирования динамики во времени, чтобы затем реконструировать изображение соответственно быстрее. Получился очень мощный инструмент, потому что им можно ускорить обработку в 10 и более раз, в зависимости от того, сколько изображений использовали изначально как базовые.
NSTM использует машинное обучение, но не требует предварительной подготовки. Это упрощает настройку и предотвращает возможное искажение данных при обучении. Единственные данные, которые использует компьютерная модель, — это фактические кадры, которые она зафиксировала.
В ходе тестирования NSTM показала хорошие результаты для трёх различных технологий микроскопии и фотографии: дифференциально-фазово-контрастной микроскопии, 3D-микроскопии со структурированным освещением и для съёмки диффузорной камерой с подвижным затвором.
Но, как говорится, это только верхушка айсберга. NSTM можно будет использовать для улучшения любого метода компьютерной визуализации по нескольким кадрам, отметила Уоллер. Такая перспектива обещает расширить спектр научных применений, особенно в биологических науках.
Разработанную модель можно подключить к любой вычислительной задаче с динамическими (подвижными) объектами съёмки. Например, использовать при проведении компьютерной томографии, МРТ и других методах наблюдения и диагностики со сверхвысоким разрешением. Результаты использования сканирующего микроскопа также можно улучить благодаря NSTM.
Исследователи предполагают, что когда-нибудь NSTM интегрируют в уже доступные на рынке системы визуализации по принципу простого обновления программного обеспечения.
Тем временем разработчики продолжают совершенствовать инструмент, пытаясь расширить его возможности.
Исследователи из Калифорнийского университета в Беркли нашли способ улучшить разрешение при съёмке подвижных объектов микроскопической величины. В статье об исследовании, опубликованной в издании Nature Methods, они рассказали о новом инструменте вычислительной визуализации под названием neural space-time model (NSTM), что можно перевести как «нейронная модель пространства-времени». Новинка использует небольшую в плане программного кода нейронную сеть для уменьшения так называемых артефактов движения («шевелёнки») и расчёта траекторий движения.
Проблема с визуализацией движущихся целей в том, что алгоритм реконструкции предполагает статичную картинку. NSTM расширяет эти вычислительные методы для динамических образов, моделируя и реконструируя движение объектов в каждый момент времени съёмки. Это уменьшает искажения, вызванные динамикой, позволяя к тому же видеть сверхбыстрые изменения, происходящие с предметом съёмки
— Руйминг Цао, ведущий автор достижения.
По словам исследователей, NSTM можно совместить с другими методами обработки изображений без необходимости в дополнительном дорогостоящем оборудовании. Что касается эффективности, то новое ПО обеспечивает улучшение по времени на порядок, сказал Цао. Инструмент с открытым исходным кодом позволяет воссоздать один чёткий снимок быстрее на базе немногих кадров. Например, для компьютерной реконструкции хватит 10 или 20 изображений для воссоздания одного со сверхвысоким разрешением.
Участница исследования Лаура Уоллер объяснила, что по сути они с коллегами использовали нейронную сеть для моделирования динамики во времени, чтобы затем реконструировать изображение соответственно быстрее. Получился очень мощный инструмент, потому что им можно ускорить обработку в 10 и более раз, в зависимости от того, сколько изображений использовали изначально как базовые.
NSTM использует машинное обучение, но не требует предварительной подготовки. Это упрощает настройку и предотвращает возможное искажение данных при обучении. Единственные данные, которые использует компьютерная модель, — это фактические кадры, которые она зафиксировала.
В ходе тестирования NSTM показала хорошие результаты для трёх различных технологий микроскопии и фотографии: дифференциально-фазово-контрастной микроскопии, 3D-микроскопии со структурированным освещением и для съёмки диффузорной камерой с подвижным затвором.
Но, как говорится, это только верхушка айсберга. NSTM можно будет использовать для улучшения любого метода компьютерной визуализации по нескольким кадрам, отметила Уоллер. Такая перспектива обещает расширить спектр научных применений, особенно в биологических науках.
Разработанную модель можно подключить к любой вычислительной задаче с динамическими (подвижными) объектами съёмки. Например, использовать при проведении компьютерной томографии, МРТ и других методах наблюдения и диагностики со сверхвысоким разрешением. Результаты использования сканирующего микроскопа также можно улучить благодаря NSTM.
Исследователи предполагают, что когда-нибудь NSTM интегрируют в уже доступные на рынке системы визуализации по принципу простого обновления программного обеспечения.
Тем временем разработчики продолжают совершенствовать инструмент, пытаясь расширить его возможности.
- Дмитрий Ладыгин
- youtu.be/EVgLBFVUCow
Наши новостные каналы
Подписывайтесь и будьте в курсе свежих новостей и важнейших событиях дня.
Рекомендуем для вас

Выяснилось, что суша вокруг Аральского моря... стремительно поднимается
И ученые сумели разгадать эту удивительную загадку природы....

В каменных гробницах древней Ирландии похоронены вовсе не те, о ком думали ученые
Генетический анализ переписывает историю неолита....

Тайна последнего Папы: сбудется ли пророчество XII века?
Три Петра, один престол: что об этом говорят историки и сам Ватикан?...

Что 220 дней в космосе сделали с 70-летним мужчиной?
Старейший астронавт NASA возвратился на Землю....

Застукали: антарктического гигантского кальмара впервые запечатлели в естественной среде
Прошёл век после открытия вида....

Невероятная история единственного человека, которому удалось проникнуть в Зону 51
Джерри Фримен не только выбрался оттуда, но и рассказал, что увидел....

«Двух монстров» засняли на камеру в знаменитом шотландском озере
Ученые не верят, но кого тогда видел очевидец?...

Американские военные приступили к строительству орбитального авианосца
Пентагон говорит, что это исключительно ради мира. Но эксперты прогнозируют военную эскалацию в космосе....

Оказывается, римляне периодически врали о своих победах в исторических хрониках
Недавно археологи обнаружили в Судане очередное яркое тому подтверждение....

Бетон в туннелях для автотранспорта гниёт удивительно быстро
Казалось бы прочный материал гложут микробы....

Китай испытал новейшую водородную, но не ядерную бомбу
Кто-то говорит, что это инновация, а кто-то, что такое уже было в СССР....

Ученые заставили человеческий глаз видеть совершенно новый цвет
Он называется оло, и его практически не описать словами....

Шимпанзе устраивают пьяные вечеринки
Похоже, у человека и близких видов это в крови....

Вороны еще раз подтвердили свою гениальность
Исследование показало, что эти птицы отлично распознают… геометрические фигуры....

Ученые доказали: вода на Земле не из космоса, а своя собственная
Она зародилась «автоматически». И это в корне меняет теорию жизни во Вселенной....

Нюхали чужие футболки: женщины полагаются на запах при выборе друзей
Наука требует странных опытов....