Разработан фреймворк машинного обучения, который кодирует изображения, как сетчатка

Исследователи EPFL разработали подход машинного обучения для сжатия данных изображений с большей точностью, чем методы вычислений без обучения, с применением для имплантатов сетчатки и других сенсорных протезов. Основной проблемой разработки более совершенных нейронных протезов является сенсорное кодирование: преобразование информации, полученной из окружающей среды датчиками, в нейронные сигналы, которые могут быть интерпретированы нервной системой. Но поскольку количество электродов в протезе ограничено, воздействие окружающей среды необходимо каким-то образом уменьшить, сохраняя при этом качество данных, передаваемых в мозг. Деметри Псалтис (Лаборатория оптики) и Кристоф Мозер (Лаборатория устройств прикладной фотоники) сотрудничали с Диего Гецци из Офтальмической больницы Жюля-Гонена — Fondation Asile des Aveugles (ранее заведующий кафедрой нейроинженерии Medtronic в EPFL) для применения машинного обучения к проблеме сжатия. данные изображения с несколькими измерениями, такими как цвет, контраст и т. д. В их случае целью сжатия было понижение разрешения или уменьшение количества пикселей изображения, передаваемого через протез сетчатки. «Понижение дискретизации для имплантатов сетчатки в настоящее время осуществляется путем усреднения пикселей, что, по сути, и делает графическое программное обеспечение, когда вы хотите уменьшить размер файла. Но, в конце концов, это математический процесс, здесь не требуется никакого обучения», — Гецци объясняет. «Мы обнаружили, что если мы применим подход, основанный на обучении, мы получим улучшенные результаты с точки зрения оптимизированного сенсорного кодирования. Но еще более удивительным было то, что когда мы использовали неограниченную нейронную сеть, она научилась самостоятельно имитировать аспекты обработки сетчатки». В частности, подход исследователей к машинному обучению, называемый структурой актер-модель, особенно хорош в поиске «золотой точки» для контраста изображения. Гецци использует Photoshop в качестве примера. «Если вы переместите ползунок контрастности слишком далеко в одном или другом направлении, изображение станет труднее увидеть. Наша сеть разработала фильтры, чтобы воспроизводить некоторые характеристики обработки сетчатки». Результаты недавно были опубликованы в журнале Nature Communications. Валидация как in silico, так и ex-vivo В рамках модели актера две нейронные сети работают взаимодополняющим образом. Модельная часть, или прямая модель, действует как цифровой двойник сетчатки : сначала ее обучают принимать изображение с высоким разрешением и выводить двоичный нейронный код, максимально похожий на нейронный код, генерируемый биологической сетчаткой. Затем сеть актеров обучается понижать дискретизацию изображения с высоким разрешением, которая может извлечь нейронный код из прямой модели, который максимально близок к коду, создаваемому биологической сетчаткой в ​​ответ на исходное изображение. Используя эту структуру, исследователи протестировали изображения с пониженной дискре...

Разработан фреймворк машинного обучения, который кодирует изображения, как сетчатка

Сообщает android-robot.com

 

Опубликовано: 11:18, 12.02.2024

 

Новость из рубрики: Технологии, Наука

 

Поделиться новостью: Поделиться новостью в Facebook Поделиться новостью в Twittere Поделиться новостью в VK Поделиться новостью в Pinterest Поделиться новостью в Reddit

 
 

Apple представила ИИ Keyframer, который анимирует статичные изображения 22:54, 14 Фев Apple представила ИИ Keyframer, который анимирует статичные изображения Компания Apple представила инструмент Keyframer на основе искусственного интеллекта, основанный на большой языковой модели (LLM). Нейросеть анимирует статичные изображения по запросу в формате естественного языка. На данное время существует множеств...

Курсы обучения охранников: как стать охранником 20:05, 26 Фев Курсы обучения охранников: как стать охранником Введение Охранники играют жизненно важную роль в поддержании безопасности в различных учреждениях, включая офисы, торговые центры и аэропорты. Чтобы стать охранником, требуется определенный набор навыков и квалификации, а также необходима надлежаща...

Представлена система обучения многопрофильных роботов 20:54, 18 Дек Представлена система обучения многопрофильных роботов Робототехники уже несколько лет пытаются разработать роботов, которые смогут выполнять различные повседневные домашние дела, такие как мытье посуды или уборка. Однако до сих пор ни один из созданных роботов не был коммерциализирован и принят в больш...

Китай представил четкие изображения своей космической станции Тяньгун 21:36, 30 Ноя Китай представил четкие изображения своей космической станции Тяньгун Китайское национальное космическое управление предоставило первые изображения своей космической станции Тяньгун (Tiangong) на фоне Земли, сделанные с высоким разрешением. Об этом в среду, 29 ноября, сообщает CGTN. Фотографии были сделаны астронавтом...

Представлен ИИ-ассистент Rabbit r1, который будет пользоваться приложениями за вас 04:18, 11 Янв Представлен ИИ-ассистент Rabbit r1, который будет пользоваться приложениями за вас Стартап Rabbit представил новый мобильный гаджет под названием Rabbit r1, который должен упростить использование смартфона. Работает девайс под управлением операционной системы Rabbit OS, основанной на большой модели действий (LAM). В отличие от при...

В Киеве открыли офис Горизонт Европа, который поможет с инвестициями 05:45, 21 Дек В Киеве открыли офис Горизонт Европа, который поможет с инвестициями В Украине на базе Национального фонда исследований заработал офис Горизонт Европа. Цель его деятельности - интегрировать украинских инноваторов в европейское исследовательское пространство, а также интеграция между научными коммьюнити ЕС и Украины. ...

Выходцы из Apple показали гаджет, который сможет заменить смартфон 20:00, 22 Окт Выходцы из Apple показали гаджет, который сможет "заменить" смартфон Стартап Humane бывших сотрудников Apple представил на Неделе моды в Париже революционный девайс Ai Pin, который "однажды заменит смартфон". Об этом сообщает Edgadget. Гаджет похож на компактный телефон с проектором вместо дисплея. Он крепится на оде...

Власти Тулы потребовали от Мемориала освободить офис, который организация занимала более 30 лет 07:27, 29 Дек Власти Тулы потребовали от «Мемориала» освободить офис, который организация занимала более 30 лет Комитет имущественных и земельных отношений администрации Тулы потребовал от местного отделения «Мемориала» освободить офис, которым организация пользовалась с 1992 года. Об этом сообщается в телеграм-канале общества «Мемориал». Согласно требованию ...

05:27, 10 Фев В Курск привезли огонь семейного очага «Сердце России», который зажгли в Москве на ВДНХ В Курск привезли огонь семейного очага, тот самый, который зажгли в Москве на выставке-форуме «Россия». В областной центр лампаду доставили молодожёны Лазаревы, которые сыграли свадьбу там же, на ВДНХ. Они передали частичку тепла другим семьям регио...