Нейроморфная система улучшает машинное зрение в условиях экстремального освещения

Нейроморфная система улучшает машинное зрение в условиях экстремального освещения
23:00, 06 Мар.

Недавно исследовательская группа разработала нейроморфную систему управления экспозицией (NEC), которая улучшает машинное зрение в условиях экстремальных изменений освещенности. Опубликованная в Nature Communications, эта биологически вдохновленная система имитирует человеческое периферийное зрение, достигая беспрецедентной скорости и надежности в динамических средах восприятия.

Исследовательскую группу возглавляли профессор Цзя Пан и профессор Ифань Эван Пэн с кафедры компьютерных наук и кафедры электротехники и электроники инженерного факультета Университета Гонконга (HKU) в сотрудничестве с исследователем из Австралийского национального университета.

Традиционные системы автоматической экспозиции (AE) полагаются на итеративную обратную связь по изображению, создавая дилемму «курица или яйцо», которая не срабатывает при резких изменениях яркости (например, туннели, блики).

Система NEC решает эту проблему путем интеграции камер событий — датчиков, которые фиксируют изменения яркости по пикселям как асинхронные «события» — с новым алгоритмом Trilinear Event Double Integral (TEDI).

Этот подход: работает со скоростью 130 миллионов событий/сек на одном ЦП, что позволяет развертывать периферию.

«Подобно тому, как наши зрачки мгновенно адаптируются к свету, NEC имитирует биологическую синергию между путями сетчатки», — пояснил Шицзе Линь, первый автор статьи.

«Объединяя потоки событий с физическими показателями света, мы обходим традиционные узкие места, чтобы обеспечить зрение, не зависящее от освещения».

В ходе испытаний группа проверила NEC в критически важных сценариях: Автономное вождение: улучшенная точность обнаружения (mAP +47,3%) при выезде транспортных средств из туннелей на яркий солнечный свет.

Дополненная реальность (AR): достигнуто на 11% более точное определение позы (PCK) при отслеживании руки под хирургическим освещением. 3D-реконструкция: обеспечивает непрерывную SLAM-съемку в условиях чрезмерного воздействия, где обычные методы неэффективны.

Медицинская помощь с дополненной реальностью: сохранение четкой интраоперационной визуализации, несмотря на динамическую регулировку прожектора.

Профессор Пан сказал: «Этот прорыв представляет собой значительный скачок в машинном зрении , преодолевая разрыв между биологическими принципами и вычислительной эффективностью.

Система NEC не только устраняет ограничения традиционного контроля экспозиции, но и прокладывает путь для более адаптивных и устойчивых систем зрения в реальных приложениях — от автономных транспортных средств до медицинской робототехники».

Профессор Пэн прокомментировал: «Наша совместная работа сыграла важную роль в расширении границ нейроморфной инженерии. Используя основанное на событиях зондирование и биоинспирированные алгоритмы, мы создали систему, которая не только быстрее, но и более надежна в экстремальных условиях.

Это свидетельствует о силе междисциплинарных исследований в решении разнообразных сложных инженерных задач».

В долгосрочной перспективе парадигма NEC предлагает новую схему обработки событий и кадров, которая снижает нагрузку на обработку событий/изображений высокого разрешения и включает биологически правдоподобные принципы в низкоуровневый контроль машинных глаз.

Это открывает новые возможности для проектирования камер, системного управления и алгоритмов нисходящего потока. Успех команды в воплощении нейроморфной синергии в различных системах является важной вехой, которая может вдохновить многие оптические/изображения/нейроморфные конвейеры обработки и подразумевает прямые экономические и практические последствия для отрасли.

Рубрика: Гаджеты и Технологии. Читать весь текст на android-robot.com.

 

Подробное исследование и описание мотор-приводов для гидравлических тележек и сопутствующего оборудования для оптимизации работы складов

Мотор-приводы для гидравлических тележек играют важную роль в современном складском хозяйстве и логистических операциях. Эти устройства ...

Что такое квази-кэш по карте Владелец банковской платежной карты (БПК) часто не знает всех комиссий банка. Например, клиент совершив онлайн-перевод, обнаруживает, что с его счета...

Регистрируйся и получай подарки от ООО «Газпром энергосбыт Брянск» Филиал «Брянскэнергосбыт» ООО «Газпром энергосбыт Брянск» запускает акцию «Регистрируйся и получай подарок!» для бытовых абонентов, которые еще не ус...

В женский дресс-код Уимблдона впервые за 146 лет внесли изменения Одно из главных событий в мире большого тенниса - Уимблдонский турнир впервые за 146 лет изменил свой строгий дресс-код. В 2023 г. администрация турн...

Еврокубок. «Вулвз» – «Венеция», «Бешикташ» играет с «Лондон Лайонс» и другие матчи В среду, 15 ноября, в рамках регулярного чемпионата Еврокубка пройдут пять матчей. Литовский клуб «Вулвз» примет итальянскую «Венецию», турецкий «Беш...

Онлайн Покупки Одежды и Экономия Денег с Промокодами

Современные технологии сделали покупки одежды онлайн удобными и доступными. Однако, чтобы еще больше наслаждаться своим шопингом, стоит обратить в...

Проверка Авто на Арест: Важные Шаги для Безопасности и Уверенности

При покупке подержанного автомобиля важно уделять внимание не только его техническому состоянию, но и юридическим аспектам. Один из ключевых момен...

Инновационные смазочные материалы: Эволюция в мире автомобильной и внедорожной техники

Современные технологии не останавливаются на месте, и это касается не только двигателей и систем управления автомобилей, но и смазочных материалов...

Константин Струков и умение принимать профессиональные решения

От горного мастера до миллиардера: трудовая биография Струкова, владельца "Южуралзолота"

История успеха часто начинается с момента упорно...

Дизайн Ванной Комнаты: Творчество и Комфорт в Каждой Детали

1. Введение

Ванная комната – это не просто функциональное пространство, но и уголок для релаксации и творчества. Проектирование...

Время Намаза в Городе Нальчик: Руководство для Верующих

1. Пятикратные Молитвы в Исламе

Молитвы в исламе являются одним из важных аспектов веры. Верующим предписано совершать пятикрат...

Аренда Яхты в Мармарисе Исследуйте Красоты Эгейского Побережья

1. Почему Мармарис?

Мармарис, расположенный на юго-западе Турции, является идеальным местом для аренды яхты и морских приключений:

Бетон, строительные смеси, цемент

Бетон: основные свойства и применение

Бетон - один из основных строительных материалов, широко применяемый в различных отраслях...

Имплантация зубов: восстановление красоты и функциональности улыбки

1. Что такое имплантация зубов?