Нейроморфная система улучшает машинное зрение в условиях экстремального освещения

Нейроморфная система улучшает машинное зрение в условиях экстремального освещения
Недавно исследовательская группа разработала нейроморфную систему управления экспозицией (NEC), которая улучшает машинное зрение в условиях экстремальных изменений освещенности. Опубликованная в Nature Communications, эта биологически вдохновленная система имитирует человеческое периферийное зрение, достигая беспрецедентной скорости и надежности в динамических средах восприятия.

Исследовательскую группу возглавляли профессор Цзя Пан и профессор Ифань Эван Пэн с кафедры компьютерных наук и кафедры электротехники и электроники инженерного факультета Университета Гонконга (HKU) в сотрудничестве с исследователем из Австралийского национального университета.

Традиционные системы автоматической экспозиции (AE) полагаются на итеративную обратную связь по изображению, создавая дилемму «курица или яйцо», которая не срабатывает при резких изменениях яркости (например, туннели, блики).

Система NEC решает эту проблему путем интеграции камер событий — датчиков, которые фиксируют изменения яркости по пикселям как асинхронные «события» — с новым алгоритмом Trilinear Event Double Integral (TEDI).

Этот подход: работает со скоростью 130 миллионов событий/сек на одном ЦП, что позволяет развертывать периферию.

«Подобно тому, как наши зрачки мгновенно адаптируются к свету, NEC имитирует биологическую синергию между путями сетчатки», — пояснил Шицзе Линь, первый автор статьи.

«Объединяя потоки событий с физическими показателями света, мы обходим традиционные узкие места, чтобы обеспечить зрение, не зависящее от освещения».

В ходе испытаний группа проверила NEC в критически важных сценариях: Автономное вождение: улучшенная точность обнаружения (mAP +47,3%) при выезде транспортных средств из туннелей на яркий солнечный свет.

Дополненная реальность (AR): достигнуто на 11% более точное определение позы (PCK) при отслеживании руки под хирургическим освещением.

3D-реконструкция: обеспечивает непрерывную SLAM-съемку в условиях чрезмерного воздействия, где обычные методы неэффективны.

Медицинская помощь с дополненной реальностью: сохранение четкой интраоперационной визуализации, несмотря на динамическую регулировку прожектора.

Профессор Пан сказал: «Этот прорыв представляет собой значительный скачок в машинном зрении , преодолевая разрыв между биологическими принципами и вычислительной эффективностью.

Система NEC не только устраняет ограничения традиционного контроля экспозиции, но и прокладывает путь для более адаптивных и устойчивых систем зрения в реальных приложениях — от автономных транспортных средств до медицинской робототехники».

Профессор Пэн прокомментировал: «Наша совместная работа сыграла важную роль в расширении границ нейроморфной инженерии. Используя основанное на событиях зондирование и биоинспирированные алгоритмы, мы создали систему, которая не только быстрее, но и более надежна в экстремальных условиях.

Это свидетельствует о силе междисциплинарных исследований в решении разнообразных сложных инженерных задач».

В долгосрочной перспективе парадигма NEC пре.
Опубликовано: 07:26, марта 12, 2025 Рубрика: Интернет и Игры Источник: android-robot.com Поделиться: Поделиться новостью в Facebook Поделиться новостью в Twittere Поделиться новостью в VK Поделиться новостью в Pinterest Поделиться новостью в Reddit
 
 
GPT-4 освоил Red Dead Redemption 2, но его подводит машинное зрение

GPT-4 освоил Red Dead Redemption 2, но его подводит машинное зрение Группа исследователей из Китая и Сингапура научила ИИ на базе OpenAI GPT-4V играть в Red Dead Redemption 2 (RDR2). В своей статье они рассказали о ко …

Hardware 11:18, апреля 16, 2024 | 3dnews.ru
Россиянам рассказали, как используют машинное зрение в нефтяной промышленности

Россиянам рассказали, как используют машинное зрение в нефтяной промышленности Россиянам рассказали, как машинное зрение поможет при разработке нефтяных месторождений Геофизические исследования скважин представляют собой важный …

Наука и Технологии 23:06, апреля 18, 2024 | ferra.ru
Ученые обнаружили, что моргание улучшает зрение, а не только защищает и увлажняет глаза

Ученые обнаружили, что моргание улучшает зрение, а не только защищает и увлажняет глаза Моргание – это естественный процесс, повторяющийся каждые несколько секунд, зачастую без сознательного участия. Новое исследование показало, что морг …

Это интересно 01:36, апреля 21, 2024 | incrussia.ru
Виктория Боня рассказала о голоде на съемках экстремального шоу

Виктория Боня рассказала о голоде на съемках экстремального шоу Блогерша и телеведущая Виктория Боня призналась в беседе с teleprogramma.pro, что участники шоу "Выжить в Дубае" испытывали голод на проекте. Боня ут …

Культура и искусство 12:12, июня 9, 2024 | gazeta.ru
Вскрылась причина экстремального похудения Никиты Ефремова

Вскрылась причина экстремального похудения Никиты Ефремова В этой киноленте, срежиссированной Кареном Оганесяном, классическая богатырская тема переносится в будущее. Главные герои, Илья Муромец и Соловей-Раз …

Общие новости 06:06, мая 7, 2024 | dni.ru
Chevrolet дал послушать рёв мотора экстремального суперкара Corvette ZR1

Chevrolet дал послушать рёв мотора экстремального суперкара Corvette ZR1 Американский суперкар Chevrolet Corvette нынешнего поколения C8 выпускается уже не первый год, а в 2024 году пришло время для выхода на рынок самой э …

Авто / Мото 14:48, июня 8, 2024 | motor.ru
Пирелли проведёт новые тесты шин для экстремального дождя

«Пирелли» проведёт новые тесты шин для экстремального дождя В Формуле-1 продолжаются поиски решений, которые могут позволить проводить гонки в экстремальных дождевых условиях. …

Спорт 16:18, мая 25, 2024 | championat.com
Память DDR5 впервые разогнали выше 12 000 МГц без экстремального охлаждения

Память DDR5 впервые разогнали выше 12 000 МГц без экстремального охлаждения Разгон памяти является вполне самодостаточной дисциплиной в мире оверклокинга, энтузиасты для покорения рекордных частот обычно используют жидкий азо …

Hardware 07:26, января 21, 2025 | 3dnews.ru
DLVR Bypass: Intel ограничивает технологию только для экстремального разгона

DLVR Bypass: Intel ограничивает технологию только для экстремального разгона Вместе с процессорами Core Ultra 200S, известными как Arrow Lake, Intel представила встроенный стабилизатор напряжения Digital Linear Voltage Regulat …

Наука и Технологии 07:26, ноября 15, 2024 | hardwareluxx.ru
Священник рассказал о правилах освещения вербы

Священник рассказал о правилах освещения вербы Иеромонах Феодорит рассказал, как правильно освещать вербу. Традиция освещения вербы в Вербное воскресенье уходит корням в прошлое, а именно в тот де …

Общество и Регионы 12:00, апреля 28, 2024 | mockva.ru
За два года в Ставрополе провели 29 км нового уличного освещения

За два года в Ставрополе провели 29 км нового уличного освещения В этом году планируют осветить территорию детского сада №49, завода «ОПТРОН» на проспекте Кулакова, ул. Радужную …

Общие новости 12:30, апреля 27, 2024 | atvmedia.ru
На Поэтическом бульваре началась реконструкция наружного освещения

На Поэтическом бульваре началась реконструкция наружного освещения На объекте уже установлены опоры, подготовлены траншеи под прокладку кабельных линий. Начался монтаж консолей и современных фонарей. Завершить работы …

Общие новости 20:54, мая 13, 2024 | konkretno.ru
Систему уличного освещения продолжают модернизировать в Биробиджане

Систему уличного освещения продолжают модернизировать в Биробиджане В Биробиджане в прошлом году началась масштабная работа по модернизации системы уличного освещения. С компанией ООО «БЛ Инвестиции» заключено концесс …

Общие новости 08:06, мая 20, 2024 | riabir.ru
748-сильный полноприводный гибрид с боевым режимом для экстремального бездорожья и двухдверным холодильником в салоне. Представлен новый BYD Leopard

748-сильный полноприводный гибрид с «боевым режимом» для экстремального бездорожья и двухдверным холодильником в салоне. Представлен новый BYD Leopard 8 Компания BYD представила новую версию внедорожника Leopard 8 — пятиместную (ранее автомобиль предлагался в 6- и 7-местных вариантах). Цена начи …

Наука и Технологии 14:26, октября 20, 2025 | ixbt.com
Два человека пострадали при наезде машины на опору освещения в Петербурге

Два человека пострадали при наезде машины на опору освещения в Петербурге Два человека пострадали при наезде автомобиля на опору уличного освещения в Санкт-Петербурге. Об этом 8 июня сообщил корреспондент 78.ru Роман Иконни …

Общие новости 07:30, июня 8, 2024 | iz.ru
Египетские пирамиды получили новую систему внутреннего освещения

Египетские пирамиды получили новую систему внутреннего освещения В пирамидах Гизы обновили систему внутреннего освещения — об этом сообщило Министерство туризма и древностей Египта. «Министерство туризм …

Развлечения 07:26, июля 28, 2025 | votpusk.ru
Ночью в Курске ВАЗ протаранил опору уличного освещения на Энгельса

Ночью в Курске ВАЗ протаранил опору уличного освещения на Энгельса Сегодня ночью в Курске на улице Энгельса произошла очередная автомобильная авария, в которой машина померилась силами с опорой уличного освещения. …

Общие новости 02:36, апреля 24, 2024 | 46tv.ru
В Вологодской области построят 120 километров сетей уличного освещения

В Вологодской области построят 120 километров сетей уличного освещения Линии построят в этом году. Еще будет установлено 5715 светильников. Работы проводят по программе врио губернатора Георгия Филимонова "Светлые улицы …

Общие новости 00:26, августа 20, 2024 | cherinfo.ru
DLP-проектор для домашнего кинотеатра Hisense PX3SE-Pro: ультракороткофокусная оптическая система, яркость 3000 ANSI лм, лазерный источник света, дин

DLP-проектор для домашнего кинотеатра Hisense PX3SE-Pro: ультракороткофокусная оптическая система, яркость 3000 ANSI лм, лазерный источник света, динамическое разрешение 4К и операционная система Vidaa U7.6 Проектор Hisense PX3SE-Pro оснащен лазерным источником света, времени жизни которого хватит на много лет, а ультракороткофокусная оптическая система …

Наука и Технологии 00:26, декабря 12, 2024 | ixbt.com
Машинное обучение улучшит прогнозы климата

Машинное обучение улучшит прогнозы климата Исследователи из Массачусетского технологического института (MIT) разработали метод, который позволяет значительно ускорить и удешевить прогнозы изме …

Наука и Технологии 01:42, июня 13, 2024 | ferra.ru
В Брянске реализуется масштабный проект по модернизации системы наружного освещения

В Брянске реализуется масштабный проект по модернизации системы наружного освещения 3 мая состоялась рабочая встреча Губернатора Брянской области Александра Богомаза с директором филиала ПАО «Россети Центр» - «Брянскэнерго» Федором К …

Общие новости 03:54, мая 5, 2024 | bryanskobl.ru
Учёные нашли способ освещения постоянно затененных кратеров Луны

Учёные нашли способ "освещения" постоянно затененных кратеров Луны Американские ученые работают над созданием отражателей для перенаправления солнечной энергии в затененные кратеры Луны, обеспечивая энергией процессы …

Наука и Технологии 11:12, мая 15, 2024 | pravda.ru
В Петербурге на десяти улицах Парголово завершили строительство наружного освещения

В Петербурге на десяти улицах Парголово завершили строительство наружного освещения В поселке Парголово, который находится на территории Выборгского района, десять улиц впервые освещаются фонарями. …

Общие новости 07:26, марта 14, 2025 | metronews.ru
Машинное обучение помогло восстановить поляризацию фотона

Машинное обучение помогло восстановить поляризацию фотона Физики применили методы машинного обучения для настройки и характеризации оптической квантовой системы. Им удалось быстро и точно восстановить поляри …

Наука 23:42, апреля 27, 2024 | nplus1.ru