Агентство перспективных оборонных исследовательских проектов США (англ.DARPA) выбрал три команды исследователей во главе с Raytheon, BAE Systems и Northrop Grumman для разработки технологии инфракрасных (ИК) камер, которые реагируют на окружающую среду. Это проект в рамках программы FENCE, целью которого является создание «нейроморфной» электронной камеры с искусственным зрением, которое он имитирует то, как мозг обрабатывает информацию.
Современные современные камеры хорошо работают со сценами, в которых мало редактирования для отслеживания, и с относительно простыми изображениями. Однако их способности не работают в очень грязных и динамичных сценах, что ограничивает их использование во многих случаях. военные приложения.
Как работает «мозговая» камера
Программа FENCE DARPA направлена на разработку нового класса основанных на событиях инфракрасных фокальных массивов фокальной плоскости (FPA), малой задержки, маломощной цифровой обработки сигналов и алгоритмов машинного обучения. Другими словами? Разработка нейроморфной камеры позволит интеллектуальным датчикам обрабатывать более динамичные сцены для будущих военных приложений.
Датчики изображения на основе событий работают асинхронно и передают информацию только об изменившихся пикселях изображения. Это означает, что они работают с бешеной скоростью, над очень сложными изображениями, но производят гораздо меньше данных, при этом потребляя меньше энергии. Гиперболический прыжок вперед.
В нейроморфной камере есть кремниевые цепи, имитирующие работу мозга; они предлагают низкую производительность, низкую задержку и высокую энергоэффективность. Камера, основанная на событиях, работает по этим принципам, но сегодня ей не хватает развитого интеллекта для выполнения сложных задач.
др. Уитни Мейсон, программный менеджер, ведущий программу FENCE
Следующие шаги
Исследователи из Raytheon, BAE и Northrop они будут работать над развитием интегральная схема асинхронного считывания (ROIC), которая позволяет встроенному датчику FENCE работать при мощности менее 1,5 Вт.
В этих условиях, поверьте, нет ничего такого, что камера такого типа не смогла бы проигнорировать.
