Агентство перспективных исследовательских проектов Министерства обороны США (англ.DARPA) выбрал три группы исследователей во главе с Raytheon, BAE Systems и Northrop Grumman для разработки технологии инфракрасных (ИК) камер, реагирующих на окружающую среду. Это проект в рамках программы FENCE, целью которого является создание «нейроморфной» электронной камеры с искусственным зрением, которая он имитирует то, как мозг обрабатывает информацию.
Современные камеры хорошо справляются со сценами, которые практически не требуют редактирования, а также с относительно простыми изображениями. Однако их возможности терпят неудачу в сильно загроможденных и динамичных сценах, что ограничивает их использование во многих военные приложения.
Как работает «мозговая» камера
Программа FENCE DARPA направлена на разработку нового класса основанных на событиях инфракрасных фокальных массивов фокальной плоскости (FPA), малой задержки, маломощной цифровой обработки сигналов и алгоритмов машинного обучения. Другими словами? Разработка нейроморфной камеры позволит интеллектуальным датчикам обрабатывать более динамичные сцены для будущих военных приложений.
Датчики изображения на основе событий работают асинхронно и передают информацию только о том, какие пиксели изображения изменились. Это означает, что они работают с головокружительной скоростью над очень сложными изображениями, но производят гораздо меньший объем данных и потребляют меньше энергии. Гиперболический прыжок вперед.
В нейроморфной камере есть кремниевые цепи, имитирующие работу мозга; они предлагают низкую производительность, низкую задержку и высокую энергоэффективность. Камера, основанная на событиях, работает по этим принципам, но сегодня ей не хватает развитого интеллекта для выполнения сложных задач.
др. Уитни Мейсон, программный менеджер, ведущий программу FENCE
Следующие шаги
Исследователи из Raytheon, BAE и Northrop они будут работать над развитием интегральная схема асинхронного считывания (ROIC), которая позволяет встроенному датчику FENCE работать при мощности менее 1,5 Вт.
В этих условиях, поверьте, нет ничего, что камера такого типа могла бы игнорировать.
