Sony представила первые датчики изображения со встроенной обработкой ИИ
Они включают всё необходимое для вычислений искусственного интеллекта без необходимости перенаправлять эти задачи центральному процессору.
Sony анонсировала грядущий релиз двух датчиков изображения — IMX500 и IMX501. Это первые в мире сенсоры, снабжённые функциональностью для выполнения ИИ-вычислений, заявляют в компании.
Новинки имеют сложную конфигурацию, состоящую из двух чипов: пиксельного и логического. Получаемый сигнал с первой микросхемы обрабатывается при помощи технологий искусственного интеллекта вторым. Прямо в датчике можно выполнять алгоритмы отслеживания объектов в реальном времени, распознавания лиц и других ИИ-моделей по желанию.
На выходе может оказаться не поток видео или фото, а логические данные. Если в ПО, например, зашито определение человека в кадре, датчик выдаёт «да» или «нет», не передавая обработку на сторонние вычислительные блоки.
Такое решение позволяет отказаться от отправки данных в облако или создания специализированных процессорных ядер для обработки фотографий. IMX500 и IMX501 быстрее, дешевле и безопаснее аналогичных систем, рассказывает производитель.
Технические характеристики обоих датчиков идентичны: сенсор 12,3 Мп с возможностью записи видео в 4К @ 60fps, поддержка HDR и RAW. Отличие заключается в том, что IMX501 поставляется в корпусе.
В Sony считают, что первое поколение ИИ-датчиков предназначено для промышленного применения, в потребительский сектор продукты могут выйти через несколько лет.