Sony анонсировала грядущий релиз двух датчиков изображения — IMX500 и IMX501. Это первые в мире сенсоры, снабжённые функциональностью для выполнения ИИ-вычислений, заявляют в компании.
Новинки имеют сложную конфигурацию, состоящую из двух чипов: пиксельного и логического. Получаемый сигнал с первой микросхемы обрабатывается при помощи технологий искусственного интеллекта вторым. Прямо в датчике можно выполнять алгоритмы отслеживания объектов в реальном времени, распознавания лиц и других ИИ-моделей по желанию.
На выходе может оказаться не поток видео или фото, а логические данные. Если в ПО, например, зашито определение человека в кадре, датчик выдаёт «да» или «нет», не передавая обработку на сторонние вычислительные блоки.
Такое решение позволяет отказаться от отправки данных в облако или создания специализированных процессорных ядер для обработки фотографий. IMX500 и IMX501 быстрее, дешевле и безопаснее аналогичных систем, рассказывает производитель.
Технические характеристики обоих датчиков идентичны: сенсор 12,3 Мп с возможностью записи видео в 4К @ 60fps, поддержка HDR и RAW. Отличие заключается в том, что IMX501 поставляется в корпусе.
В Sony считают, что первое поколение ИИ-датчиков предназначено для промышленного применения, в потребительский сектор продукты могут выйти через несколько лет.