Про кастомные чипсеты. Google также включается в гонку за кастомные чипсеты для обработки изображений (IPU, Image Processing Unit). Пока речь идет о Pixel Visual Core, чипсете для процессинга изображений в Pixel 2 и Pixel 2 XL с фокусом на ускорение обработки, HDR-съемку и т.п. Но пример Qualcomm и других производителей показывает и следующий шаг: специализированные чипсеты для помощи распознавания изображений, действий и т.п. https://www.theverge.com/2017/10/17/16487834/google-pixel-visual-core-ipu-custom-processor-chip #custom #hardware #image #vision #chipset

В продолжение большой темы с камерами и линзами - MIT Technology Review пишет о новом поколении оптики - металинзах, создаваемых через фотолитографию. Фактически речь идет о создании lens-on-a-chip аналогично тому, как сегодня создаются различные элементы микроэлектроники, что означает 1) ее производство (!) в рамках тех же процессов, что и производство самих чипчетов (читай - на тех же заводах, а потому массово и дешевле), 2) дальнейшее уменьшение в размерах и возможность интеграции непосредственно в чипсет (!) и 3) программируемое создание оптики под нужные задачи (условно, для обработки изображений и спектрографии нужные разные свойства оптической системы). https://www.technologyreview.com/s/609615/physicists-are-reinventing-the-lens-and-imaging-will-never-be-the-same/ #lens #optics #future #vision

Когда-то это должно было случиться... Тут группа товарищей из Университета Суссекса начала использовать нейронные сети, чтобы генерировать галюциногенные изображения в виртуальной реальности с целью изучения альтернативных состояний сознания без использования медикаментозного воздействия. Идея в том, чтобы с помощью т.н. Hallucination Machine воспроизвести феноменологический аспект (то есть видимость) без воссоздания других побочных и общих эффектов, все на благо науки и психиатрии, в частности. (В этой новости прекрасно все!). https://www.nature.com/articles/s41598-017-16316-2 #vision #VR #Hallucination

8. Проблема GDRP. Компаниями придется пересмотреть, как они балансируют между рисками и затратами. Полное соответствие GDRP дорого, неполное может существенно ударить по имиджу и привести к непредвиденным расходам. К маю 2018 - 80% компаний, подпадающих под GDRP не будут в полной мере соотвествовать регулированию. Из них половина - сделает это сознательно, а другая просто не справится. Тонкость также в том, что группы пользователей будут использовать GDRP для давления на компании.

9. Открытый бинкинг готовит осаду. Традиционные бизнес-модели банкинга находятся под атакой: новые ожидания пользователей, натиск финтеха и неспособность углубить отношения с клиентами - усугубятся под действием открытого банкинга. PSD2 ставит под угрозу ядро банковской деятельности - данные, убирая их монополию на историю аккаунта. Большинство банков провалило возможность использовать эти данные для формирования стратегического преимущества. В 2018 Amazon, Google, финтех-провайдеры и банки-лидеры получат доступ к данным, скрывая или замещая действующие банки. Более 50% банков не смогут превратить открытый банкинг в преимущество, означая болезненный переход на утилитарную функцию.

10. Гармонизация ритейл-опыта. Хотя индустрия растет, на горизонте новые проблемы. Последние годы ритейлеры пытались идти параллельными треками: улучшение опыта в offline и трансформация в сторону online, включая стыковку этих двух опытов. Следующая проблема — как работать с умными агентами, влияющими на то, как пользователи обнаруживают и заказывают продукты; как сделать динамичным опыт в магазинах, превращая их в точки контакта в течение дня; как расширить цифровые каталоги для соответствия Amazon; и как все это сбалансировать в сквозной опыт для покупателей. В 2018 цифровые агенты станут самой большой проблемой, причем только 33% ритейлеров понимают из трансформирующую природу.

11. Сброс ИИ. ИИ быстро меняет, как компании создают опыт для пользователей, как пользователи балансируют между приватностью своих данных и ценностью, приносимой их открытием, и как сотрудиники перестраивают характер своей работы. Фокус внимания в обсуждении ИИ сосредоточился вокруг "дополненной" интеллектуальности и диалоговых интерфейсов. В 2017 инвестиции касались отдельных кейсов и проектов, нацеленных на немедленную отдачу. Такие проекты краткосрочных и слишком узки. В 2018 - 75% ИИ-проектов провалятся из-за неспособности учесть операционные ограничения, приводя к пересмотру областей инвестирования.

12. Блокчей ползет вперед. Блокчейн обещает заложить основу для мощных платформенных и экосистемных стратегий, защищенных при этом от растущих кибер-угроз. Отчасти это обещание и есть проблема: в 2017 маркетинг перепродал блокчейн, команды делают узкие пилоты с недостаточными результатами на фоне завышенных ожиданий, причем зачастую для проблем, которые решаются традиционными технологиями. 80% проектов не соответствуют ожиданиям. В 2018 завышенные риторика и энтузиазм продолжат ограничивать пользу от блокчейна. Однако 30% пилотов ускорят внедрение блокчейна в тех компаниях, которые смогут предусмотреть его операционное влияние.

13. Прибыльная безопасность. Компании сталкиваются с растущей киберугрозой, причем зачастую команды, сражающиеся с хакерами получают по внутренней линии притензии, что их усилия негативно влияют на пользовательский опыт. В 2018 это начнет меняться, команды безопасности вместе с маркетинговыми и продуктовыми командами начнут измерять прибыльность от безопасности. В основе - управление профилями. Безопасникам нужно знать, кто имеет доступ к чему, маркетингу нужна эта же информация для персонализации. В 2018 - 10% компаний, поймут, как это сделать.

https://go.forrester.com/wp-content/uploads/Forrester-2018-Predictions.pdf #future #vision (Более детально и платно - https://go.forrester.com/research/predictions/)

Логичное продолжение развития нашего сервиса Custom Vision: в дополнение к возможности экспорта в CoreML для iOS добавилась возможность экспорта обученных моделей в TensorFlow-формат для Android. https://azure.microsoft.com/en-us/blog/customvision-ai-code-free-automated-machine-learning-for-image-classification/ (инструкция - https://github.com/Azure-Samples/cognitive-services-android-customvision-sample) #ai #vision #edge

p.s. Вообще это показательный пример, как интеллектуальность переходит между облаком и конечными устройствами.

Новость в алгоритмах машинного зрения - Facebook выложил в открытый доступ Detectron - свою платформу для CV на базе Caffe2. Судя по разным отсылкам, эту же платформу использует команда Oculus в AR-проектах. https://github.com/facebookresearch/Detectron #ai #vision #object #detection

Хороший рассказ о том, как развивается система машинного зрения в Pinterest. От анализа эстетики объектов для построения рекомендаций, к распознаванию объектов для поиска похожих ситуаций, к использованию камеры смартфона для "опроса" сервиса с помощью внешнего мира. https://towardsdatascience.com/pinterests-visual-lens-how-computer-vision-explores-your-taste-5470f87502ad #ai #vision #camera

p.s. Обратите внимание, мы снова говорим о камерах смартфонов как средстве массового распределенного анализа мира.

Большая головная боль машинного обучения - разметка сырых данных. Вот тут коллеги рассказывают про использование метода Otsu для подготовки данных под задачу сегментация изображений. https://www.microsoft.com/developerblog/2018/05/17/using-otsus-method-generate-data-training-deep-learning-image-segmentation-models/ #ai #ml #image #vision

Классная российская история стартапа CVizi про анализ зрителей в кинотеатрах и на конференциях с помощью когнитивных технологий.. https://m.habr.com/company/microsoft/blog/413015/ #ai #vision #cognitive

Еще футбола! Помните, я тут выше писал про восстановление (реконструкцию) 3D-сцены по 2D-съемки? Группа исследователей из университета Вашингтона (+Google, +Facebook) сделали еще один шаг в этом направлении:
* взяли ролики игры в FIFA2017
* обучили сеточки распознавать поле, игроков и т.п.
* транслировали движения фигур в движения скелетов и карты глубины
* реконструировали игру в 3D
* перевели сцену в MR (Hololens)

А теперь представьте, что вы можете смотреть чемпионат мира по футболу на своем столе в 3D, как будто у вас на поверхности стола копия футбольного поля, вокруг которой вы можете ходить, приближаться и т.п.

http://www.i-programmer.info/news/190-augmentedvirtual-reality-arvr/11868-watch-soccer-games-in-3d-on-your-table-top-.html

Детали и публикация: https://arxiv.org/pdf/1806.00890.pdf

#ai #ml #mr #vision