Искусственный интеллект в камере вашего смартфона может распознавать лица, размывать фон, регулировать освещенность: как стать профи в фотографии

Содержание
  1. Фототест: как работает Искусственный Интеллект при съемке?
  2. Жесткий свет
  3. Мягкий свет
  4. Как работает ИИ в камере
  5. Зачем смартфону пять камер? Объясняют профессиональные фотографы (и тестируют новый Honor 20 Pro) — Meduza
  6. Сколько камер нужно смартфону
  7. Селфи 
  8. Макросъемка
  9. Пейзаж  
  10. Ночной город 
  11. Портрет
  12. Замедленное видео
  13. Почему вам нужен смартфон с искусственныи интеллектом
  14. Как искусственный интеллект (ИИ) используется в смартфонах?
  15. Может ли искусственный интеллект (ИИ) улучшить производительность и энергоэффективность смартфона?
  16. Примеры смартфонов с искусственным интеллектом (ИИ)
  17. «Искусственный интеллект» в смартфонах — как это работает
  18. Облака VS устройства
  19. Ии для камер
  20. … для шоппинга
  21. … для перевода
  22. … для безопасности
  23. … для производительности
  24. Что дальше?
  25. Huawei рекомендует:
  26. Настройка камеры в Honor 10
  27. Характеристики камеры
  28. Искусственный интеллект
  29. Функции основной камеры
  30. Фронтальная камера
  31. Выводы

Фототест: как работает Искусственный Интеллект при съемке?

Искусственный интеллект в камере вашего смартфона может распознавать лица, размывать фон, регулировать освещенность: как стать профи в фотографии

Huawei nova 3 — более «молодежная» и доступная «сестра» флагманских P20 Pro и Mate 20 Pro.

При этом в nova 3 используется тот же мощный топовый процессор Kirin 970 c отдельным ядром для искусственного интеллекта (аналогичный P20 Pro), отличная двойная основная камера на 24 МП + 16 МП с зумом и двойная фронталка 24 МП + 2 МП — также с поддержкой искусственного интеллекта и аппаратного боке.

В нашем обзоре мы уже отмечали, что это одна из лучших камер в среднем ценовом диапазоне. Все при ней: и двукратный зум без потерь, и качественные модули, и ночная съемка. В нашем материале — тест камеры nova 3 в самых разных условиях на протяжении 10 дней. Получилась ли замена фотоаппарату?

Жесткий свет

Для тестов камеры мы прилетели в солнечный Севастополь. Богатство местной природы позволит произвести съёмку как при ярком контрастном свете, так и в полной темноте, мы найдем пещеры, животных, насекомых. И сделаем несколько селфи — куда же без них!

Большинство фотографий в этом материале представлены в формате слайдеров. С одной стороны представлен снимок в стандартном режиме, а с другой — с включенным AI режимом. 

Без AIAI включен

Искусственный интеллект Huawei nova 3 распознает до 500 различных сцен в рамках 19 базовых сценариев и помогает подбирать настройки ISO, экспозиции и баланса белого.

В ночном снимке искусственный интеллект не поскупился на двойную экспозицию — слабее освещенный тротуар на «умной» фотографии высветлен и смотрится значительно ближе к тому, как это выглядело в реальности. Тот же трюк днем может пригодиться при контровом свете, например, если съемка ведется из помещения или из тени в сторону освещенной улицы.

Слева направо: без AI, с включенным AI

Мягкий свет

Если камера видит зеленую растительность, нейросеть автоматически накладывает специфический фильтр, который повышает насыщенность цветов. Без AI режима сцена с сотрудником аэропорта, который поливает зеленую стену с живыми папоротниками на высоте третьего этажа смотрится не так впечатляюще.

Без AIAI включен

То же касается неба — днем над морем часто бывает не очень живописная белесая дымка, из-за которой вода некрасиво сливается с небом. Но искусственный интеллект приходит на помощь. Обученный миллионами примеров алгоритм точно определяет, небо и линию горизонта и добавляет синевы, отдельно улучшая другие видимые объекты, например, зеленый лес ялтинских предгорий.

Без AIAI включен

Впрочем, в пасмурную погоду это режим работает не хуже.

Слева направо: без AI, с включенным AI

Как работает ИИ в камере

К слову, в отличие от моделей прошлого года, в nova 3 AI режим работает не только на основной, но и на фронтальной камере.

Благодаря точному распознаванию сцен, смартфон одним щелчком затвора делает снимки, которые потом можно спокойно выгружать в Инстаграм с хештегами #снятонаhuawei и #безобработки — и не нужны ни сторонние редакторы, ни даже встроенные фильтры самой соцсети, кадры и так смотрятся ярко и вызывают зависьть (и лайки).

Слева направо: без AI, с включенным AI

Но, пожалуй, куда более практически значимой особенностью «умной» камеры Huawei nova 3 можно назвать ее способность делать отлично детализированные, четкие снимки даже при очень плохом освещении.

Тут в дело вступают несколько характеристик. Во-первых, двойная камера уже традиционно для Huawei состоит из основного цветного и второго черно-белого сенсора.

Так как ч/б матрице не надо улавливать цветовые оттенки, она способна захватывать больше света, подробнее прорабатывая объекты в темноте с меньшим количеством шумов.

Одновременно с этим камера делает и цветной кадр, а потом объединяет сырую информацию с двух цифровых матриц в одно резкое цветное изображение.

Без AIAI включен

Но это еще не все — смартфоны Huawei 2018 года используют комбинацию оптической и «интеллектуальной» цифровой стабилизации изображения.

Так называемая AIS (AI image stabilization) предугадывает (почти всегда корректно) движения объектов и направление тряски рук, чтобы снимки с длинной выдержкой меньше смазывались.

Работу в темноте можно оценить на кадрах из Мраморной пещеры в горе Чатырдаг, в которой никогда не было естественного света.

Без AIAI включен

А еще продвинутая стабилизация отлично проявляет себя при макросъемке на телеобъектив.

С двукратным зумом эффект от всех движений камеры удваивается, и сделать качественный резкий кадр сложнее.

AIS решает эту проблему, а искусственный интеллект параллельно увеличивает контрастность и проработку структуры, чтобы мелкие объекты вроде цветов и насекомых лучше выделялись из фона.

Без AIAI включен

В официальной рознице Huawei nova 3 стоит 29 990 рублей с учетом целого вороха подарков для отпуска и продолжительной фото-охоты со смартфоном: внешнего аккумулятора с поддержкой быстрой зарядки Huawei Charge, фитнес-трекера Huawei Band 2 Pro и монопода-штатива.

Huawei nova 3 в фирменном магазине с подаркомДругие примеры работы AI в Huawei nova 3 смотрите в галерее

Источник: https://hi-tech.mail.ru/review/Ai_phototest_huawei/

Зачем смартфону пять камер? Объясняют профессиональные фотографы (и тестируют новый Honor 20 Pro) — Meduza

Искусственный интеллект в камере вашего смартфона может распознавать лица, размывать фон, регулировать освещенность: как стать профи в фотографии

Роберт Капа, фотограф и один из основателей легендарного фотоагентства Magnum, как-то сказал: «Лучшая камера та, которая всегда с тобой». Камерофон — это как раз такое устройство. Оно помещается в карман и в любой момент готово к съемке. Мы попросили трех фотографов протестировать новый Honor 20 Pro и рассказать про то, как новые технологии помогают делать впечатляющие фото. 

Сколько камер нужно смартфону

Смартфоны бесконечно эволюционируют. Раньше производители гнались за мегапикселями, наращивая разрешение, а сейчас сложно представить флагманский смартфон без двух-трех камер. Honor 20 Pro — новая ступень эволюции: у него пять камер.

Со стороны кажется, что это всего лишь маркетинговый трюк, но у каждой из них своя функция. Это как с оборудованием профессионального фотографа, у которого всегда с собой сразу несколько объективов для разных целей и задач.

Итак, у Honor 20 Pro пять камер, четыре установлены на задней панели. 

Основная камера Sony IMX586. Это первый в мире сенсор для смартфонов с разрешением в 48 мегапикселей, который используется сегодня во многих флагманских смартфонах. Диафрагма f/1.4 позволяет делать снимки даже при плохом освещении. Кроме того, у камеры есть функция лазерной фокусировки.  

Второй сенсор имеет 16 мегапикселей, диафрагму f/2.2, угол обзора 117 градусов с подавлением эффекта «рыбий глаз». 

Третий сенсор — 8-мегапиксельный телеобъектив с диафрагмой f/2.4, трехкратным оптическим зумом и оптической стабилизацией. 

Четвертый — 2-мегапиксельная камера с диафрагмой f/2.4 для съемки макро.  

Фронтальная камера — пятая по счету. С ней можно снимать селфи с разрешением 32 мегапикселя и диафрагмой f/2.0. Примечательно, что камера встроена прямо в экран — это позволило максимально увеличить размер дисплея и сделать его практически безрамочным. 

Чтобы управлять всем этим, у аппарата есть искусственный интеллект. Камера сама распознает сюжеты и подбирает оптимальные параметры съемки.

Например, если в объектив попадает цветок или еда, включается макрорежим; если камера видит человека — включается режим «Портрет». Кстати, в портретном режиме камера фокусируется на модели, стараясь размыть фон и сгладить дефекты кожи.

Для пейзажей будет увеличиваться насыщенность цветов, а во время съемки концерта камера адаптируется под постоянно меняющееся освещение сцены.

Попробуем разобраться, для каких целей нужны эти камеры.

Селфи 

Широкоугольная фронтальная камера Honor 20 Pro делает фото с разрешением больше, чем у некоторых профессиональных фотоаппаратов.

Такие фотографии легко кадрировать без потери качества или даже печатать большим форматом, например A3. При съемке селфи искусственный интеллект определяет фон и размывает его, будто снимок сделан на зеркальную камеру.

Плюс при желании можно добавить опцию «украшение», чтобы, например, выровнять цвет лица. 

Марго Овчаренко (художница и фотограф): «Honor 20 Pro отлично подойдет для профессиональной инстаграмерки. Селфи, фотографии из поездок, крупные планы деталей и самое главное — имитация удачного света и сглаживание рельефа — все пригодится, когда работаешь на себя и работаешь лицом.

Когда мне было 16 лет, я много снимала селфи и выкладывала их на сайты типа DeviantArt. Цифровые камеры тогда были очень слабые, и я пользовалась фильтром подавления шумов в фотошопе. Встроенный фильтр в Honor очень похож по эффекту.

Но это было 15 лет назад, так что мне кажется, что такая эстетика — это выбор, а не необходимость».  

Макросъемка

У Honor 20 Pro есть особый сенсор для макрорежима, который позволяет взглянуть на привычный мир под новым углом.

С ним можно снимать с близкого расстояния растения, насекомых, интересные текстуры и фактуры.

В режиме «Супермакро» объектив камеры можно поднести к объекту на расстояние 4 сантиметра (это минимальная дистанция фокусировки), правда, разрешение в таком режиме составит 2 мегапикселя.

Марго Овчаренко: «В макрорежиме видно, что искусственный интеллект смартфона натренирован на еде и цветах. Эти объекты на фото выглядят лучше всего. А если, например, на этот режим снять человека, то он выглядит неестественно. Если сравнивать с фотоаппаратом, то все получается более резко и контрастно». 

Пейзаж  

У камеры Honor 20 Pro есть широкоугольный сенсор, который позволяет добиться обзора в 117 градусов. С ним можно снимать природу, городские панорамы или отдельные архитектурные объекты. Камера позволяет по-новому исследовать городское пространство. Еще есть режим «Панорама» — телефон нужно медленно вести слева направо или сверху вниз, а он сам склеит единую картинку. 

Также смартфон позволяет приближать изображение без потери качества в три раза. Для этого в дело вступает телеобъектив с оптическим зумом.

Функция пригодится для выделения какой-то детали пейзажа или конкретного человека в толпе.

При зумировании искусственный интеллект повышает резкость, так что даже если вы сильно приблизите объект и чуть двинете рукой, есть шанс, что изображение не будет смазанным.  

Александр Врублевский (фотограф, преподаватель Photoplay): «Используя телеобъектив, можно добиться интересных и небанальных сюжетов. Он здорово приближает отдаленные объекты, например детали здания и пейзажа. Еще он „схлопывает“ перспективу: на снимках кажется, что объекты находятся в одной плоскости, хотя их могут разделять десятки метров».  

Ночной город 

По меркам смартфонов у Honor 20 Pro просто огромная матрица, а значит, он может захватить много света. Открытая диафрагма f/1.4 позволяет получать хорошие снимки ночью. Искусственный интеллект тоже вступает в дело. Для улучшения детализации смартфон делает несколько фото с разной экспозицией и компонует их.  

Александр Врублевский: «Снимая ночью, лучше всего зафиксировать телефон, например на штативе. В крайнем случае можно попробовать держать его в руках, облокотившись на что-нибудь неподвижное.

У Honor 20 Pro есть отдельный режим для съемки света.

Это интеллектуальные настройки для творческих экспериментов на длинной выдержке: съемки фризлайта (рисования светом в пространстве) или следов от фар автомобилей».

Портрет

Основная камера работает в паре с фазовым и лазерным автофокусом, что позволяет сфокусировать объектив на лице и отделить передний план от заднего, чтобы имитировать размытие фона для портретов. Конечно, результат не такой, как у профессиональных фотоаппаратов, но с учетом размеров смартфона впечатляет.

Марго Овчаренко: «Фотографы любят говорить, что свет при съемке портрета решает чуть ли не больше, чем обработка. Это правда. Свет сглаживает рельеф под глазами, в районе носогубной складки и везде, где еще может быть угодно. Он помогает, если вы хотите что-то скрыть и сгладить.

Я сделала пару кадров при свете резкой лампы накаливания, которая висела прямо надо мной, и было видно, как в тенях все выровнялось. Думаю, что вытянуть такое из RAW, сохранив фон „живым“ и не жухлым, было бы сложно и долго. Так что при съемке комплиментарных портретов телефон реально экономит время.

Хотя сами цвета и контраст похожи больше на рекламную фотографию, и мне такое не близко.   

Зато впечатляет, как на функции „Портрет“ при контровом свете камера продолжает настраиваться по лицу, а не по общей экспозиции. Вот этого мне обычно не хватает в моем телефоне. Также понравилась достойная цветовая гамма при смешанном освещении. Да и вообще искусственные источники света не убивают цвет кожи».

Замедленное видео

Honor 20 Pro умеет снимать slow-motion-видео, как в блокбастере. Максимальное замедление в 32 раза (при частоте 960 кадров в секунду). В этом случае разрешение картинки — 720p. С «обычной» скоростью доступна съемка в формате 4K при 30 кадрах в секунду.

Василий Нефедкин (оператор): Вообще, режим слоумо нужен, чтобы запечатлеть мимолетные мгновения. А с телефоном эта возможность всегда под рукой.

Чтобы снять эффектный ролик, достаточно направить камеру на собачку, отряхивающуюся от воды. Опять же, в слоумо классно снимать спорт — какие-то трюки на скейтборде или велосипеде.

Так можно рассмотреть то, что быстро происходит и незаметно при обычной съемке. 

Если снимаешь в режиме суперзамедленной съемки на Honor 20 Pro, телефон сам определяет движущийся объект и снимает только его. Это удобная функция, чтобы не упустить «тот самый момент».

Honor 20 Pro не только снимает фото — это мощный смартфон для решения ежедневных задач. У него восьмиядерный процессор HiSilicon Kirin 980, 8 гигабайт оперативной памяти и емкий аккумулятор (4000 мА·ч). Экран с разрешением 1080 × 2340 точек, который занимает 91% всей площади лицевой панели. Внешний вид телефона заслуживает отдельного внимания. Задняя панель сделана из нескольких слоев стекла, которые особым образом отражают и преломляют свет. Оформить предзаказ на устройство можно здесь.

Источник: https://meduza.io/feature/2019/08/02/zachem-smartfonu-pyat-kamer-ob-yasnyayut-professionalnye-fotografy

Почему вам нужен смартфон с искусственныи интеллектом

Искусственный интеллект в камере вашего смартфона может распознавать лица, размывать фон, регулировать освещенность: как стать профи в фотографии

2018-й можно смело назвать годом технологий искусственного интеллекта в смартфонах.

Сегодня едва ли не каждый производитель таких устройств подчеркивает, что его продукты наделены ИИ и это дает им значительные преимущества перед конкурентами. Так ли это? Ответить однозначно, увы, сложно.

Производители понимают под ИИ совершенно разные вещи, а иногда используют его упоминание для маркетинговых целей, не имея для этого веских оснований.

К счастью, наличие или отсутствие технологий искусственного интеллекта в смартфоне можно проверить. Для этого достаточно взглянуть на характеристики устройства и найти там название чипсета, лежащего в его основе. Запоминаем и идем на сайт его производителя.

Если никаких упоминаний об ИИ на странице чипсета нет, значит, ИИ в смартфоне — это скорее всего фантазии производителя последнего. Если же производитель чипсета четко указывает на наличие средств обеспечения ИИ, то смартфон относится к «умной» категории.

Но что же дает этот самый ИИ? Давайте разберемся на примере чипсетов MediaTek и смартфонов на их основе. Поддержка ИИ в данном случае честная — на аппаратно-программной основе.

Так что, если в перечне характеристик смартфона вы видите названия MediaTek Helio P22 (MT 6762) или MediaTek Helio P60 — знайте, ИИ в этом смартфоне действительно есть.

Обе платформы поддерживают технологию MediaTek NeuroPilot, а в P60 есть и отдельный ИИ-модуль (APU). Это обеспечивает смартфоны на базе чипсетов набором функций с применением ИИ.

Как искусственный интеллект (ИИ) используется в смартфонах?

Первая из функций — глубокое обучение при распознавании лиц. «Сканировать» лицо пользователя фронтальной камерой сейчас умеют десятки смартфонов, но далеко не все они задействуют при этом ИИ.

Последний помогает повысить точность и скорость распознавания объекта в кадре, а также избежать разного рода неприятных моментов. Например, смартфоны с поддержкой ИИ способны узнать пользователя, когда он, скажем, надел (ну или снял) очки или сбрил/отрастил бороду.

Для сравнения: аналоги без ИИ в таком случае, скорее всего, сообщат, что лицо не распознано.

Еще одна сфера применения ИИ — бьютификация лица при создании селфи. Опять же: «улучшать» фотографии могут многие смартфоны и без ИИ, но в большинстве случаев результаты их усилий далеки от идеала.

Лица выходят белесыми и зачастую нереалистичными. За счет ИИ смартфоны могут бьютифицировать лица куда аккуратнее — фотографии получаются живыми, без потери важных деталей, но с коррекцией дефектов.

Технологии искусственного интеллекта вообще значительно упрощают жизнь тех, кто любит фотографировать на смартфон. Скажем прямо: далеко не каждый пользователь может самостоятельно выбрать правильные настройки для съемки заката, людей или еды.

В итоге человек делает снимок — и остается недоволен результатом. Если же он фотографирует на смартфон c поддержкой ИИ, то результат будет совершенно иным: устройство автоматически определит, что находится в кадре, и моментально подберет оптимальные настройки.

Кадр получится отличным.

Oppo F7 на базе Helio P60 автоматически выбирает настройки для сцены с помощью ИИ

Может ли искусственный интеллект (ИИ) улучшить производительность и энергоэффективность смартфона?

Технологии искусственного интеллекта — это важная составляющая современного смартфона. Но если прочие компоненты чипсета слабы, то никакой искусственный интеллект не сделает устройство на его основе производительным и удобным.

Без сомнений, чипсет вашего смартфона должен быть оснащен достаточно мощными процессорами. Например, на борту Helio P60 графический ускоритель ARM Mali-G72MP3 и восемь 64-битных вычислительных ядер; четыре — высокопроизводительные ARM Cortex-A73, еще четыре — экономичные ARM Cortex-A53. Все они изготовлены по техпроцессу 12-нм FinFET, что позволяет экономить энергию.

Но и этого недостаточно, ведь нужно обеспечить их грамотную и слаженную работу. Казалось бы, почему не использовать все эти возможности вместе, например, задействовать все ядра сразу, чтобы смартфон работал максимально быстро? Ответ достаточно прост — это негативно скажется на энергоэффективности.

Кому нужен очень быстрый смартфон, который работает без подзарядки полдня? Правильно, никому.

Важно, чтобы устройство правильно распределяло нагрузку и обеспечивало баланс производительности и потребления энергии. Это позволит смартфону работать быстро и долго, не перегреваясь. В случае с P60 за это отвечает технология MediaTek CorePilot 4.

0 — она позволяет использовать ядра в разных конфигурациях. Например, два вычислительных ядра из первого кластера, три — из второго и одно графическое.

Выбор конфигурации зависит от задачи, цели остаются теми же: решить ее а) максимально быстро, б) с минимальным расходом энергии и в) чтобы чипсет (и смартфон) не нагревался.

Все это, конечно, здорово, но это лишь теория; что с практикой? А практика теорию подтверждает. Посмотрите, как разные чипсеты, которые используются в смартфонах одной категории, справляются с несколькими задачами. Небольшой спойлер — Helio P60 лидирует.

Может показаться, что смартфоны с такими функциями всегда будут находиться в среднем или дорогом сегментах рынка. Но что делать, если не хочется тратить на устройство много денег? Производители смартфонов стремятся создавать качественные решения и в более дешевом сегменте. Но для этого им нужны доступные комплектующие, которые будут обеспечивать все те же передовые функции.

Таким решением может стать второй чипсет, о котором мы говорили выше, — MediaTek Helio P22.

Он ничем не уступает Helio P60 с точки зрения поддержки технологий искусственного интеллекта и обеспечения баланса между производительностью и энергоэффективностью (к слову, и техпроцесс здесь такой же – 12-нм FinFET).

Разумеется, конфигурация и производительность отличаются от P60. Несмотря на то, что мощность не такая высокая, ее все равно достаточно для современных игр и просмотра видео в высоком разрешении.

Примеры смартфонов с искусственным интеллектом (ИИ)

Напоследок приведем пару примеров смартфонов, которые не разочаруют вас своими функциями и приятно удивят с точки зрения цены. Первый смартфон — Oppo F7 на базе Helio P60. Кстати, смартфон уже несколько месяцев доступен в России, и его обзор вы можете прочесть на нашем сайте.

В этом смартфоне есть ряд функций на базе технологий искусственного интеллекта. Например, 25-мегапиксельная фронтальная камера смартфона способна улучшать снимки, используя ИИ, без перегибов и неточностей.

Распознавание лиц в случае Oppo F7 происходит моментально — оно осуществляется на основе 128 опорных точек.

При съемке на основную камеру смартфон способен распознавать такие объекты и сцены, как закат, растения, небо, снег, ночь, собаки, кошки, дети, пейзажи и не только — всего 16 вариантов.

Важно, что Oppo F7 не пасует в играх и работает долго — несмотря на мощные вычислительные ядра, графический ускоритель и огромный 6,23-дюймовый экран, два дня без подзарядки для него — не проблема.

Второй смартфон — Vivo Y81 на базе Helio P22. Это более доступное устройство, чем модель Oppo. Однако преимущества у Y81 аналогичные. Например, фронтальная камера, которая благодаря поддержке ИИ улучшает качество селфи, а также быстро и точно распознает лица.

В обозримом будущем на российском рынке будет появляться еще больше качественных устройств на базе технологий искусственного интеллекта. Некоторые из них будут более функциональными и дорогими, другие – простыми и доступными. Выбирайте то, что подходит именно вам, и не забывайте проверять характеристики смартфонов.

Понравилась публикация? Ставь лайк и подписывайся на наш канал, будем видеться чаще!

Источник: https://zen.yandex.ru/media/dgl_ru/pochemu-vam-nujen-smartfon-s-iskusstvennyi-intellektom--5ba24798c071d300ab5194ab

«Искусственный интеллект» в смартфонах — как это работает

Искусственный интеллект в камере вашего смартфона может распознавать лица, размывать фон, регулировать освещенность: как стать профи в фотографии

Гонку технологий нельзя закончить, но удивлять и привлекать потребителя числовыми характеристиками становится все сложнее. Поэтому за последние пару лет мы увидели немало экспериментов в дизайне и новых программных возможностей смартфонов.

Можно вспомнить всеми «любимые» вырезы в экранах, но, пожалуй, с конца 2017 года чаще всего приходится слышать словосочетание «искусственный интеллект».

То, что еще 10 лет назад жило в научных лабораториях, пять лет назад стало общедоступным через сервисы Google, сегодня в буквальном смысле появляется в наших карманах.

Наличие «искусственного интеллекта» стало модной и даже обязательной характеристикой любого актуального аппарата и порою удивляешься, как много привычных функций вдруг стали «умными». Впрочем, вендоров тут можно как поругать, так и понять, ведь ИИ — весьма широкое понятие, за которым не обязаны скрываться сложные алгоритмы.

Изображение из статьи про ИИ на vas3k.ru

На примере материалов из исследовательского центра Google (1, 2) мы знаем, что компания давно использует машинное обучение и нейронные сети в частности для совершенствования сервисов почты, обработки изображений, в ых ассистентах и переводчике. Интересно, что на смартфонах сценарии применения в целом схожи, но к ним добавляются функции безопасности и оптимизации работы, автономности устройств.

Облака VS устройства

Пользователи того же Gmail или Ассистента Google могут спросить — если на смартфонах уже есть подобные «умные» сервисы, то что изменилось за последний год? В первую очередь — часть функций теперь можно реализовать прямо на устройствах, не задействуя «облака».

Например, Google Фото и раньше распознавал людей на фотографиях, а также позволял совершать поиск по изображениям, но каталогизация фотографий происходила только после их загрузки на сервера компании.

С появлением чипсетов вроде Kirin 970 cо встроенным NPU-модулем (Neural Processing Unit) распознавание изображений можно реализовать прямо на устройстве, а значит — более быстро (не тратится время на загрузку-выгрузку данных) и безопасно (ваши фото точно никто не увидит, даже алгоритм на сервере).

Использование для этих задач специального модуля позволяет оптимизировать энергопотребление и скорость работы, ведь реализация подобной функциональности силами CPU и GPU возможна, но не эффективна.

Huawei первыми заявили об «умности» своих смартфонов, но не единственные, кто работает в этой области. После анонса Kirin 970 и Mate 10 (Pro) Apple представила платформу A11 Bionic со встроенным Neural Engine, а в Snapdragon 845 есть DSP Hexagon 685, ориентированный на решения тех же задач.

Сказать, чей ИИ лучше, даже в плане характеристик, сложно, ведь какого-то стандартного и независимого инструмента измерений пока не придумали, и на разных устройствах «интеллект» решает разные задачи.

Поэтому нет ничего удивительного в том, что когда Huawei измеряет производительность своего NPU по сравнению с решением от Qualcomm первый оказывается быстрее.

Но ничто не мешает как минимум ознакомиться с возможностями конкретного смартфона, которые задействуют ИИ-функциональность.

Ии для камер

«Искусственный интеллект» давно доказал свою эффективность в задачах распознавания изображений и вполне очевидно, что он применяется в камерах смартфонов.

В случае Huawei P20 Pro — это функциональность распознавания сцен.

Модуль NPU распознает порядка 2000 изображений в минуту, значит практически в режиме реального времени может опознать, что именно находится в кадре и подобрать максимально подходящие для конкретного сюжета настройки.

Что это дает? Обычно автоматика подбирает параметры съемки исходя из освещенности, контрастности сцены и прочих параметров. Распознавание объектов позволяет улучшить алгоритмы.

Для тех, кто понимает что такое ручные настройки, вполне очевидно, что снимая подвижный объект в первую очередь стоит задача получить резкий снимок, поэтому стоит уменьшить выдержку и можно поднять ISO немного пожертвовав качеством, а для съемки пейзажа или портрета нужен другой набор настроек.

Софт распознает сцену и подбирает лучшие параметры съемки или переключает камеру в нужный режим работы. Заодно может происходить пост-обработка фотографии — ПО повысит контрастность и насыщенность цветов, будто на фото уже наложен фильтр Instagram.

С точки зрения профессиональной фотографии такой снимок может показаться неправильным, но будем честны — в мобильной фотографии всегда были важны алгоритмы, чтобы фото отлично выглядело на экране и нравилось рядовому пользователю, а точность передачи цветов оставим DSLR-камерам.

Актуальные модели уже распознают порядка 20 сцен с набором дополнительных настроек в зависимости от конкретных условий съемки.

Набор сцен заранее «зашит» в ПО, производитель сам занимается первоначальным обучением нейронной сети (если используются именно сети), подбором фотографий для такого обучения и так далее.

В дальнейшем эту функциональность можно расширять с помощью классических обновлений ПО.

Использование ИИ не заканчивается на одном только распознавании сцен. Тот же P20 Pro может похвастаться «интеллектуальным» автофокусом и стабилизацией видео. Работа первого заметна в виде небольших квадратов, которые обозначают точки фокусировки на подвижных объектах, например, они появляются на качающихся от ветра растениях.

Второй задействуется для продвинутой стабилизации видео и работает в паре с оптическим стабилизатором — при съемке Full HD с рук можно получить плавную картинку при ходьбе, сравнимую с той, что дают отдельные стабилизаторы. Правда, без ограничений не обошлось — это работает только для съемки Full HD @30fps и не доступно для Full HD @60fps и 4K-видео.

Еще один пример работы ИИ — съемка замедленного видео (HD @960fps). Впервые функция появилась на смартфонах Sony и тестируя ее мы отмечали, что добиться желаемого результата сложно, нужно самому ловить момент, когда пора нажать на спуск, а камера замедляет всего секунду реального времени.

В Huawei P20 Pro изначально это работало таким же образом, но потом алгоритм изменили. Теперь пользователь включает нужный режим, наводит камеру и помещает специальный квадрат в область кадра, где ожидается движение.

После нажатия на спуск камера сама определяет, когда начнется движение в выделенной области и замедляет видео — так гораздо легче добиться желаемого результата.

Распознавание объектов позволило добавить каталогизацию в локальную галерею.

В ней появилась вкладка «Обзор», где фотографии сортируются в зависимости от места съемки, по лицам распознанных людей, а также категориям (в моем случае — еда, документы, пейзажи).

Тут же работает локальный поиск, он быстрый, но не настолько умный как в Google Photos, потому что работает только в рамках знакомых локальному ИИ параметров сцен, лиц и местоположений.

… для шоппинга

Применимость отдельных функций зависит от рынка. Например, привычный для Huawei сканер QR-кодов получил интеграцию с Amazon Assistant — приложение распознает товары и пытается найти похожие на одноименной торговой площадке. Пока он работает не слишком хорошо и мало применим у нас, но вдруг появится интеграция с более подходящим сервисом?

… для перевода

Еще один сценарий использования ИИ — распознавание речи и перевод. Мощности NPU в этом случае задействует переводчик Microsoft Translator.

Приложение может работать как обычный переводчик, переводить текст на фотографиях, отдельные фразы и даже работать «живым» переводчиком для группы из нескольких человек.

Без подключения к сети в данном случае работает только простейший перевод, а остальные, более сложные сценарии все же требуют наличия подключения к интернету.

… для безопасности

Среди областей применения «искусственного интеллекта» называют и безопасность, что в целом понятно.

В первую очередь это уже упомянутая обработка всех данных на устройстве, во вторую — Face Unlock, когда с помощью ИИ происходит распознавание лица пользователя.

Цифровой снимок (модель) лица пользователя при этом хранится в специальной зашифрованной области памяти, как и отпечатки пальцев.

… для производительности

В случае почти всего, что связано с изображениями, речь зачастую идет об уже «обученных» алгоритмах — без обновлений камера не станет лучше распознавать вашего кота или не перестанет путать его с собакой (что тоже случается). В то же время производители заявляют, что ИИ позволяет оптимизировать работу устройства для конкретного пользователя.

Запоминая типичные последовательности запуска приложений и строя зависимости от времени-места софт способен ускорять запуск отдельных программ в частности и оптимизировать работу смартфона в целом, что должно вылиться и стабильно хорошую скорость работы и позитивно сказаться на автономности.

Компании заявляют, что ИИ используется в том числе и в алгоритмах шумоподавления при телефонных разговорах и многих других аспектах. Единственное «но» — все это крайне сложно проверить на практике.

Что дальше?

Наличие «умных» функций «из коробки» улучшает пользовательский опыт, но речь идет только о первой волне внедрения ИИ в смартфоны. Следующий этап — использование потенциала платформы сторонними приложениями.

Хорошим тоном является наличие API для разработчиков и поддержка популярных библиотек вроде TensorFlow от Google и Сaffe от . Все это уже есть, осталось только дождаться приложений, которые покажут преимущества современных аппаратов.

Это могут быть как AR-игры, так и приложения для решения отдельных задач.

Примечательно и то, что в конце 2017 года ИИ встречался в единичных флагманах, а спустя год появляется в аппаратах среднего сегмента.

Например, Huawei P Smart+ лишен NPU, который есть во флагманах, но тоже является «умным» — компания смогла реализовать похожую функциональность силами отдельного DSP в новой SoC Kirin 710.

Камера быстро распознает сцены, самих сцен стало еще больше, при этом ИИ работает и для фронтальной камеры, и галерея точно также сортирует изображения по различным категориям.

Слухи о Kirin 980 говорят о том, что в новых флагманах мы увидим второе поколение встроенного NPU и он наверняка принесет новую функциональность. Какую именно — пока неизвестно, но то что ИИ превращается в еще одну важную функцию современных смартфонов, понятно уже сегодня.

Huawei рекомендует:

Материал подготовлен при поддержке Huawei

Источник: https://itc.ua/articles/iskusstvennyiy-intellekt-v-smartfonah/

Настройка камеры в Honor 10

Искусственный интеллект в камере вашего смартфона может распознавать лица, размывать фон, регулировать освещенность: как стать профи в фотографии

Множество людей при выборе нового смартфона особое внимание обращают на камеру устройства. Компания Honor знает об этом, поэтому старательно выпускает телефоны с упором на высокое качество при съемке. Honor 10 не стал исключением, покорив пользователей широким функционалом и возможностями камеры.

Характеристики камеры

Honor 10 оснащен двойной основной камерой с модулями на 16 Мп (цветной) и 24 Мп (монохромный) с двойной светодиодной вспышкой, равные диафрагмы f/1.8.  Система фокусировки 3 в 1: фазовый, глубинный и контрастный фокус.

Фронтальная камера имеет модуль 24 Мп, а также объектив диафрагмы f/2.  Светодиодная вспышка отсутствует.

В Honor 10 есть NPU (выделенный нейронный модуль), который успешно отвечает за создание фотографий с помощью искусственного интеллекта (ИИ). Наличие ИИ – главная фишка камеры в хонор 10.

Главным минусом является отсутствие оптической стабилизации, что крайне негативно сказывается в условиях недостаточной освещенности.

При съемке в дневное время суток с хорошим освещением этот факт никак себя не проявляет негативно, но в сумерках фото будет с размытием и заметными шумами.

Оптическая стабилизация служит для уменьшения смазывания, осуществляя съемку с рук (ведь практически невозможно зафиксировать смартфон так, чтоб он не двигался), а также для настройки нужной выдержки в непростых условиях.

В сумерках можно найти выход: понижать экспозицию, касаясь яркой области и уменьшая яркость с помощью ползунка. Благодаря танцам с бубнами и экспериментам можно выжать максимум даже без оптической стабилизации изображения.

Искусственный интеллект

Искусственный интеллект, имеющийся в Honor 10, распознает порядка 500 сцен в 22 категориях, при этом во всех случаях использует оптимальные настройки для каждой сцены, изменяя фотографию на свой лад.

Включить фотосъемку на базе искусственного интеллекта легко, отыскав специальную клавишу в главном меню камеры сверху (Al).

Искусственный интеллект способен помогать пользователю, решать конкретные задачи, оптимизируя цветопередачу снимка и применяя алгоритмы, а также настраивать камеру автоматически, без участия пользователя. Проще говоря, ИИ всю работу осуществляет за владельца, делая упор на высшее качество снимка.

Искусственный интеллект всегда старается сделать фотографии с максимально выраженным эффектом, добавляя насыщенность, теплые цвета и контрастность.

Данный факт переворачивает весь мир мобильной фотографии, поскольку до сих пор разработчики считали, что лучшие фотографии — те, которые выглядят максимально естественно.

 По этой причине многим пользователям тяжело привыкнуть к функции ИИ, считая, что искусственный интеллект совсем не улучшает изображение.

Производители позаботились о проблеме заранее, предоставляя каждому владельцу смартфона выбор: снимать на базе ИИ или выключить его. Кроме того, при использовании искусственного интеллекта в галерею сохраняются оба изображения: на базе ИИ и исходник.

Примеры изображений, где слева снято с помощью искусственного интеллекта, а справа — исходное фото.

Как видно, на большинстве фотографий ИИ просто осветляет изображение, меняя цвета. При этом трава становится неестественно зеленой, что отрицательно сказывается на снимке в целом.

Но стоит отметить, что при портретной съемке ИИ ведет себя значительно лучше: убирает неровности кожи, не смазывая фотографию, добавляет эффект боке, делает здоровее лицо и грамотно урезает изображение.

Функция с искусственным интеллектом отличается своим удобством благодаря автоматическому распознаванию сюжетов: еда, животные, люди, пейзаж, город, дети и т.д. Также ИИ распознает и отдельные предметы: кошки, тучи, небо, радуга, лужа и т.д.

Функции основной камеры

При наведении камеры на объект смартфон применяет обычную фазовую автоматическую фокусировку. Второй монохромный модуль (24 Мп) обеспечивает двукратный зум, при использовании которого качество изображения не портится.

Зум в хонор 10 является гибридным, поэтому он немного хуже работает, чем трехкратный оптический зум, но лучше цифрового. В любом случае фотографии получаются хорошими.

В настройках камеры Honor 10 есть множество функций и способов съемки, один из которых профессиональный (ручной) режим.

В режиме «Профи» пользователь может самостоятельно выставить нужную экспозицию, выдержку, параметр ISO, после этого навести камеру на объект съемки.  При ручном регулировании настроек можно добиться оптимального качества снимка. Но этим режимом можно пользоваться только при съемке основной камерой.

В смартфоне можно воспользоваться HDR-режимом (расширение динамического диапазона), например, когда освещение не позволяет сделать достойную фотографию. Проще говоря, телефон правильно определит и обработает цвета при съемке, начиная от самых светлых оттенков до глубоких темных.

Снимок без HDR и с HDR:

Режим HDR поможет пользователю в разных ситуациях.

Например, при съемке ярким солнечным днем, когда в автоматическом режиме смартфон добавляет много контраста, или в случае, когда на переднем плане темный объект (недостаточно освещен), а задний фон выглядит намного ярче.

Режим HDR положительно скажется на снимках и при съемке ночью. Нет, не в ночном режиме, когда без помощи штатива не обойтись, а использовав лишь только HDR и короткую выдержку. Отдельные кадры возможно и смажутся, но само изображение будет четким и качественным.

В настройках основной камеры Honor 10 можно отрегулировать разрешение, поставив 24 Мп, но в таком случае исчезнет возможность приближения (двукратного зума).

Таким образом, основным разрешением все-таки остается 16 Мп. Дополнительный же модуль (на 24 Мп) монохромный, что позволяет намного эффективнее обрабатывать оттенки, расширяя динамический диапазон.

Также можно настроить под себя и режим диафрагмы с диапазоном от F0,95 до F16. Обработка краев у объекта работает вполне сносно, а также при съемке в режиме диафрагмы можно накладывать эффекты и фильтры на задний фон.

Ночная съемка не так хорошая, как другие режимы, но имеет право на существование. Она отлично себя показывает, если есть возможность зафиксировать устройство, например, с помощью штатива. В обратном случае фотография неизбежно смажется, даже если пользователь совсем не будет двигаться. Альтернатива — режим HDR.

Кроме того, в Honor 10 множество и других возможностей при съемке. Например, режим художника, где можно фильтровать снимок до неузнаваемости (напоминает приложение Prisma), 3D-панорама, обычная панорама и т.д.

В целом, основная камера снимает превосходно при естественном свете, ночью — хуже.

Фронтальная камера

Фронтальная камера в Honor 10 имеет разрешение 24 Мп и диафрагму f/2.0. Искусственного интеллекта здесь нет, но есть многообразие других функций.

В режиме портретной съемки добавлен эффект боке (размытие заднего фона), который отлично справляется со своей работой.

В режиме портрета также есть эффекты украшения, которые убирающие неровности и делая более здоровым цвет лица. Главное, не переусердствовать. Стоит отметить, что украшение невозможно отключить в этом режиме, оно всегда будет включено. Если принципиально нужно отключить бьютификацию, то можно перейти в режим «Фото».

В портретном режиме же имеется и выбор освещения (вспышка-бабочка, разделенная вспышка и т.д.). Очень интересно выглядит на фото постановочное освещение:

Светодиодная вспышка отсутствует, но подсветка всё же есть (вспыхивание экрана светлым цветом). Причем если сравнить подсветку с более ранними моделями, то в Honor она безупречно работает при съемке, неприлично ярко освещая всё вокруг.

Фотографии не получаются замыленными или с пересветом. Детализация превосходная, особенно при хорошем естественном освещении.

В настройках есть свои функции:

Идеальное селфи включает режим украшений, таймер позволяет выбрать время, через которое произойдет съемка (2, 5 или 10 секунд). Функция аудиоконтроля направлена на управление голосом (например, словом «Cheese»). При съемке нажатием не обязательно нажать на специально выделенную кнопку, чтобы сфотографировать, можно просто нажать на сам экран.

Функция улыбки фиксирует улыбку, затем автоматически фотографирует, а если включить «Жест», то достаточно помахать в камеру для сохранения изображения.

В настройках фронтальной камеры тоже имеется панорама и режим «Художник», добавляющий различные фильтры на фото. Например:

Хотя, часть фильтров можно найти в режиме «Дополненная реальность»:

Выводы

В Honor 10 разработчики добавили хорошие камеры с большим разрешением, качественным гибридным зумом, искусственным интеллектом и большим функционалом.

Смартфон отлично снимает в автоматическом режиме, пользователь может достать устройство, сфотографировать даже с помощью горячих клавиш, после чего обратно убрать телефон.

В этом основная заслуга искусственного интеллекта, который самостоятельно выбирает нужную сцену, настраивая качество снимка.

Для обычного пользователя, не являющимся профессиональным фотографом, Honor 10 — отличный вариант. Быстрая фокусировка, точный баланс белого, правильные и насыщенные цвета. Этот смартфон справится с любой задачей, за исключением ночной съемки. Если пользователь хочет получить четкое изображение, то здесь не обойтись без штатива. ссылкой:

Новости партнёров и реклама

Источник: https://infohuawei.com/razbor-voprosov/nastrojka-kamery-v-honor-10/

Бизнес
Добавить комментарий

;-) :| :x :twisted: :smile: :shock: :sad: :roll: :razz: :oops: :o :mrgreen: :lol: :idea: :grin: :evil: :cry: :cool: :arrow: :???: :?: :!: