Google оптимізувала алгоритми обробки зображень людей всіх рас

68

Google нагадала про одну історично сформовану проблему, яка дозволяла говорити про расову нерівність: багато технологій зйомки і подальшої автоматичної обробки зображень працювали неоднаково зі знімками людей різних рас. З виходом смартфонів серії pixel 6 компанія спробувала вирішити цю проблему.

Джерело: blog.google

Якщо алгоритми обробки зображень не тестуються за участю представників різних рас, то вони можуть не спрацьовувати належним чином, надмірно освітлюючи зображення людей або неприродно знебарвлюючи їх шкіру. Щоб виправити ситуацію, компанія вирішила не обмежуватися тільки власною командою і залучила до роботи відомих фахівців з багатим досвідом у зйомці людей різних рас і подальшій обробці їх знімків. За участю цих фахівців google значно збільшила число знімків в базі для навчання штучного інтелекту в додатку камери. Набір оптимізованих алгоритмів розпізнавання осіб, зйомки і редагування зображень отримав назву real tone.

Компанія перерахувала ключові зміни, які отримали смартфони pixel 6 для зйомки і оптимізації зображення представників різних рас.

  • у цифровій фотографії отримання якісного портрета залежить від здатності камери визначати обличчя. Для поліпшення роботи цієї функції у вихідному наборі зображень було підвищено різноманітність осіб і умов освітлення.
  • сторонні консультанти допомогли розробникам прийняти більш правильні рішення в передачі нюансів кольору шкіри представників різних рас. В результаті покращилася робота алгоритму автоматичного коригування балансу білого.
  • оптимізовані алгоритми виставлення автоматичної експозиції. Експерти допомогли інженерам компанії встановити налаштування камери таким чином, щоб вона показала людину будь — якої раси такою, якою вона є-без неприродного збільшення або зменшення яскравості.
  • проблемою колишніх алгоритмів була неприродна передача кольору шкіри в умовах розсіяного освітлення. Новий алгоритм зменшує вплив цього ефекту на кінцевий результат.
  • ще однією складністю була виникає при певних умовах розмитість зображень людей з темним кольором шкіри. Google задіяла нові можливості чіпа tensor, щоб зробити знімки більш різкими за рахунок контролю руху навіть в умовах низької освітленості.

Джерело: store.google.com

Першими відгуки на оптимізовані алгоритми обробки зображення надали власні співробітники google. Вони високо оцінили передачу тонів кольору шкіри, яскравість, глибину і деталізацію знімків, назвавши pixel 6 кращим для зйомки представників різних рас — навіть коли їх опитували, не уточнюючи моделі телефону, а пропонуючи тільки знімки.

У співпраці з експертами компанія оптимізувала не тільки алгоритми роботи камер в нових смартфонах, але і скоригувала роботу існуючих програмних продуктів. Оновилася функція автоматичного поліпшення знімків в google photos-в найближчі тижні вона буде доступна в додатку під android і ios. Крім того, нещодавно було додано автоматичне регулювання освітлення у відеозв’язку google meet.