Головна » Технології / Новини ІТ » RhythmNet використовує штучний інтелект для вимірювання пульсу по обличчю

Носимий монітор серцевого ритму вже звична річ. Але як щодо системи, яка здатна оцінювати серцебиття людини по обличчю? Китайський алгоритм RhythmNet, використовує штучний інтелект і фотоплетизмографію (PPG) – оптичний метод, який виявляє зміни кількості крові в тканинах шкіри.



Як пояснюють дослідники, цей метод став можливим завдяки тому, що поглинання світла шкірою періодично змінюється в залежності від пульсу. Хромосоми, такі як гемоглобін, в мікросудинних шарах дерми і підшкірного шару поглинають непропорційну кількість світла. Тож крихітні зміни кольору відбуваються, коли кров прокачує нижні вени і артерії. Вони невидимі для людського ока, але їх можна легко виявити за допомогою датчиків RGB, таких що вбудовані в носимі пристрої.

RhythmNet вимірює пульс по обличчю

Xiaomi Mi Smart Band 4

В чому суть алгоритму RhythmNet

Для навчання RhythmNet команда створила великомасштабний мультимодальний корпус – VIPL-HR1, який доступний з відкритим вихідним кодом. Він містить 2378 відео у видимому світлі і 752 відео в ближньому інфрачервоному діапазоні. Кожне відео було знято за допомогою комбінації веб-камер і інфрачервоних датчиків та смартфонів. Вони містять зміни в рухах голови, позах голови, освітленості і використання пристрою.

RhythmNet складається з декількох компонентів, в тому числі детектора особи, який локалізує до 80 осіб з урахуванням відео обличчя людини. Окремий компонент виконує вирівнювання і сегментацію шкіри для видалення областей очей й інших непотрібних областей. Потім генерує просторово-тимчасові карти з відеокадрів з інтервалом в 0.5 с для подання сигналів серцевого ритму. Карти подаються в модель машинного навчання, підготовлену для прогнозування частоти серцевих скорочень за просторово-тимчасовими картками, після чого розрахункові удари за хвилину обчислюються як середнє значення всіх розрахункових показників з окремих відео.

Дослідники оцінили свою систему на двох широко використовуваних базах даних в MAHNOB-HCI і MMSE-HR, а також на своїх власних. Вони повідомляють, що для більшості зразків (71%), протестованих на VIPL-HR1, RhythmNet досяг помилки менше 5 ударів за хвилину і що вона добре корелювала з істинною величиною від 47 до 147 ударів за хвилину. Крім того, вони кажуть, що частота помилок на MAHNOB-HCI і MMSE-HR не перевищувала 8.28 ударів за хвилину, перевершуючи попередню роботу, з якої порівнювалася модель.

Команда каже, що планує дослідити ефективність свого підходу для інших завдань вимірювання фізіологічного статусу, таких як частота дихання і вимірювання артеріального тиску. Вона також сподівається розробити більш надійну модель оцінки серцевого ритму, яка використовує методи розподіленого і багатозадачного навчання.

Поділитися:

Новини партнерів

Правила коментування

Вітаємо Вас на сайті Pingvin Pro. Ми докладаємо всіх зусиль, аби переконатися, що коментарі наших статей вільні від тролінгу, спаму та образ. Саме тому, на нашому сайті включена премодерація коментарів. Будь ласка, ознайомтеся з кількома правилами коментування.

  1. Перш за все, коментування відбувається через сторонній сервіс Disqus. Модератори сайту не несуть відповідальність за дії сервісу.
  2. На сайті ввімкнена премодерація. Тому ваш коментар може з’явитися не одразу. Нам теж інколи треба спати.
  3. Будьте ввічливими – ми не заохочуємо на сайті грубість та образи. Пам’ятайте, що слова мають вплив на людей! Саме тому, модератори сайту залишають за собою право не публікувати той чи інший коментар.
  4. Будь-які образи, відкриті чи завуальовані, у бік команди сайту, конкретного автора чи інших коментаторів, одразу видаляються. Агресивний коментатор може бути забанений без попереджень і пояснень з боку адміністрації сайту.
  5. Якщо вас забанили – на це були причини. Ми не пояснюємо причин ані тут, ані через інші канали зв’язку з редакторами сайту.
  6. Коментарі, які містять посилання на сторонні сайти чи ресурси можуть бути видалені без попереджень. Ми не рекламний майданчик для інших ресурсів.
  7. Якщо Ви виявили коментар, який порушує правила нашого сайту, обов’язково позначте його як спам – модератори цінують Вашу підтримку.

Яким месенджером Ви користуєтесь найчастіше?

Переглянути результати

E-mail розсилка Pingvin Pro

Якщо Ви хочете отримувати статті по e-mail, пропонуємо підписатися на нашу електронну розсилку. Просто введіть свій e-mail нижче та натисніть кнопку «Підписатися».

Схожі новини

Новини ІТ

В США підготували план захисту від китайського Інтернету

Заборона TikTok була лише верхівкою айсберга. Держсекретар Майк Помпео оголосив про нову ініціативу «Чиста мережа», націлену на блокування великих ділянок китайського Інтернету з США. Читайте Pingvin Pro у «Новини Google» Apple може втратити понад 500 тис. користувачів у Китаї Дональд Трамп видав розпорядження на блокування TikTok та WeChat В Україні планують побудувати дата-центр потужністю 1 ГВт […]


Новини ІТ

Apple може втратити понад 500 тис. користувачів у Китаї

У четвер ввечері, 6 серпня, Президент США Дональд Трамп видав указ на заборону китайських мобільних застосунків TikTok (ByteDance) та WeChat (Tencent). Будь-якій американській компанії заборонено вести будь-які справи з ними чи їхніми материнськими компаніями. Заборона починає діяти за 45 днів. Після цієї дати, якщо будь-яка компанія вестиме справи із ними, то може отримати штраф і […]


Новини партнерів