Pulse: odczytaj tętno ze swojej twarzy

Sygnał demo: włącz kamerę, by odczytać swój

Jak to działa

Notatki techniczne · monitor rPPG Pulse

Odczytaj tętno ze swojej twarzy: każde uderzenie serca wpycha do skóry trochę więcej krwi. Krew pochłania zielone światło, więc kolor skóry zmienia się o ok. 0,1–1 %. W jednym pikselu tego nie widać, w średniej z tysięcy pikseli skóry już tak. Metoda nazywa się fotopletyzmografia zdalna (rPPG).

  1. Kamera30 kl./s
  2. Skóra3 fragmenty
  3. Kolorśrednia R, G, B
  4. POSsygnał tętna
  5. Filtr42–192 ud./min
  6. Widmoostatnie 12 s
  7. Tętnoud./min

1 Twarz

MediaPipe Face Landmarker znajduje w każdej klatce 478 punktów twarzy. Trzy fragmenty leżą na czole i obu policzkach (zielone ramki). Liczą się tylko piksele w kolorze skóry. Model działa w przeglądarce (WebAssembly i GPU).

2 Kolor

Dla każdej klatki: średnia czerwień, zieleń i niebieski z fragmentów. Wartości są przeliczane na dokładnie 30 na sekundę.

3 POS

Metoda Wanga i in., 2017. W oknach 1,6 s każdy kolor jest dzielony przez swoją średnią, potem:

S1 = G − B S2 = G + B − 2R h = S1 + (sd S1 / sd S2) · S2

Zmiany jasności i drobne ruchy się znoszą, tętno zostaje.

4 Filtr

Filtr pasmowy Butterwortha 4. rzędu, 0,7–3,2 Hz (42–192 ud./min). Wynik to zielona krzywa PLETH.

5 Tętno

Widmo Fouriera z ostatnich 12 s, od 40 do 200 ud./min co 0,5. Najwyższy szczyt to tętno; ekran pokazuje medianę z 5 ostatnich wartości. Widmo na żywo:

6 Uderzenia

Szczyty krzywej PLETH, co najmniej 0,33 s od siebie (kreska nad krzywą; pikanie, jeśli jest włączone).

7 Jakość sygnału

SNR w dB: moc przy tętnie i przy 2× tętnie (± 6 ud./min) wobec reszty widma. Poniżej −4 dB liczba się nie pokazuje.

8 Oddech

Kanał zielony, filtr 0,1–0,6 Hz (6–36 oddechów na minutę): żółta krzywa RESP. Wynik z widma ostatnich 30 s; potrzeba 20 s sygnału.

9 Pomiar 30 s

Mediana z 30 s dobrych odczytów; zakres = od 10. do 90. percentyla.

Dla dobrego odczytu

  • Jasne, równe światło z przodu.
  • Nie ruszaj się i nie mów.
  • Niektóre lampy LED migoczą: spróbuj innego światła.
  • Poczekaj 10 s: kamera ustawia ekspozycję i balans bieli.

Dokładność i prywatność

Przy dobrym świetle błąd to kilka ud./min; przy ruchu albo słabym świetle wynik może być zły. To nie jest wyrób medyczny. Obraz jest przetwarzany w tej przeglądarce: nic nie jest zapisywane ani wysyłane.

Więcej do czytania