Jakość analizy

Testy i wyniki MealScan

Aplikacja jest sprawdzana na realnych przykładach posiłków, aby ocenić, jak dobrze szacuje kalorie i wartości odżywcze na podstawie zdjęcia.

Aktualny wynik

Dokładność analizy

Obecne testy wskazują dokładność na poziomie 91%.

Średni błąd / odchylenie od rzeczywistych wartości kalorii dla testów bez wprowadzania danych opcjonalnych wynosił 9%, stąd dokładność na poziomie 91%. Dokładność w testach z wprowadzonymi danymi opcjonalnymi (wielkość porcji, sposób przygotowania) sięga 96%.

91%

Metodyka

Jak liczymy wynik?

W testach porównujemy wartości zwracane przez aplikację z wartościami referencyjnymi. Szacowane są nie tylko kalorie, ale też podstawowe makroskładniki: białko, tłuszcze i węglowodany.

1. Wartość referencyjna

Najpierw ustalana jest możliwie wiarygodna wartość kalorii i makroskładników posiłku.

2. Trzykrotna analiza

Algorytm otrzymuje to samo zdjęcie 3 razy, aby sprawdzić wynik i jego powtarzalność.

3. Porównanie błędu

Wyniki aplikacji są porównywane z wartościami referencyjnymi dla kalorii, białka, tłuszczów i węglowodanów.

O testach

Testy MealScan polegają na analizie tych samych zdjęć posiłków i porównywaniu wyników z wartościami uznanymi za referencyjne. Dla każdego zdjęcia aplikacja szacuje kalorie, białko, tłuszcze oraz węglowodany.

Każde zdjęcie jest analizowane kilkukrotnie - obecnie 3 razy. Dzięki temu sprawdzana jest nie tylko sama dokładność wyniku, ale również powtarzalność działania algorytmu, czyli to, czy dla tego samego wejścia aplikacja zwraca zbliżone rezultaty.

Zdjęcia w testach są dodatkowo klasyfikowane według jakości wejścia. Ma to znaczenie, ponieważ dokładność analizy zależy od tego, jak dobrze widoczny jest posiłek i jego składniki.

Jakość zdjęcia	Opis
Wzorowe	Zdjęcie w dobrej jakości, obejmuje cały posiłek, a większość składników jest dobrze rozróżnialna.
Dobre	Zdjęcie w dobrej jakości, obejmuje cały posiłek, ale niektóre składniki mogą być nierozróżnialne.
Dostateczne	Zdjęcie dobrej jakości, obejmuje posiłek, ale ze względu na konsystencję lub formę dania ciężko wyróżnić większość albo część składników, np. zupa lub makaron w sosie.

Plik z wynikami: szczegółowe dane testowe można pobrać tutaj: pobierz testy.zip.

Ważne: dokładność zależy od jakości zdjęcia, widoczności składników, wielkości porcji, sosów, oleju i sposobu przygotowania. Wyniki aplikacji należy traktować jako orientacyjne.