Test aparatu Vivo X80 Pro (MediaTek).

W celu oceny i analizy inżynierowie SBMARK przechwytują i oceniają ponad 2,600 obrazów testowych zarówno w kontrolowanych środowiskach laboratoryjnych, jak i na zewnątrz, w pomieszczeniach i przy słabym oświetleniu, korzystając z ustawień kamery. Protokół fotograficzny został zaprojektowany tak, aby uwzględniał główne przypadki użycia i opiera się na typowych scenariuszach fotografowania, takich jak fotografia portretowa, rodzinna i krajobrazowa. Oceny dokonuje się poprzez wizualną kontrolę obrazów Cons jako odniesienia do sceny naturalnej oraz poprzez wykonanie obiektywnych pomiarów na wykresach uzyskanych w laboratorium w różnych warunkach oświetleniowych od 1 do 1,000+ luksów i temperaturach barwowych od 2,300 K do 6,500 K.

Ekspozycja i kolor to kluczowe atrybuty technicznie dobrych zdjęć. W przypadku ekspozycji głównym ocenianym atrybutem jest jasność głównego obiektu w różnych przypadkach użycia, takich jak krajobraz, portret lub martwa natura. Inne oceniane czynniki to kontrast i zakres dynamiki, np. zdolność do uwidocznienia szczegółów w jasnych i ciemnych obszarach obrazu. Powtarzalność jest również ważna, ponieważ pokazuje zdolność aparatu do zapewnienia tego samego renderowania podczas robienia wielu zdjęć tej samej sceny.
W przypadku kolorów analizowane atrybuty jakości obrazu to oddawanie odcienia skóry, balans bieli, cieniowanie kolorów i powtarzalność. Jeśli chodzi o odwzorowanie kolorów i odcień skóry, karzemy nienaturalne kolory, ale szanujemy wybór sygnatury kolorystycznej producenta.

Testy tekstur analizują poziom szczegółowości i tekstury obiektów na zdjęciach wykonanych w laboratorium, a także w rzeczywistych scenariuszach. W przypadku naturalnych ujęć szczególną uwagę zwraca się na poziom szczegółowości jasnych i ciemnych obszarów obrazu. Obiektywne pomiary wykonywane są na obrazach map wykonanych w różnych warunkach oświetleniowych od 1 do 1000 luksów iw różnych typach warunków dynamicznych. Stosowane wykresy to zastrzeżony wykres SBMARK (DMC) i wykres Dead Leaves.

Testy szumów analizują różne atrybuty szumów, takie jak intensywność, chromatyczność, ziarnistość, tekstura na rzeczywistych obrazach i wykresach wykonanych w laboratorium. W przypadku zdjęć naturalnych szczególną uwagę zwraca się na szumy na twarzach i krajobrazach, a także ciemne obszary i warunki o wysokim zakresie dynamicznym. Hałas poruszających się obiektów jest również oceniany na naturalnych obrazach. Obiektywne pomiary są wykonywane na obrazach wykresów rejestrowanych w różnych warunkach od 1 do 1000 luksów i różnych typach warunków zakresu dynamicznego. Zastosowany wykres to wykres martwych liści i znormalizowany pomiar, taki jak szum wizualny, pochodzący z ISO 15739.

Ocena artefaktów bada cieniowanie soczewek, aberracje chromatyczne, zniekształcenia geometryczne, dzwoniące krawędzie, aureole, zjawy, kwantyzację, nieoczekiwane zmiany tonacji kolorów, a także inne rodzaje możliwych efektów nienaturalnych na zdjęciach. Im poważniejszy i częstszy artefakt, tym większe odejmowanie punktów od wyniku. Główne zaobserwowane artefakty i związana z nimi utrata punktów wymieniono poniżej.

Bokeh jest testowany w dedykowanym trybie, zazwyczaj portretowym lub trybie przysłony, i analizowany poprzez wizualną kontrolę wszystkich zdjęć wykonanych w warunkach laboratoryjnych i naturalnych. Celem jest odtworzenie fotografii portretowej porównywalnej z fotografią wykonaną lustrzanką cyfrową i szerokim otworem względnym. Główne atrybuty jakości obrazu, na które zwrócono uwagę, to oszacowanie głębi, artefakty, gradient rozmycia i kształt odbłyśnika rozmycia bokeh. Uwzględniane są również atrybuty jakości obrazu w pionie (ekspozycja, kolor, tekstura).

Testy podglądu analizują jakość obrazu podglądu obrazu aplikacji aparatu, ze szczególnym uwzględnieniem różnicy między przechwyceniem a podglądem, zwłaszcza w odniesieniu do zakresu dynamicznego i zastosowania efektu bokeh. Oceniana jest również jednolitość ekspozycji, dostosowanie koloru i ostrości podczas zmiany powiększenia od minimalnego do maksymalnego dostępnego współczynnika powiększenia. Częstotliwość klatek podglądu jest mierzona za pomocą diody LED uniwersalnego timera.

Inżynierowie SBMARK przechwytują i oceniają ponad 400 obrazów testowych w kontrolowanych warunkach laboratoryjnych oraz naturalnych scenach zewnętrznych, wewnętrznych i przy słabym oświetleniu, korzystając z ustawień aparatu i zoomu szczyptowego przy różnych współczynnikach powiększenia, od bardzo szerokiego do bardzo długiego zoomu. Ocenę przeprowadza się poprzez wizualną kontrolę obrazów z naturalnym odniesieniem do sceny oraz wykonanie obiektywnych pomiarów obrazów map wykonanych w laboratorium w różnych warunkach od 20 do 1000 luksów i temperaturach barwowych od 2300 K do 6500 K.

Testy te analizują działanie ultraszerokokątnego aparatu przy różnych ogniskowych od 12 mm do 20 mm. Oceniane są wszystkie atrybuty jakości obrazu, ze szczególnym uwzględnieniem artefaktów, takich jak aberracje chromatyczne, miękkość obiektywu i zniekształcenia. Poniższe obrazy są fragmentami testowanych scen.

Wszystkie atrybuty jakości obrazu są oceniane przy ogniskowych od około 40 mm do 300 mm, z naciskiem na teksturę i szczegóły. Wynik pochodzi z serii obiektywnych pomiarów laboratoryjnych i percepcyjnej analizy rzeczywistych obrazów.

Inżynierowie SBMARK rejestrują i oceniają ponad 2.5 godziny materiału wideo w kontrolowanych warunkach laboratoryjnych i przy słabym oświetleniu naturalnym, w pomieszczeniach i na zewnątrz, korzystając z domyślnych ustawień aparatu. Ocena polega na wizualnej kontroli naturalnego materiału wideo zarejestrowanego w różnych warunkach i przeprowadzeniu obiektywnych pomiarów na zarejestrowanym w laboratorium wykresie wideo w różnych warunkach od 1 do ponad 1000 luksów i temperaturach barwowych od 2,300 K do 6,500 K.

Testy ekspozycji oceniają jasność głównego obiektu i zakres dynamiczny, np. możliwość uwidocznienia szczegółów w jasnych i ciemnych obszarach obrazu. Analizowana jest również stabilność i czasowa adaptacja ekspozycji.
Analiza kolorów jakości obrazu bada oddawanie kolorów, oddawanie odcieni skóry, balans bieli, cieniowanie kolorów, stabilność balansu bieli i jego adaptację przy zmianie światła.

Testy tekstur analizują poziom szczegółowości i tekstury rzeczywistych filmów, a także filmów graficznych nagranych w laboratorium. Naturalne nagrania wideo są oceniane wizualnie, ze szczególnym uwzględnieniem poziomu szczegółowości w jasnych i ciemnych obszarach. Przeprowadzane są obiektywne pomiary obrazów kart wykonanych w różnych warunkach od 1 do 1000 luksów. Stosowane wykresy to wykres SBMARK (DMC) i wykres martwych liści.

Testy szumów analizują różne atrybuty szumu, takie jak intensywność, chromatyczność, ziarnistość, tekstura, aspekty czasowe w rzeczywistych nagraniach wideo, a także wykresy wideo wykonane w laboratorium. Naturalne filmy są oceniane wizualnie, z naciskiem na szumy w ciemnych obszarach i warunki o wysokim zakresie dynamicznym. Obiektywne pomiary są wykonywane na wykresach wideo zarejestrowanych w różnych warunkach od 1 do 1000 luksów. Stosowanym wykresem jest wykres szumu wizualnego SBMARK.

Ocena stabilizacji sprawdza zdolność urządzenia do stabilizacji materiału filmowego przy użyciu oprogramowania lub technologii sprzętowych, takich jak OIS, EIS lub innych środków. Ocena dotyczy ruchu szczątkowego, płynności, żółtych artefaktów i szczątkowego rozmycia ruchu podczas chodzenia i biegania w różnych warunkach oświetleniowych. Poniższy film to fragment jednej z testowanych scen.

Artefakty są oceniane za pomocą pomiarów MTF i dzwonienia na wykresie SFR w laboratorium, a także pomiarów liczby klatek na sekundę za pomocą diody LED uniwersalnego timera. Naturalne filmy wideo są oceniane wizualnie, zwracając szczególną uwagę na takie artefakty, jak między innymi aliasing, kwantyzacja, blokowanie i zmiana wysokości tonu. Im poważniejszy i częstszy artefakt, tym więcej punktów zostanie odjętych od wyniku. Poniżej wymieniono główne artefakty i odpowiadającą im utratę punktów.