Sztuczna inteligencja usunie błędy z matryc w smartfonach. W końcu ktoś na to wpadł!

Kto nigdy nie widział martwych pikseli na zdjęciach ze swojego aparatu, niech pierwszy rzuci kamieniem. To normalne zjawisko, które z czasem zaczyna występować w sensorach. Tak samo jak gorące piksele. O ile w aparatach ten problem rozwiązano już dawno, to w smartfonach nie. Samsung pokazał swoją propozycję.

Sztuczna inteligencja usunie błędy z matryc w smartfonach. W końcu ktoś na to wpadł! 1
Źródło zdjęć: © © Miron Nurski
Marcin Watemborski

Zacznijmy od definicji kilku słów. Martwe piksele to pojedyncze piksele lub ich zlepki, które nie mają sygnału – innymi słowy nie wyświetlają obrazu. Na końcowym zdjęciu będą one po prostu czarne. Odwrotnością są gorące piksele. Te wyświetlają się w różnych kolorach i są na nich zablokowane – przykładowo na zdjęciu będziecie mieli świecący na zielono punkcik. Może też być on biały, niebieski, różowy, czerwony lub inny w zależności, co się zepsuło.

Powyższe problemy zostały rozwiązane przez twórców konwencjonalnych aparatów cyfrowych przez mapowanie matryc. Oznacza to, że za pośrednictwem specjalnego oprogramowania, wykrywane są problemy i cyfrowo naprawiane. Działa to tak, że algorytm nakazuje na końcowym zdjęciu zastąpić wadliwy piksel wartością z sąsiadującego i dobrze działającego piksela.

Sztuczna inteligencja usunie błędy z matryc w smartfonach. W końcu ktoś na to wpadł! 2
Po lewej stronie widać obraz testowy. Po prawej ten sam lecz z symulacją błędnych pikseli na matrycy w układzie Bayera przed mozaikowaniem.

W przypadku zdjęć realizowanych z bardzo długimi czasami otwarcia migawki, występują artefakty w postaci różnych gorących punktów. Najprościej mówiąc – zdjęcie będzie zaszumione kolorowymi pikselami ze względu na nagrzewanie się matrycy. Jest to oczywiście najbardziej widoczne w ciemnych partiach obrazu. W konwencjonalnych aparatach usuwa się je w postprodukcji, nakładając na końcowe zdjęcie, fotografię wykonaną z takimi samymi parametrami i zakrytym obiektywem, by wyodrębnić artefakty.

Czas przejść do rozwiązań fotografii mobilnej, a właściwie obliczeniowej. Samsung postanowił wziąć się za problemy związane z niedoskonałością sensorów i błędami pikseli. Bez względu na to, czy mówimy o martwych czy gorących pikselach, sztuczna inteligencja Samsunga oparta na sieci neuronowej będzie usuwała wspomniane artefakty.

Sztuczna inteligencja usunie błędy z matryc w smartfonach. W końcu ktoś na to wpadł! 3
(a) - na czerwono zaznaczono brakujące piksele. (b) - mapa przedstawia potencjalnie uszkodzone piksele. (c) - wybrane piksele do korekcji na bazie algorytmu

Według technicznego opisu producenta smartfonów, ich rozwiązanie nie będzie rozmazywało zdjęć, tylko wykrywało, w którym miejscu zdjęcia wystąpił błąd i później maskowało go. Przypomina to zautomatyzowane usuwanie zbliżone do tego, które znamy z "pędzla korygującego" w Adobe Photoshop.

Źródło artykułu: WP Fotoblogia

Wybrane dla Ciebie

Gang fok przegania rekina. U wybrzeży Afryki foki dały popis współpracy
Gang fok przegania rekina. U wybrzeży Afryki foki dały popis współpracy
Nie uwierzysz na co patrzysz. Polacy w ścisłej czołówce takich zdjęć
Nie uwierzysz na co patrzysz. Polacy w ścisłej czołówce takich zdjęć
Niesamowity kadr przedstawiający pradawny gatunek skorupiaka wygrał prestiżowy konkurs
Niesamowity kadr przedstawiający pradawny gatunek skorupiaka wygrał prestiżowy konkurs
Ekstremalnie rzadki aparat został sprzedany za 3,5 mln euro. Wyprodukowano go 100 lat temu
Ekstremalnie rzadki aparat został sprzedany za 3,5 mln euro. Wyprodukowano go 100 lat temu
Kary za zdjęcia dzieci. Konsekwencje dla rodziców we Francji
Kary za zdjęcia dzieci. Konsekwencje dla rodziców we Francji
Rekin gonił cień drona. Zachowywał się, jak kot goniący zajączka
Rekin gonił cień drona. Zachowywał się, jak kot goniący zajączka
Brutalny atak jelenia na zdjęciu. Fotograf przestrzega turystów
Brutalny atak jelenia na zdjęciu. Fotograf przestrzega turystów
Widziałeś film z Hanksem? Aktor ostrzega przed oszustwem
Widziałeś film z Hanksem? Aktor ostrzega przed oszustwem
Perseidy, Droga Mleczna i świecące glony naraz. Oto zdjęcie jedno na milion
Perseidy, Droga Mleczna i świecące glony naraz. Oto zdjęcie jedno na milion
Meta wykorzystała publiczne zdjęcia z Facebooka i Instagrama do trenowania AI
Meta wykorzystała publiczne zdjęcia z Facebooka i Instagrama do trenowania AI
Prawdziwy skarb fotograficzny. Te zabytkowe aparaty nie zrobiły ani jednego zdjęcia
Prawdziwy skarb fotograficzny. Te zabytkowe aparaty nie zrobiły ani jednego zdjęcia
Tragedia podczas wycieczki. Kobieta spadła z urwiska robiąc selfie
Tragedia podczas wycieczki. Kobieta spadła z urwiska robiąc selfie