Sztuczna inteligencja usunie błędy z matryc w smartfonach. W końcu ktoś na to wpadł!

Sztuczna inteligencja usunie błędy z matryc w smartfonach. W końcu ktoś na to wpadł!30.03.2021 10:05
Źródło zdjęć: © © Miron Nurski

Kto nigdy nie widział martwych pikseli na zdjęciach ze swojego aparatu, niech pierwszy rzuci kamieniem. To normalne zjawisko, które z czasem zaczyna występować w sensorach. Tak samo jak gorące piksele. O ile w aparatach ten problem rozwiązano już dawno, to w smartfonach nie. Samsung pokazał swoją propozycję.

Zacznijmy od definicji kilku słów. Martwe piksele to pojedyncze piksele lub ich zlepki, które nie mają sygnału – innymi słowy nie wyświetlają obrazu. Na końcowym zdjęciu będą one po prostu czarne. Odwrotnością są gorące piksele. Te wyświetlają się w różnych kolorach i są na nich zablokowane – przykładowo na zdjęciu będziecie mieli świecący na zielono punkcik. Może też być on biały, niebieski, różowy, czerwony lub inny w zależności, co się zepsuło.

Powyższe problemy zostały rozwiązane przez twórców konwencjonalnych aparatów cyfrowych przez mapowanie matryc. Oznacza to, że za pośrednictwem specjalnego oprogramowania, wykrywane są problemy i cyfrowo naprawiane. Działa to tak, że algorytm nakazuje na końcowym zdjęciu zastąpić wadliwy piksel wartością z sąsiadującego i dobrze działającego piksela.

Po lewej stronie widać obraz testowy. Po prawej ten sam lecz z symulacją błędnych pikseli na matrycy w układzie Bayera przed mozaikowaniem.
Po lewej stronie widać obraz testowy. Po prawej ten sam lecz z symulacją błędnych pikseli na matrycy w układzie Bayera przed mozaikowaniem.

W przypadku zdjęć realizowanych z bardzo długimi czasami otwarcia migawki, występują artefakty w postaci różnych gorących punktów. Najprościej mówiąc – zdjęcie będzie zaszumione kolorowymi pikselami ze względu na nagrzewanie się matrycy. Jest to oczywiście najbardziej widoczne w ciemnych partiach obrazu. W konwencjonalnych aparatach usuwa się je w postprodukcji, nakładając na końcowe zdjęcie, fotografię wykonaną z takimi samymi parametrami i zakrytym obiektywem, by wyodrębnić artefakty.

Czas przejść do rozwiązań fotografii mobilnej, a właściwie obliczeniowej. Samsung postanowił wziąć się za problemy związane z niedoskonałością sensorów i błędami pikseli. Bez względu na to, czy mówimy o martwych czy gorących pikselach, sztuczna inteligencja Samsunga oparta na sieci neuronowej będzie usuwała wspomniane artefakty.

(a) - na czerwono zaznaczono brakujące piksele. (b) - mapa przedstawia potencjalnie uszkodzone piksele. (c) - wybrane piksele do korekcji na bazie algorytmu
(a) - na czerwono zaznaczono brakujące piksele. (b) - mapa przedstawia potencjalnie uszkodzone piksele. (c) - wybrane piksele do korekcji na bazie algorytmu

Według technicznego opisu producenta smartfonów, ich rozwiązanie nie będzie rozmazywało zdjęć, tylko wykrywało, w którym miejscu zdjęcia wystąpił błąd i później maskowało go. Przypomina to zautomatyzowane usuwanie zbliżone do tego, które znamy z "pędzla korygującego" w Adobe Photoshop.

Szanowna Użytkowniczko! Szanowny Użytkowniku!
×
Aby dalej móc dostarczać coraz lepsze materiały redakcyjne i udostępniać coraz lepsze usługi, potrzebujemy zgody na dopasowanie treści marketingowych do Twojego zachowania. Twoje dane są u nas bezpieczne, a zgodę możesz wycofać w każdej chwili na podstronie polityka prywatności.

Kliknij "PRZECHODZĘ DO SERWISU" lub na symbol "X" w górnym rogu tej planszy, jeżeli zgadzasz się na przetwarzanie przez Wirtualną Polskę i naszych Zaufanych Partnerów Twoich danych osobowych, zbieranych w ramach korzystania przez Ciebie z usług, portali i serwisów internetowych Wirtualnej Polski (w tym danych zapisywanych w plikach cookies) w celach marketingowych realizowanych na zlecenie naszych Zaufanych Partnerów. Jeśli nie zgadzasz się na przetwarzanie Twoich danych osobowych skorzystaj z ustawień w polityce prywatności. Zgoda jest dobrowolna i możesz ją w dowolnym momencie wycofać zmieniając ustawienia w polityce prywatności (w której znajdziesz odpowiedzi na wszystkie pytania związane z przetwarzaniem Twoich danych osobowych).

Od 25 maja 2018 roku obowiązuje Rozporządzenie Parlamentu Europejskiego i Rady (UE) 2016/679 (określane jako "RODO"). W związku z tym chcielibyśmy poinformować o przetwarzaniu Twoich danych oraz zasadach, na jakich odbywa się to po dniu 25 maja 2018 roku.

Kto będzie administratorem Twoich danych?

Administratorami Twoich danych będzie Wirtualna Polska Media Spółka Akcyjna z siedzibą w Warszawie, oraz pozostałe spółki z grupy Wirtualna Polska, jak również nasi Zaufani Partnerzy, z którymi stale współpracujemy. Szczegółowe informacje dotyczące administratorów znajdują się w polityce prywatności.

O jakich danych mówimy?

Chodzi o dane osobowe, które są zbierane w ramach korzystania przez Ciebie z naszych usług, portali i serwisów internetowych udostępnianych przez Wirtualną Polskę, w tym zapisywanych w plikach cookies, które są instalowane na naszych stronach przez Wirtualną Polskę oraz naszych Zaufanych Partnerów.

Dlaczego chcemy przetwarzać Twoje dane?

Przetwarzamy je dostarczać coraz lepsze materiały redakcyjne, dopasować ich tematykę do Twoich zainteresowań, tworzyć portale i serwisy internetowe, z których będziesz korzystać z przyjemnością, zapewniać większe bezpieczeństwo usług, udoskonalać nasze usługi i maksymalnie dopasować je do Twoich zainteresowań, pokazywać reklamy dopasowane do Twoich potrzeb. Szczegółowe informacje dotyczące celów przetwarzania Twoich danych znajdują się w polityce prywatności.

Komu możemy przekazać dane?

Twoje dane możemy przekazywać podmiotom przetwarzającym je na nasze zlecenie oraz podmiotom uprawnionym do uzyskania danych na podstawie obowiązującego prawa – oczywiście tylko, gdy wystąpią z żądaniem w oparciu o stosowną podstawę prawną.

Jakie masz prawa w stosunku do Twoich danych?

Masz prawo żądania dostępu, sprostowania, usunięcia lub ograniczenia przetwarzania danych. Możesz wycofać zgodę na przetwarzanie, zgłosić sprzeciw oraz skorzystać z innych praw wymienionych szczegółowo w polityce prywatności.

Jakie są podstawy prawne przetwarzania Twoich danych?

Podstawą prawną przetwarzania Twoich danych w celu świadczenia usług jest niezbędność do wykonania umów o ich świadczenie (tymi umowami są zazwyczaj regulaminy). Podstawą prawną przetwarzania danych w celu pomiarów statystycznych i marketingu własnego administratorów jest tzw. uzasadniony interes administratora. Przetwarzanie Twoich danych w celach marketingowych realizowanych przez Wirtualną Polskę na zlecenie Zaufanych Partnerów i bezpośrednio przez Zaufanych Partnerów będzie odbywać się na podstawie Twojej dobrowolnej zgody.