Mobily i bezzrcadlovky běžně analyzují právě zachycené snímky, ať už kvůli chytrému zpracování scény nebo kvůli obrazu, běžně tato analýza ale probíhá na procesoru. To znamená, že data nejprve zachytí snímač, poté jsou zesílena, převedena na digitální data a až potom putují do procesoru, který je vyhodnocuje, řídí ostření, například trackování objektů, a také data zpracovává a nechává dále ukládat.
Takové procesory mohou mít akcelerátory pro umělou inteligenci nebo velmi specializované akcelerátory pro práci s úpravou obrazu. Například u mobilů je možné jejich práci vidět naživo – vyfotíte fotku, přejděte do fotogalerie a během sekundy se právě vyfocení fotka změní. Zejména u mobilů jsou různé snímače párovány s různými čipsety, což všechno situaci komplikuje a prodlužuje samotný výpočet i optimalizaci.
Sloučení snímaní i výpočtů pro úpravu obrazu na jeden kus polovodiče může přinést několik zásadních výhod. Tou první je snížení latence aplikace úprav, takže ihned po vyfocení uvidíte fotku upravenou AI. Možná AI úpravy budou viditelné na živém náhledu na displeji, takže lépe předpovíte podobu výsledné fotky.
Dále se může zjednodušit optimalizace úprav a vyhodnocování fotek, protože pro jeden snímač bude vždy stejný hardware na zpracování. Také dojde ke snížení spotřeby, zvýšení kvality úprav nebo zlepšení výkonu rozpoznávání objektů. Samozřejmě lze teoretizovat o dalším využitím.
Na druhou stranu tato technologie je dnes zatím v plenkách a mluví se o jejím uvedením nejdříve v roce 2027. Ve vývoji má být již u Samsungu, který chce přijít s tak kvalitními snímači, že se mají rovnat lidskému vidění. Také bude zajímavé sledovat, jestli tento koncept pronikne jen do mobilů nebo i do bezzrcadlovek.
Zdroj: Petapixel