Vad är en Color Filter Array (CFA)? Förstå Bayer -filtret

I våra tidigare artiklar diskuterade viVad en kameramodul ärochHur kameramoduler har utvecklats. Vi lärde oss att bildsensorn är en kritisk komponent, fångar ljus och omvandlar den till elektriska signaler. Men hur lyckas en kamerasensor, som i grunden bara mäter ljusintensitet, se och fånga de livliga färgerna i världen runt oss? Svaret ligger i en avgörande komponent placerad direkt över sensorpixlarna: Color Filter Array (CFA).

För att förstå CFA: s roll måste vi först förstå hur bildsensorn själv fungerar. I hjärtat av en bildsensor är otaliga små fotodioder, var och en motsvarande en pixel. När fotoner (ljuspartiklar) faller på en fotodiod genereras en elektrisk laddning och laddningsmängden är proportionell mot antalet fotoner (dvs. ljusets intensitet eller ljusstyrka).

Problemet är att dessa fotodioder inte kan skilja mellan olika ljusfärger. Oavsett om det är rött, grönt eller blått ljus, så länge ljusstyrkan är densamma, är mängden laddning som genereras densamma. Detta innebär att om vi använder bildsensorn direkt utan bearbetning, kan vi bara få en svartvit eller gråskala bild, precis som ett gammalt foto, utan att fånga färginformation. För att en digitalkamera ska se färg behöver vi ett sätt att berätta för varje pixel vilken färglampa den ser.

Det är här färgfiltergruppen (CFA) kommer in. CFA är en mosaik av små färgade filter som är exakt placerade över varje pixel i bildsensorn. Föreställ dig att placera en liten bit färgat glas framför varje pixel. Dessa filter är vanligtvis röda (R), grön (g) och blå (B), motsvarande de tre primärfärgerna som det mänskliga ögat uppfattar färg.

CFA: s kärnfunktion är att begränsa ljusets färg som når varje pixel. Till exempel kan en pixel täckt med ett rött filter endast ta emot och mäta intensiteten på rött ljus, en pixel täckt med ett grönt filter kan bara mäta intensiteten för grönt ljus, och detsamma gäller blått. På detta sätt, även om en enda pixel fortfarande bara kan uppfatta ljusstyrkan i en specifik ljusfärg, kommer olika pixlar på hela pixeluppsättningen att spela in ljusintensitetsinformation i olika färger (röd, grön och blå). Detta är det första steget för att uppnå färguppfattning i digital avbildning.

Bland olika CFA -mönster är Bayer Color Filter Array, uppfann och patenterad av Bryce Bayer på Eastman Kodak 1976, den överlägset mest använda. Nästan alla kamerasensorer i konsumentens digitala kameror och smartphones använder Bayer -mönstret.

Bayer -filtret kännetecknas av dess speciella arrangemangsmönster: det är en upprepande uppsättning av 2x2 -celler. I den här cellen finns ett rött filter, ett blått filter och två gröna filter. När denna 2x2 -cell upprepas över hela sensorn kommer du att upptäcka att det finns ungefär dubbelt så många gröna pixlar på sensorn som röda eller blå pixlar.

Varför finns det fler gröna pixlar? Detta beror på att det mänskliga ögat är mest känsligt för grönt ljus, och grönt ljus innehåller i allmänhet den mest ljusstyrkainformationen. Ökande gröna pixlar hjälper till att mer exakt fånga ljusstyrkan om bilden, vilket är mycket viktigt för att förbättra den slutliga bildkvaliteten (särskilt tydlighet och signal-till-brusförhållande).

I Bayer -läge innehåller varje pixel i rådata (vanligtvis kallad rådata) utgång av sensorn endast en färginformation från de tre primärfärgerna: röd, grön och blå. Till exempel registrerar en pixel intensiteten på det röda ljuset som den får, medan informationen om grönt och blått saknas.

Bayer filter pattern

Det främsta skälet till att Bayer -filtret är så populärt är att det ger en bra balans i att uppnå färgavbildning:

Enkelt och effektivt:Bayer -filter är relativt enkla i strukturen och enkla att tillverka jämfört med lösningar som kräver mer komplexa optiska mönster.
Kostnadseffektivt:Det är ett kostnadseffektivt sätt att uppnå färgavbildning.
Rumslig och färgbalans:Den fångar tillräcklig färginformation (genom rött, grönt och blått) samtidigt som den rumsliga upplösningen (skärpa) eftersom varje pixel bidrar med minst en färginformation.

Som nämnts tidigare får CFA att sensorn matar ut rådata med endast en färginformation per pixel. Detta är inte den färgbild vi ser i slutändan. För att få en fullständig färgbild måste ett viktigt efterbehandlingssteg utföras, kallad demosaing eller debayering.

De-Mosaicing är en komplex beräkningsprocess som vanligtvis utförs av en bildsignalprocessor (ISP). Demosaing -algoritmen uppskattar de två saknade färgkomponenterna för varje pixel genom att analysera färgvärdena för varje pixel och dess omgivande grannar. Till exempel gissas de gröna och blå värdena på en röd pixel "genom att titta på värdena på de gröna och blå pixlarna bredvid.

En högkvalitativ demosaing-algoritm är nyckeln till att producera en tydlig, färgskrävande bild. En dålig algoritm kan resultera i taggade kanter, felfärger (falska färger) eller förlust av detaljer. När tekniken utvecklas blir demosaing -algoritmer mer avancerade och kan mer exakt rekonstruera bildinformation och färger.

how a pixel gets its missing color values from neighbors8

Medan Bayer-filter är de vanligaste, har ingenjörer utvecklat andra typer av CFA-mönster för att försöka göra bättre inom vissa specifika områden, såsom låg-ljusprestanda, färgnoggrannhet eller för specifika applikationer. Till exempel:

CYGM -filter:Använder cyan-, gula, gröna och magenta -filter, ibland används i vissa bildsystem.
RGBW -filter:Lägger till vita (eller transparenta) pixlar till RGB -filtret. Vita pixlar fångar alla ljusfärger, så att de kan fånga mer ljus, vilket hjälper till att förbättra sensorns prestanda i miljöer med svagt ljus, men kräver mer komplexa demosaing-algoritmer för att undvika färgförvrängning.

Bayer -filtret dominerar emellertid fortfarande den stora majoriteten av konsument- och industrikamerans sensorer på grund av dess mogna teknik, bra prestandabalans och brett stöd.

Color Filter Array (CFA) är en till synes enkel men avgörande komponent i modern digital bildteknik. Det löser det grundläggande problemet som bildsensorer inte direkt kan uppfatta färg. Genom att placera ett färgfilter ovanför varje pixel kan sensorn fånga intensitetsinformationen i olika ljusfärger. Bland dem har Bayer -filtret blivit branschstandarden för sin effektiva och balanserade design.

Det bör betonas att CFA endast är det första steget för att få färginformation. Sensorns rådata måste genomgå en komplex demoeringsprocess för att i slutändan generera de färgglada digitala bilder vi ser. CFA arbetar nära med den demosaing -algoritmen för att bilda hörnstenen i digitala kameror som fångar färg. Att förstå arbetsprincipen för CFA kommer att hjälpa oss att få en djupare förståelse för hur digitala bilder produceras.

1. Har alla sensorer som fångar färgbilder en CFA?

A.Ja, för traditionella, fotodiodbaserade färgbildssensorer är en färgfiltergrupp (CFA) standardmetoden för att uppnå färguppfattning. Sensorn själv kan bara mäta ljusets intensitet, och CFA säkerställer att varje pixel kan registrera intensiteten i ljuset i en specifik färg, vilket ger grunden för efterföljande färgrekonstruktion. Vissa speciella sensorer (som Foveon X3 -sensorn) använder en staplad skiktmetod för att skilja färger utan att använda en CFA, men denna teknik är relativt ovanlig. Svartvita (monokroma) sensorer kräver inte en CFA alls.

2. Kommer du att förlora bildupplösning?

A.I viss utsträckning är demosaing en process för att fylla saknad färginformation genom interpolering (uppskattning). Eftersom färginformationen för varje pixel inte mäts direkt, utan "uppskattad" baserat på de omgivande pixlarna, kan detta verkligen påverka bildens ursprungliga detaljer och tydlighet, särskilt i mycket fina eller repetitiva texturområden. Men moderna avancerade demosaing -algoritmer är redan mycket komplexa och effektiva. De använder en mängd komplexa beräkningsmetoder för att sträva efter att bevara den ursprungliga upplösningen och detaljerna i bilden i största utsträckning medan de rekonstruerar färgen och minskar genereringen av artefakter.

3. Kommer framtida bildsensorer vara fria från att förlita sig på CFA?

A.Detta är en riktning för bildsensorforskning. Vissa nya eller experimentella sensorteknologier undersöker sätt att uppnå färgavbildning utan att förlita sig på traditionell CFA, såsom multilagerssensortekniken som nämns tidigare, eller använda nanoteknologi för att skilja olika ljusfärger på pixelnivån. Men med tanke på mognad, kostnadsfördel och god total prestanda för Bayer -filter CFA -teknik kommer det att förbli mainstream -färgavbildningslösningen för de flestakameramodulerinom överskådlig framtid. Ny teknik kan först hitta fotfäste i specifika avancerade eller professionella applikationer.

Skicka oss dina krav för kameramoduler så anpassar vi den bästa lösningen för dig. Med våra premiumlösningar kan du förbättra dina produkter, engagera dina kunder och öppna nya möjligheter för tillväxt och framgång för inbäddade visionsapplikationer.

Skicka förfrågan nu