翻譯自——techinsights
今天普及一下什么叫做PDAF(相位對焦)?
當攝像機在自動對焦的時候總是有一個困惑,知道圖像是不清楚的,但是lens應該向前還是向后移動呢?總是要前后移動lens一下才知道,普通的反差法對焦就是這么做的,爬山嘛。PDAF的出現就是為了解決這個lens移動的問題,可以根據圖像,預判lens運動的方向。PDAF最早運用在單反上,已經是非常成熟的技術了。
相位對焦技術從15年開始終于由單反移植到智能手機攝像頭上,給用戶帶來極大的拍照體驗。以前拍照畫面的拉伸感一去不復返。
相位對焦原理:根據CIS不同像素的相位差信息,判斷出當前鏡頭位置離相對焦清晰狀態(即下圖相位差為零狀態)的位置,從而得到鏡頭應該移動的向量。故要實現此功能,首先CIS要支持PDAF,其次攝像頭需要校準不同距離下相位數據,這份數據主要是得到相位差和物距的對應關系。手機拍照可得到相位差信息,相位差信息根據內部校準數據,得到鏡頭當前位置并計算出需要移動的方向和距離。相比反差式對焦,極大地提升了對焦速度。
PDAF的具體實現方式又各有不同。目前手機攝像頭CIS技術主要掌握在 SONY半導體、Samsung 電子、OV三家手上。
據我們所知,三星在其ISOCELL Plus技術平臺上實現了1.17µm纖薄光學疊加,這項技術也是世界上最尖端的。此項技術能夠增強CMOS圖像傳感器捕捉光線的能力,大幅提升了光敏度和色彩還原度。
光學堆棧和厚度調查
布魯斯拜耳會對他的發明感到驕傲的!
拜耳(Bayer)數組這個名詞,相信只要是學習過數字影像課程,亦或是略懂感光組件基本成像原理的朋友,應該都不陌生,此發明從 1976 年便一路影響數字影像的發展至今,曾在伊士曼柯達公司擔任研發科學家的 Bryce Bayer,就是此 RGBG 數組的發明者,而這位將數字影像帶給全世界的影像之父。
在現代感光組件技術原理中扮演極核心角色的 Bayer 影像數組科技,其透過分別將紅、綠、藍三色組成方格馬賽克數組的方式(紅與藍分別占數組中的 1/4 格,至于綠則是占了 1/2),模擬人眼對于顏色的判定。雖說其他廠商像是 Sigma 與 Foveon 合作的 X3 以及 Fujifilm 新一代的 X-trans 感光組件,都嘗試透過不同的排列或傳感器分層技術來達到更好的色彩擷取表現,不過最初也最廣為應用的,還是以 Bayer filter 為最大宗。所以,不論你用的是哪部相機,何種感光組件,都能夠觀賞到美麗數字形成的照片。
他發明的RGGB CFA仍然是小像素圖像傳感器的主力軍。在較小像素空間中SONY、Samsung、OV三家技術速度相差不大,但實際做出來的東西有些還是相差蠻大的。關于PDAF,三家各有優缺點,叫法不一但基本都是以下三種:
shield pixel
2*1 PD
dual PD
OmniVision和Sony在一段時間前推出了RGBC/RGBW CFA,三星則使用了RWB。安森美 (Aptina)在2014年推出了RYYB CFA,直到最近,我們才在其他地方看到它,當時華為在其P30/P30 Pro傳感器中展示了它,該傳感器由索尼制造,采用1.0 µm RYYB“Quad Bayer”像素。
簡單分析一下這三種技術:
1.shield pixel(OPPO R7)
屏蔽掉像素一般的感光區域(黑色部分),值獲得一半信號。需要另外的像素屏蔽掉另一半 信號,得到完整的相位差信息。
SP越多,對焦越快,但信號損失越嚴重,目前SP密度控制在1%~3%。
2.super PD(OPPO R9S)
將相鄰的像素共用一個on chip microlens得到相位差信息,一般在Green上處理。
同樣的,二合一的PD越多,對焦越快,但信號損失越嚴重,目前密度也控制在1%~3%
3.dual PD(Samsung S7)
將同一個像素底部的感光區域(即光電二極管)一分為二,在同一個像素內即可完成相位信 息捕獲。
dual PD 也有叫 2PD、全像素雙核對焦,這種像素覆蓋率100%,所以對焦體驗最佳。
但由于將光電二極管一分為二,井口變小,FWC急劇衰減,dynamic range衰減嚴重,拍照 非常容易過曝。
三星憑借優秀的ISP和調試能力過曝控制的還可以,但金立M2017駕馭能力就稍弱了。
但單從對焦來說,dual PD>2*1 PD>shield pixel,這種優勢尤其體現在暗環境下對焦的穩定性上,比如10lux/5lux/1lux這些極暗環境下的對焦。
另外,即使是同一種PDAF,受microlens的設計、像素大小、用于PD的color filter、sensitivity、Fab制程等因素影響,各家的效果還是不一樣。
不過在人眼感知范圍內一味追求極致也沒必要,對焦夠用就行,還是要多看看畫質。
新技術能否替代Bayer?
除了拜耳RGB之外,最近還使用了一種方案,即每2x2像素分組共享一個顏色通道,如下圖所示。索尼使用Quad Bayer這個術語來描述這一方案,而OmniVision稱其版本為4-cell,三星則采用了它的Tetracell品牌。每個方案都已跨多個像素世代部署。索尼配備了2x1片上鏡頭(OCL) PDAF,與Quad Bayer公司在0.8 µm代上使用,而三星在其0.8 µm代上使用了清晰的替換濾鏡來屏蔽PDAF像素。
在IISW(International Image Sensor Workshop)會議中,我們回顧了智能手機中使用的PDAF像素。這三種解決方案被概括為掩膜、雙光電二極管(dual PD)和2x1 OCL。這些相機都是在大像素應用中開發的,主要應用領域為單反相機和無反光鏡相機。2014年,索尼首次在智能手機上使用了掩膜PDAF。目前最小的掩膜式PDAF的記錄是三星的0.8µm的ISOCELL Plus和Tetracell CFA。
2016年,三星Galaxy團隊采用了索尼和三星的1.4µm全像素雙核對焦(dual PD)。TechInsights在其VLSI 2017的論文中描述了三星1.28µm 的dual PD,它是目前使用的最小的雙核對焦,但是在研討會中發現這個結論是錯誤的。事實上,三星已經在生產1.22 µm dual PD了。
最后,2x1 OCL很容易被描述為在一行中跨越兩個像素的雙寬微透鏡。這項技術最初是由安森美的Aptina開發,盡管直到2018年才找到用于分析的部件。2016年,索尼在iphone中推出了這一解決方案,之后三星和OmniVision也在1.12µm像素中推出了自己的解決方案。目前使用的最小的2x1 OCL是索尼的0.8µm版。
本內容特別關注了處于成熟階段的小像素智能手機成像設備。對下一代智能手機圖像和光學傳感器的監測和報告,包括其他成像分部門,如汽車、飛行時間(ToF)、機器視覺、安全/監視等尚未作出分析。盡管小像素縮放路線圖已經接近極限,但未來還有強大的產品路線,這里還有很多工作要做!下圖總結了一些系統和IC技術領域上的主流技術。
延伸閱讀——三星ISOCELL Plus,致力追求極致色彩
我們知道,如果想要拍出高質量的照片,CMOS需要盡可能的捕捉更多的光線,并且準確的把色彩信息傳輸給光電二極管。這也是為什么如今的手機廠商多愛宣傳自己的相機傳感器有多大的單位像素面積的原因。
然而大尺寸CMOS本就與手機需要的輕量、小型化的需求矛盾。讓相機模組占據更大的機身空間或者讓相機凸起等手段其實也都是不得已而為之。如果能夠讓CMOS盡可能小的同時擁有優秀的拍照效果,才是我們最終的追求。
2013年,三星電子通過引入ISOCELL技術改善了這一問題。該技術通過在相鄰像素之間形成物理屏障,減少顏色串擾并增大full-well capacity-滿陣容量。比起傳統的背照式(BSI)圖像傳感器設計,ISOCELL技術可以讓每個像素吸收并存儲更多的光量,從而獲得更卓越的圖像品質。
不過此前的ISOCESS技術是通過在每個像素色彩濾鏡之間增加物理屏障以減少顏色串擾并且讓每個像素能夠比傳統的背照式圖像傳感器接收到更多的光線,獲得更好的圖像品質。而在今天發布的ISOCELL Plus技術中,三星憑借進一步優化的像素結構將像素隔離技術又重新做了全新的升級?,F有的像素結構中,通常在光電二極管上形成金屬板,以減少像素之間的干擾,但由于金屬往往會反射或吸收入射光,也導致了光損耗現象的發生。而這一次,三星將金屬隔光板替換為服飾公司開發的新材料,進一步降低了光損耗和光反射。
三星稱,新的ISOCELL Plus技術將會帶來跟高的色彩還原度和15%的靈敏度。也就意味著使用這一技術能夠使圖像傳感器在不損失性能的同時將單位像素降到0.8μm甚至更小。借助這一技術,三星能夠制造超過2000萬像素的小尺寸相機傳感器。
目前,ISOCELL Plus已經在上海MWC展出。值得注意的是,在這一技術旁邊展出的正是亞微米像素傳感器、Tetracell和雙像素對焦技術。這三種技術的應用本來會造成光線上的一定損失,倒是正與ISOCELL Plus技術相得益彰。