在前日SONY Mobile的官方活動中,也請到總部的相機工程師來解說XZ2 Premium相機的性能及設計故事,並隨後安排了夜拍場景即刻測試,驗證一下XZ2 Premium的夜拍功力,我們就來看看這一輪的測試吧。

之前的報導也提過多次,XZ2 Premium的相機重點在高感光拍照、錄影,以及4K HDR影片。

工程師提到,XZ2 Premium之所以能拍攝可用的超高感光照片、影片,就是因為雙鏡頭及內建的AUBE即時影像處理晶片。在彩色相機之外,多了黑白感光元件,這感光元件單位畫素有1.55微米,光圈則是f1.6,透過這顆就可以捕捉到高感度/ 亮度較好的細節,再把彩色和黑白一起拍到的畫面,交給AUBE這個影像處理晶片,融合出高感光低光照,照片ISO高到51200,錄影則到12800都還是可用素材,這些本來都是單眼才能做到,現在也在手機上實現了,這有在Follow XZ2 Premium的觀眾朋友應該已經知道了。

SONY Xperia XZ2 Premium 官方情境圖(首圖是官方情境圖,並非現場拍攝的)

這也是結合SONY集團各部門技術而來,比方鏡頭組是來自相機部門的G鏡技術,感光元件及AUBE則來自SONY半導體研發。
XZ2 Premium在自動或手動模式下,都可以切換要雙鏡頭「自動」或是「關閉」,預設是自動,一般就留在預設就好了,不需要去關閉。
XZ2 Premium在自動或手動模式下,都可以切換要雙鏡頭「自動」或是「關閉」

但自動的話,就表示有時開,有時關,
所以什麼時候兩顆鏡頭都會拍?
會有只用彩色單鏡拍的時候嗎?這時候不就跟XZ2一樣?
黑白鏡頭對白天或非低光的畫質有幫助嗎?

抱歉這些在當場忘了問,補問中....(那我現場到底在幹嘛..Orz)

我目前只確定,當環境低光到畫面上出現「超高感光度」時,就一定是開雙鏡在拍。
但對XZ2 Premium來說,什麼時會才會啟動超高感光?
如果依EV植來看,大約在5左右會自動啟動,實際大約是昏暗的房間、路燈夜景那樣的光線。
根據SONY的資料,XZ2 Premium比XZ2感光度高出4倍,在如ISO 12800這樣的高感光下,照片清晰度也明顯提升。在工程師提供的範例裡,還有ISO到51200,仍然可以看出星空的照片。
SONY Xperia XZ2 Premium 比XZ2感光度高出4倍
SONY Xperia XZ2 Premium 超高感光度與照片清晰度

如果有啟動超高感光度了,
拍照時你可以手動把ISO調到12800以上,最高51200。
錄影不能手動拉ISO,但最高可以用ISO12800的感光度來錄影,可以提高極低光錄影的亮度。
SONY Xperia XZ2 Premium 啟動超高感光度可以手動把ISO調到12800以上,最高51200。


 


▌幕後功臣AUBE


AUBE是XZ2 Premium新增的獨立影像處理晶片,雙鏡頭拍出的高感光照片、影片,都會送到這裡處理。
SONY Xperia XZ2 Premium 新增的獨立影像處理晶片AUBE

但是兩顆鏡頭同時拍,因為兩顆相機位置不同,會面臨到幾個問題,一是光軸錯位(Optical axis),二是視差的問題。

光軸偏移簡單來說就是變形的問題。
手持拍照時,我們常會拿成各種歪斜,XYZ軸各種方向的歪(圖上Physical那排),最後成像都是以彩色取到的角度為準,那這時在它旁邊的黑白鏡頭,就會因為手機拿歪了,讓取到的畫面也有各種歪斜(圖上image Sensor那排),這樣跟彩色拍到的畫素就對不到位。
SONY Xperia XZ2 Premium 獨立影像處理晶片AUBE 光軸偏移(變形的問題)

視差大家應該比較熟悉,就跟人的眼睛一樣,鏡頭一顆在左一顆在右,捕捉到的畫面位置其實是不同的,比方你現在可以把手機放在兩眼正中間,然後分別只用左眼跟右眼看,會發現東西的位置一個偏右一個偏左。一般來說,東西越近,視差也就越大,所以兩顆鏡頭捕捉到的畫面裡,若物件有遠有近,那視差的差距就更複雜了。
SONY Xperia XZ2 Premium 獨立影像處理晶片AUBE 視差的差距

那麼AUBE做了哪些事呢?
當AUBE接收到彩色+黑白傳來的影像資訊,會先對彩色畫面做些前置處理,之後就把彩色+黑白影像做三道融合步驟。SONY Xperia XZ2 Premium 獨立影像處理晶片AUBE

第一道就是前面講的,根據影像裡的座標資訊,修正光軸偏移的問題,將黑白轉到跟彩色畫面一樣方向。
SONY Xperia XZ2 Premium 獨立影像處理晶片AUBE:第一道根據影像裡的座標資訊,修正光軸偏移的問題

第二道就是要去偵測遠近物體不同的視差,找到黑白畫素,要對應到彩色那張的哪個位置,
SONY Xperia XZ2 Premium 獨立影像處理晶片AUBE:第二道就是要去偵測遠近物體不同的視差,找到黑白畫素,要對應到彩色那張的哪個位置

第三道就可以融合了。這裡的融合是以畫素為單位在做的,因為黑白拍到的是高感度畫素,融合出的影像就會有較好的亮度。
SONY Xperia XZ2 Premium 獨立影像處理晶片AUBE:第三道融合影像會有較好的亮度

不過瑞凡,這裡的重點應該是:錄影時是每秒連丟30張或60張有偏移又有視差的影像給AUBE處理啊~AUBE不僅要把畫素融合,還要降噪美化,還要即時完成。如果以能者多勞的概念來想,可見AUBE這影像處理晶片能力頗強。

咦? 每秒丟60張?
嗯,昨兒個試拍時發現超高感度模式下,最大可以拍1080p/ 60fps的影片。
SONY Xperia XZ2 Premium 超高感度模式下,最大可以拍1080p/ 60fps的影片。

另一個問題是,非低光的照片影片,或是不管是單鏡頭拍還是雙鏡頭拍,是不是都會用AUBE處理?
單鏡頭拍理論上不會走到後面那三道步驟,但會因為有AUBE,而處理得比沒AUBE的XZ2漂亮嗎?
這些我也得去問一下...(所以我媒體體驗會時到底在幹嘛...Orz)

XZ2 Premium上的低光解決方案就是:拉高ISO,AUBE處理。

跟其他廠商的長曝、用大感光元件、多幀合成、四合一畫素、切換大光圈...等方法都不同,拉高ISO拍照跟錄影都可以作用,超低光增亮效果好,也可以讓快門時間短一點避免手震,但手機感光元件畢竟小,在抹掉噪點跟保留清晰度之間的拿捏就看廠商取向。

另外一點是,Xperia手機的智慧場景其實一直有做多張合成,這個XZ2 Premium仍然有保留。
但有個問題是,雖說拉高了ISO,但有些低光下快門還是1/4秒、1/8秒的,這樣的速度還是容易手震,這也是SONY手機未來還可以想辦法解決的地方。



▌看試拍,低光錄影


所以來看看成品吧。
今天加入PK的是P20 Pro及G7+ ThinQ。
拿P20 Pro來大家知道是因為它的長曝夜景模式,加入G7+ ThinQ則是因為它個「超亮相機」,也可以在低光時加強拍照跟錄影亮度,各家有各家增強低光畫質的方法,就一併來比較看看囉。

第一組,最一般的夜景,這算偏暗的環境了。XZ2P自動啟動高感光了,G7+也開超亮照片模式,P20 Pro呢,我選用自動模式下的照片,為什麼呢? 因為拍攝當時是在行駛中的船上,P20 Pro的長曝夜景有點因為移動中而模糊,所以沒用,但P20 Pro自動模式的亮度好像也不差啊。
XZ2P超高感光:1/16s ISO3200 f/1.8 
SONY Xperia XZ2 Premium 超高感光拍照錄影實拍
G7+ThinQ超亮照片: 1/10s ISO2300 f/1.6
LG G7+ThinQ超亮照片實拍
P20 Pro自動:1/17s ISO6400 f/1
HUAWEI P20 Pro自動 超高感光拍照錄影實拍

===========================
第二組就是周圍沒燈的低光了。
XZ2P有高感光,G7+ ThinQ也是超亮模式,P20 Pro則使用長曝夜間來拍。我覺得都不太好,但以當時環境來說不苛求了,可以注意的反而是XZ2P的ISO8000,清晰度與隔壁ISO2000多的相當,是可以表示讚許的地方。
至於降噪抹圖風格,看你的口味吧,縮圖用的話XZ2P的看起來比較銳利清楚,但若要放到100%檢視,那個銳利感就會變成顆粒感。
XZ2P超高感光:1/8s ISO8000 f/1.8
SONY Xperia XZ2 Premium 超高感光拍照錄影實拍
G7+ThinQ超亮照片:1/5s ISO2250 f/1.6
LG G7+ ThinQ 超高感光拍照錄影實拍
P20 Pro夜景模式:5s ISO3200 f/1.8
HUAWEI P20 Pro夜景模式 超高感光拍照錄影實拍
SONY Xperia XZ2 Premium、 LG G7+ ThinQ、HUAWEI P20 Pro 超高感光拍照比較

這裡對照一組XZ2P本身,一組智慧場景,有啟動雙鏡及高感光,另一組只用彩色鏡頭拍的差別。
有雙鏡頭,看來利用融合黑白鏡頭的畫面,可以讓ISO不用拉到那麼高。
啟用雙鏡頭,超高感光: 1/8s ISO8000 f/1.8
SONY Xperia XZ2 Premium 智慧場景,有啟動雙鏡及高感光
關閉雙鏡:1/8s ISO8000 f/1.8
SONY Xperia XZ2 Premium 關閉啟動雙鏡實拍

=========================
第三組繼續在這烏漆媽黑的地方測,看手動模式拉高ISO拍出來會怎樣呢?
XZ2P拉到12800,開雙鏡。P20 Pro也拉到12800,G7+ ISO手動最高只能到3200。
G7+這組亮度不夠不予討論,XZ2P跟P20 Pro在這樣高的ISO下照片都還可用,都不錯。
XZ2P手動+超高感光:1/20s ISO12800 f/1.8
SONY Xperia XZ2 Premium 手動模式+超高感光ISO12800 實拍
XZ2P手動+超高感光:1/80s ISO51200 f/1.8
SONY Xperia XZ2 Premium 手動模式+超高感光ISO51200實拍
G7+ThinQ手動:1/10s ISO3200 f/1.6
LG G7+ ThinQ 手動模式ISO3200 實拍
P20 Pro手動:1/15s ISO12800 f/1.8
HUAWEI P20 Pro 手動模式ISO12800 實拍

為何只拉到12800而不是51200呢? 因為在這亮度下,XZ2P拉到51200拍的照片,顆粒感已太大,不覺得是張可用的照片,因此就不拿51200的照片出來比了。
(但我要補充,不是說51200不可用,是在這周圍都沒燈的地方顆粒會太大。)

=======================================================
第四組我們來看低光錄影,這也是XZ2P和其他品牌相較最能勝出的地方,但差別多大呢?
4-1)媽豆乾杯Look~這組媽豆臉上是有光的,所以不算很暗,但XZ2P還是自動開啟高感光了,G7+也開了超亮錄影,P20 Pro因為沒有低光錄影模式,就開了它錄影最高的4K來拍拍看...
XZ2P超高感光FHD/60fps(人物)
G7+ThinQ明亮錄影FHD/ 30fps(人物)
P20 Pro夜間錄影-4K/ 30fps(人物)

4-2) 遊輪行進中錄一段低光風景,一樣XZ2P跟G7+都有開各自的低光模式,XZ2P有開進階防手震,P20 Pro則開4K來拍。
XZ2P超高感光錄影-FHD/ 30fps(橋與倒影)
G7+ThinQ明亮錄影-FHD/30fps(橋與倒影)
P20 Pro夜間錄影--4K/30fps(橋與倒影)

4-3)以低光模式拍煙火影片,可煙火有點遠XD,但這段XZ2P有開高感光,G7+則用自動模式,P20 Pro用FHD/ 60fps來拍,不過事後我覺得選錯了,應該選1080p讓它可搭配防手震比較好...Orz
XZ2P超高感度錄影-FHD/ 30fps(煙火)
G7+ ThinQ自動錄影-4K/30fps(煙火)
P20 Pro夜間錄影-FHD/ 60fps(煙火)

當中環境最暗的是橋與倒影那裡,可能這幾段測試環境,都還不算很暗很暗,就沒有突顯到XZ2P的功力重點。
XZ2P的低光錄影覺得畫質、亮度、清晰度在稍亮或較暗的場景,表現都蠻平均的,天空雲層拍得到,河面上的反光也有把眼睛看到的呈現出來。但你說清晰度或乾淨度,可能還是受限於低光高ISO的關係,就還是手機的水準。但煙火那段拍到繽紛的河面倒影,很漂亮。
但P20 Pro在這三段的場景,除了煙火那裡亮度較暗外,其他也都捕捉得還不錯,可能是本身感光元件就大的關係,只要有光線,在這些場景裡也還不錯。
P20 Pro的錄影結果,這就跟上次在記者會會暗室裡測到的不一樣...


========================
第五組我們來拍明暗反差大,需要HDR修正的場景拍照。
這是一個有發光扶手以及深色地毯樓梯。XZ2P這時候是雙鏡頭拍,智慧場景偵測到逆光,G7+有自動開啟HDR,P20 Pro則使用自動模式。
XZ2P自動逆光:1/50s ISO50 f/1.8
SONY Xperia XZ2 Premium 雙鏡頭拍,智慧場景偵測到逆光
G7+ThinQ自動HDR:1/172s ISO50 f/1.6
LG G7+ ThinQ 自動開啟HDR 逆光實拍
P20Pro自動:1/120s ISO50 f/1.8
HUAWEI P20 Pro 自動模式 逆光實拍

我不太清楚為什麼G7+ThinQ的快門會自動偵測到那麼快,在這張的HDR修正效果看來沒有很優。XZ2 Premium就是中規中矩,畫面乾淨,而且地面雖是深色,但地毯的細節有出來。
P20 Pro快門很短但亮度很好,HDR效果也明顯,不得不說P20 Pro的運算有時真會給人出乎意料的驚喜。

============================
第六就簡單看一些室內場景,這裡XZ2P都維持智慧場景+雙鏡自動的設定。
XZ2P智慧場景:1/50s ISO125 f/1.8
SONY Xperia XZ2 Premium 智慧場景+雙鏡自動的設定 實拍
G7+ThinQAI相機: 1/33s ISO200 f/1.6
LG G7+ ThinQ AI相機實拍
P20 Pro自動:1/60s ISO160 f/1.8
HUAWEI P20 Pro 自動模式實拍
P20Pro夜景模式:6s ISO100 f/1.8
HUAWEI P20 Pro 夜景模式實拍



XZ2P智慧場景:1/16s ISO800 f/1.8
SONY Xperia XZ2 Premium 智慧場景+雙鏡自動的設定 實拍
G7+ThinQ AI相機:1/4s ISO900 f/1.6
LG G7+ ThinQ AI相機實拍
P20 Pro夜景模式:4s ISO800 f/1.8
HUAWEI P20 Pro 夜景模式實拍



▼這組顏色差比較多,現場的燈是黃的,眼睛看是介於XZ2P跟P20 Pro之間,XZ2P偏白,P20 Pro又太黃,但XZ2P比較有修正白平衡,其實比較自然。
XZ2P智慧場景:1/50s ISO50 f/1.8
SONY Xperia XZ2 Premium 智慧場景+雙鏡自動的設定 實拍
G7+ThinQ HDR:1/100s ISO50 f/1.6
LG G7+ ThinQ AI相機實拍
P20 Pro自動:1/120s ISO50 f/1.8
HUAWEI P20 Pro 夜景模式實拍



▼這組三支都有偵測到美食。
XZ2P美食模式:1/50s ISO200 f/1.8
SONY Xperia XZ2 Premium 美食模式實拍
G7+ThinQ AI美食:1/25s ISO200 f/1.6
LG G7+ ThinQ AI美食模式實拍
P20 Pro自動美食:1/30s ISO250 f/1.8
HUAWEI P20 Pro 自動美食模式實拍

我有個好奇的是,XZ2P不知道有沒有因為多了黑白鏡頭,而讓一般的拍照細節、亮度變好。
這個我在補問中,不過這裡先來跟同樣是黑白+彩色一起拍的P20Pro看看100%局部比較:


木橋組
SONY Xperia XZ2 Premium 與 HUAWEI P20 Pro 木橋組 100%局部比較
救生圈組
SONY Xperia XZ2 Premium 與 HUAWEI P20 Pro 救生圈組100%局部比較
宴會廳組
SONY Xperia XZ2 Premium 與 HUAWEI P20 Pro 宴會廳組100%局部比較
美食組
SONY Xperia XZ2 Premium 與 HUAWEI P20 Pro 美食組100%局部比較
雖然我覺得XZ2P應該要因為有黑白鏡頭而有不同,但似乎不是每一張的細節都比較清楚...
我補問一下雙鏡頭何時啟用何時不啟用,再來看怎麼拍吧..

在今天的測試機裡還沒看到的,是散景跟黑白模式,這會在8月隨著軟體更新上線。
根據SONY自己的統計,使用者有50%的照片都是在低光的環境下拍的,以及有5%是在超低光環境下拍攝,超低光拍攝比例這麼少的,是因為太難拍了,大部分人拍不起來索性不拍。
因此低光拍照、錄影品質一直是消費者希望改進的地方,這也是SONY決定以雙鏡頭來提升低光拍照品質的原因。
看完這裡的比較大家應該也生出自己的想法了。
就像前面有組例子一樣,XZ2 Premium ISO8000下的清晰度,跟另外兩支手機ISO2000、3000拍出的差不多,加上拉高低光錄影,這是XZ2 Premium技術上的亮點。

but...技術厲害,跟拍出的照片合不合你的口味,看起來討不討喜,有時候是兩回事。

我回想第一次看到P20 Pro夜景照,以及看到XZ2P全黑下也能錄影的心情,前者的效果是超乎我意料的,有驚艷的感覺。而後者則是覺得技術的確很厲害,但可能因為畫面上還是顆粒跟點點,所以心情比較平靜。我想關鍵是最後的成果是否討喜的關係....

XZ2 Premium有很厲害的技術,在低光、沒光、在KTV、在生日會上的錄影,是勝過P20 Pro,也勝過其他手機的。
P20 Pro的夜景色彩美、人像也較美、散景氣氛也美美的,第一眼看會覺得漂亮。
但大眾口味會偏向哪個,我來說可能會淪為主觀,不如大家自己評論。


#XZ2 Premium是學霸,P20 Pro是也會讀書的?;?..
#XZ2 Premium是怪獸,P20 Pro是魔王...
#對不起又做奇怪的比喻了
#我沒有忘記4KHDR只再寫下去太冗長了