Google聯(lián)合MIT新款“轉(zhuǎn)換器”: 手機(jī)完美修圖師

時(shí)間:2017-08-07

來(lái)源:網(wǎng)絡(luò)轉(zhuǎn)載

導(dǎo)語(yǔ):近日,MIT計(jì)算機(jī)科學(xué)與人工智能實(shí)驗(yàn)室和Google研究團(tuán)隊(duì)提出了一套系統(tǒng),在不影響手機(jī)耗電量等性能的情況下,可以實(shí)時(shí)對(duì)照片細(xì)節(jié)進(jìn)行修復(fù),讓拍照者立即得到HDR圖像。

近日,MIT計(jì)算機(jī)科學(xué)與人工智能實(shí)驗(yàn)室和Google研究團(tuán)隊(duì)提出了一套系統(tǒng),在不影響手機(jī)耗電量等性能的情況下,可以實(shí)時(shí)對(duì)照片細(xì)節(jié)進(jìn)行修復(fù),讓拍照者立即得到HDR圖像。

高動(dòng)態(tài)范圍(HDR),就是利用每個(gè)曝光時(shí)間相對(duì)應(yīng)最佳細(xì)節(jié)的LDR圖像來(lái)合成最終HDR圖像,它能夠更好地反映出真實(shí)環(huán)境中的視覺(jué)效果。

換言之,就是在拍照時(shí),如果考慮高光區(qū)域的曝光,暗部細(xì)節(jié)就會(huì)丟失;而照顧暗部細(xì)節(jié),高光區(qū)域就會(huì)過(guò)曝。為了解決這一問(wèn)題,可以利用相機(jī)連拍至少三種曝光度以上的照片,最后再用軟件合成一張保留所有細(xì)節(jié)的照片,此技術(shù)稱為HDR技術(shù)。

據(jù)悉,早在16年的GooglePixel手機(jī)上,Google就開(kāi)發(fā)了相關(guān)算法和軟件,并顯著改善了手機(jī)拍攝出的照片質(zhì)量。其中,復(fù)雜高動(dòng)態(tài)范圍(HDR)算法是其技術(shù)核心,它可以捕獲數(shù)字圖像中顏色丟失的微小變化,但是受限于智能手機(jī)硬件的處理能力,而未能發(fā)揮很好的作用。

而早在2015年,MIT的研究生MichaelGharbi就開(kāi)發(fā)了一個(gè)“轉(zhuǎn)換器”,它可以很好地解決Google面對(duì)的問(wèn)題,大大降低圖像處理所需的帶寬和功耗。

該“轉(zhuǎn)換器”的具體實(shí)現(xiàn)就是,讓手機(jī)向網(wǎng)絡(luò)服務(wù)器發(fā)送圖像的低分辨率版本,隨后服務(wù)器發(fā)送回一個(gè)針對(duì)性的轉(zhuǎn)換算法,將手機(jī)上低分辨率版本的圖像修改為高分辨率的圖像?!稗D(zhuǎn)換器”使得智能手機(jī)能在短時(shí)間內(nèi)進(jìn)行復(fù)雜的圖像處理,且不耗費(fèi)大量的電量。

據(jù)了解,最新的這套系統(tǒng)是Google在MIT的這款“轉(zhuǎn)換器”之上,結(jié)合自己已有的系統(tǒng)開(kāi)發(fā)出來(lái)的。

對(duì)此,Gharbi說(shuō):“Google聽(tīng)說(shuō)了我做的工作,于是他們自己做了后續(xù)的工作,合并了兩種方法。而現(xiàn)在我們要做的就是要讓算法自己學(xué)習(xí)和選擇,即融入AI,而無(wú)需人為向云端服務(wù)器發(fā)送圖像。目前來(lái)看,第一個(gè)目標(biāo)就是加速和優(yōu)化程序,使其能在手機(jī)上運(yùn)行?!?/p>

為了實(shí)現(xiàn)快速處理,團(tuán)隊(duì)開(kāi)始從圖像的低分辨率版本來(lái)進(jìn)行處理,但因?yàn)楦叻直媛蕡D像中的各個(gè)像素的顏色值變化微小,而機(jī)器學(xué)習(xí)系統(tǒng)必須從自身的“粗糙輸出”辨識(shí)出圖像各像素點(diǎn)的細(xì)微顏色變化特征,以判斷出圖像處理算法的類(lèi)型,因此最大的難點(diǎn)依然是高分辨率采樣的簡(jiǎn)單實(shí)現(xiàn)。

為此,該團(tuán)隊(duì)對(duì)機(jī)器學(xué)習(xí)系統(tǒng)進(jìn)行大量的訓(xùn)練,在其輸出設(shè)置上,團(tuán)隊(duì)沒(méi)有讓系統(tǒng)輸出完整的圖像,而是輸出表示圖像中像素點(diǎn)顏色修改程度的公式。在訓(xùn)練中,根據(jù)輸出公式應(yīng)用到原始圖像后的效果與潤(rùn)飾后版本的近似程度,系統(tǒng)對(duì)機(jī)器學(xué)習(xí)性能進(jìn)行判斷,以此對(duì)其自身進(jìn)行優(yōu)化。

目前研究團(tuán)隊(duì)已對(duì)機(jī)器學(xué)習(xí)系統(tǒng)進(jìn)行了5000張圖像數(shù)據(jù)集的訓(xùn)練,其中每張圖像都具有五個(gè)不同的潤(rùn)飾變體。

現(xiàn)在,在處理高分辨率圖像上,融入AI的HDR算法比原始算法快了100倍,這也就意味著在很少的運(yùn)存和電池電量的情況下,手機(jī)可以實(shí)時(shí)顯示HDR算法修過(guò)的圖像。

GoogleResearch的JonBarron表示,使用機(jī)器學(xué)習(xí)進(jìn)行計(jì)算機(jī)攝影的改進(jìn)是一項(xiàng)令人興奮的想法,但一直受限于手機(jī)的處理器能力和電源容量?,F(xiàn)在我們找到了避開(kāi)這些問(wèn)題的方法,并將會(huì)使用戶有很棒的實(shí)時(shí)攝影體驗(yàn)。

更多資訊請(qǐng)關(guān)注PC BASED頻道

中傳動(dòng)網(wǎng)版權(quán)與免責(zé)聲明:

凡本網(wǎng)注明[來(lái)源:中國(guó)傳動(dòng)網(wǎng)]的所有文字、圖片、音視和視頻文件,版權(quán)均為中國(guó)傳動(dòng)網(wǎng)(www.surachana.com)獨(dú)家所有。如需轉(zhuǎn)載請(qǐng)與0755-82949061聯(lián)系。任何媒體、網(wǎng)站或個(gè)人轉(zhuǎn)載使用時(shí)須注明來(lái)源“中國(guó)傳動(dòng)網(wǎng)”,違反者本網(wǎng)將追究其法律責(zé)任。

本網(wǎng)轉(zhuǎn)載并注明其他來(lái)源的稿件,均來(lái)自互聯(lián)網(wǎng)或業(yè)內(nèi)投稿人士,版權(quán)屬于原版權(quán)人。轉(zhuǎn)載請(qǐng)保留稿件來(lái)源及作者,禁止擅自篡改,違者自負(fù)版權(quán)法律責(zé)任。

如涉及作品內(nèi)容、版權(quán)等問(wèn)題,請(qǐng)?jiān)谧髌钒l(fā)表之日起一周內(nèi)與本網(wǎng)聯(lián)系,否則視為放棄相關(guān)權(quán)利。

關(guān)注伺服與運(yùn)動(dòng)控制公眾號(hào)獲取更多資訊

關(guān)注直驅(qū)與傳動(dòng)公眾號(hào)獲取更多資訊

關(guān)注中國(guó)傳動(dòng)網(wǎng)公眾號(hào)獲取更多資訊

最新新聞
查看更多資訊

娓娓工業(yè)

廣州金升陽(yáng)科技有限公司

熱搜詞
  • 運(yùn)動(dòng)控制
  • 伺服系統(tǒng)
  • 機(jī)器視覺(jué)
  • 機(jī)械傳動(dòng)
  • 編碼器
  • 直驅(qū)系統(tǒng)
  • 工業(yè)電源
  • 電力電子
  • 工業(yè)互聯(lián)
  • 高壓變頻器
  • 中低壓變頻器
  • 傳感器
  • 人機(jī)界面
  • PLC
  • 電氣聯(lián)接
  • 工業(yè)機(jī)器人
  • 低壓電器
  • 機(jī)柜
回頂部
點(diǎn)贊 0
取消 0