本發明(ming)涉及圖像處理技術領域(yu),尤其(qi)涉及一種(zhong)圖像采集裝(zhuang)置(zhi)及電(dian)子(zi)設備。
背景技術:
隨著虛(xu)擬現實(vr,virtualreality)技術(shu)、增強現實(ar,augmentedreality)技術(shu)的(de)發(fa)展,vr設備及ar設備越來越受(shou)到用戶(hu)的(de)熱(re)愛,然而在這些設備中(zhong)通常要設置至少兩個攝像頭來輔助相(xiang)應(ying)的(de)應(ying)用,致使設備的(de)體(ti)積大、成(cheng)本高、數據處理困(kun)難。
技術實現要素:
本(ben)發明(ming)實(shi)施例提(ti)供一種圖(tu)像采(cai)集裝(zhuang)置(zhi)(zhi)及電子設備,能(neng)夠僅(jin)采(cai)用一個圖(tu)像采(cai)集裝(zhuang)置(zhi)(zhi)實(shi)現圖(tu)像深(shen)度處理,實(shi)現簡(jian)單、成本(ben)低。
本發明(ming)實(shi)施(shi)例(li)的技術方案是(shi)這樣實(shi)現的:
本發明實施例提供了(le)一種圖像采集裝置(zhi),包(bao)括:
感(gan)光(guang)單(dan)元(yuan)陣列(lie)(lie)層(ceng),設置(zhi)有多個(ge)感(gan)光(guang)單(dan)元(yuan),每個(ge)所(suo)(suo)述感(gan)光(guang)單(dan)元(yuan)包(bao)括以特定距離對稱設置(zhi)的第(di)一感(gan)光(guang)子(zi)單(dan)元(yuan)和第(di)二感(gan)光(guang)子(zi)單(dan)元(yuan);其中(zhong),所(suo)(suo)述感(gan)光(guang)單(dan)元(yuan)陣列(lie)(lie)層(ceng)中(zhong)的第(di)一感(gan)光(guang)子(zi)單(dan)元(yuan)形(xing)成第(di)一子(zi)陣列(lie)(lie);所(suo)(suo)述感(gan)光(guang)單(dan)元(yuan)陣列(lie)(lie)層(ceng)中(zhong)的第(di)二感(gan)光(guang)子(zi)單(dan)元(yuan)形(xing)成第(di)二子(zi)陣列(lie)(lie);
第一(yi)處理器(qi),用于刷(shua)新所述(shu)(shu)感光(guang)單元陣列層的(de)第一(yi)子陣列,得到所述(shu)(shu)第一(yi)子陣列感應環境(jing)中光(guang)線形成的(de)第一(yi)圖(tu)像信號;
刷新所(suo)述感光單(dan)元(yuan)陣(zhen)列層的(de)第二(er)子(zi)陣(zhen)列,得到(dao)所(suo)述第二(er)子(zi)陣(zhen)列感應(ying)環境中光線(xian)形成(cheng)的(de)第二(er)圖像信號;
根據所(suo)述(shu)(shu)第(di)一(yi)圖像信(xin)(xin)號(hao)、所(suo)述(shu)(shu)第(di)二圖像信(xin)(xin)號(hao)中成(cheng)像的視差計算(suan)深度,并融合所(suo)述(shu)(shu)第(di)一(yi)圖像信(xin)(xin)號(hao)、所(suo)述(shu)(shu)第(di)二圖像信(xin)(xin)號(hao)以及所(suo)述(shu)(shu)深度形成(cheng)深度圖像信(xin)(xin)號(hao)。
上述方案(an)中,所(suo)述第一處理器包括:
數字信號處(chu)理器(qi),用(yong)于對所述感光單元(yuan)陣(zhen)列(lie)層輸(shu)出(chu)(chu)的(de)所述第一(yi)圖像信號、所述第二圖像信號進行預處(chu)理并輸(shu)出(chu)(chu);
所(suo)(suo)述(shu)(shu)深度計算單元(yuan),連接所(suo)(suo)述(shu)(shu)數字信號(hao)處理器,用于根據(ju)各像(xiang)(xiang)素點在(zai)所(suo)(suo)述(shu)(shu)第(di)一圖(tu)(tu)像(xiang)(xiang)信號(hao)、所(suo)(suo)述(shu)(shu)第(di)二圖(tu)(tu)像(xiang)(xiang)信號(hao)的(de)(de)成像(xiang)(xiang)位(wei)置差異、與到成像(xiang)(xiang)平面的(de)(de)距離的(de)(de)反(fan)比例關(guan)系(xi)計算相應像(xiang)(xiang)素點的(de)(de)深度,將各像(xiang)(xiang)素點的(de)(de)深度以及(ji)在(zai)第(di)一圖(tu)(tu)像(xiang)(xiang)信號(hao)、第(di)二圖(tu)(tu)像(xiang)(xiang)信號(hao)的(de)(de)顏色信息融(rong)合,形成所(suo)(suo)述(shu)(shu)深度圖(tu)(tu)像(xiang)(xiang)信號(hao)。
上述(shu)(shu)方案(an)中,所(suo)述(shu)(shu)第(di)一處(chu)理器,還用于同步刷新所(suo)述(shu)(shu)感光單元陣列層的(de)第(di)一子陣列和(he)所(suo)述(shu)(shu)第(di)二子陣列,得到所(suo)述(shu)(shu)感光單元陣列層的(de)全部感光子單元感應環境中光線形成的(de)原(yuan)始圖像(xiang)信(xin)號。
上述方案(an)中,所述裝置還包括(kuo):
信號放(fang)大(da)器,連接所(suo)(suo)述感光單元(yuan)陣列(lie)層,用于對所(suo)(suo)述感光單元(yuan)陣列(lie)層輸出的模擬信號類型的圖(tu)像信號進行放(fang)大(da);
增益控(kong)制(zhi)器(qi),連接所述(shu)信號放(fang)大(da)器(qi),用于對放(fang)大(da)后的(de)圖像信號進行(xing)增益控(kong)制(zhi);
模數轉(zhuan)換(huan)器(qi),連接所述(shu)(shu)增(zeng)益控制(zhi)器(qi),用(yong)于將所述(shu)(shu)感(gan)光(guang)單元(yuan)陣(zhen)列層輸出的圖像信號進行模數轉(zhuan)換(huan),按(an)照預(yu)定位寬輸出至(zhi)所述(shu)(shu)第一處理器(qi)進行處理。
上(shang)述方案中,所述裝(zhuang)置還(huan)包括:
輸(shu)出接口,連接所(suo)述第一(yi)處理(li)器,用于根據先(xian)入先(xian)出的(de)方式,將(jiang)傳輸(shu)至所(suo)述輸(shu)出接口的(de)所(suo)述深度(du)圖像信(xin)號(hao)和/或(huo)所(suo)述原(yuan)始(shi)圖像信(xin)號(hao)輸(shu)出至所(suo)述圖像采集裝置外部的(de)處理(li)單元。
本(ben)發明實施例還提(ti)供(gong)了一種電子設備(bei),所述電子設備(bei)包括:
一個圖像采集(ji)裝置,包(bao)(bao)括(kuo)(kuo):設置有多個感(gan)(gan)光(guang)(guang)(guang)(guang)單(dan)元(yuan)(yuan)的(de)感(gan)(gan)光(guang)(guang)(guang)(guang)單(dan)元(yuan)(yuan)陣(zhen)列層,每個所(suo)述感(gan)(gan)光(guang)(guang)(guang)(guang)單(dan)元(yuan)(yuan)包(bao)(bao)括(kuo)(kuo)以特定距(ju)離對稱(cheng)設置的(de)第一感(gan)(gan)光(guang)(guang)(guang)(guang)子單(dan)元(yuan)(yuan)和(he)第二(er)感(gan)(gan)光(guang)(guang)(guang)(guang)子單(dan)元(yuan)(yuan);其(qi)中,所(suo)述感(gan)(gan)光(guang)(guang)(guang)(guang)單(dan)元(yuan)(yuan)陣(zhen)列層中的(de)第一感(gan)(gan)光(guang)(guang)(guang)(guang)子單(dan)元(yuan)(yuan)形成(cheng)第一子陣(zhen)列;所(suo)述感(gan)(gan)光(guang)(guang)(guang)(guang)單(dan)元(yuan)(yuan)陣(zhen)列層中的(de)第二(er)感(gan)(gan)光(guang)(guang)(guang)(guang)子單(dan)元(yuan)(yuan)形成(cheng)第二(er)子陣(zhen)列;
所(suo)述(shu)圖像采集裝(zhuang)置,用于(yu)刷新所(suo)述(shu)感(gan)光(guang)(guang)單元陣(zhen)列層的第(di)一(yi)子陣(zhen)列,得到所(suo)述(shu)第(di)一(yi)子陣(zhen)列感(gan)應環境中光(guang)(guang)線形成的第(di)一(yi)圖像信號;
刷新所(suo)述(shu)感光(guang)單(dan)元陣列(lie)(lie)層的(de)(de)第二子(zi)陣列(lie)(lie),得到所(suo)述(shu)第二子(zi)陣列(lie)(lie)感應環境(jing)中(zhong)光(guang)線形成的(de)(de)第二圖像信(xin)號;
根據所(suo)述(shu)(shu)(shu)(shu)第一(yi)圖(tu)像(xiang)(xiang)(xiang)信(xin)號、所(suo)述(shu)(shu)(shu)(shu)第二(er)圖(tu)像(xiang)(xiang)(xiang)信(xin)號中成像(xiang)(xiang)(xiang)的(de)視(shi)差計(ji)算深(shen)度,并融合所(suo)述(shu)(shu)(shu)(shu)第一(yi)圖(tu)像(xiang)(xiang)(xiang)信(xin)號、所(suo)述(shu)(shu)(shu)(shu)第二(er)圖(tu)像(xiang)(xiang)(xiang)信(xin)號以及所(suo)述(shu)(shu)(shu)(shu)深(shen)度形成深(shen)度圖(tu)像(xiang)(xiang)(xiang)信(xin)號;
輸出所(suo)述深度圖(tu)像信號(hao)及對(dui)應所(suo)述深度圖(tu)像信號(hao)的原始圖(tu)像信號(hao);
第(di)二處(chu)理器,用于(yu)基于(yu)所述深(shen)度圖像信(xin)號中(zhong)目標對(dui)(dui)象的深(shen)度,對(dui)(dui)所述原(yuan)始(shi)圖像信(xin)號進行處(chu)理;
或者,基(ji)于所述原(yuan)始圖(tu)像信號控制輸(shu)出顯(xian)示(shi)原(yuan)始圖(tu)像。
上述(shu)方(fang)案(an)中(zhong),所述(shu)第二處(chu)理器,還(huan)用于識(shi)別出所述(shu)深(shen)度圖像(xiang)信號中(zhong)目(mu)標對象的(de)深(shen)度;
對(dui)所述原始圖像信號中位于對(dui)應所述深度的(de)焦平面(mian)以(yi)外的(de)成像區(qu)域,進(jin)行模糊化處理。
上述(shu)方案中,所述(shu)圖像(xiang)采集裝(zhuang)置(zhi),還用于對所述(shu)感光單元陣列層輸出的所述(shu)第一圖像(xiang)信號(hao)、所述(shu)第二圖像(xiang)信號(hao)進行預處理;
以及,根(gen)據各(ge)像(xiang)素(su)點(dian)(dian)在(zai)所述第(di)一圖像(xiang)信(xin)(xin)(xin)號(hao)、所述第(di)二(er)圖像(xiang)信(xin)(xin)(xin)號(hao)的(de)成像(xiang)位置差異、與(yu)到(dao)成像(xiang)平(ping)面(mian)的(de)距離的(de)反比例關系計算相應像(xiang)素(su)點(dian)(dian)的(de)深(shen)度,將各(ge)像(xiang)素(su)點(dian)(dian)的(de)深(shen)度以及在(zai)第(di)一圖像(xiang)信(xin)(xin)(xin)號(hao)、第(di)二(er)圖像(xiang)信(xin)(xin)(xin)號(hao)的(de)顏色信(xin)(xin)(xin)息(xi)融合(he),形成所述深(shen)度圖像(xiang)信(xin)(xin)(xin)號(hao)。
上述(shu)(shu)方案中,所述(shu)(shu)圖像(xiang)采集裝置,還用(yong)于同(tong)步刷新所述(shu)(shu)感(gan)(gan)光(guang)(guang)單元(yuan)陣(zhen)(zhen)列(lie)(lie)層(ceng)的第一(yi)子(zi)陣(zhen)(zhen)列(lie)(lie)和所述(shu)(shu)第二子(zi)陣(zhen)(zhen)列(lie)(lie),得到所述(shu)(shu)感(gan)(gan)光(guang)(guang)單元(yuan)陣(zhen)(zhen)列(lie)(lie)層(ceng)的全部感(gan)(gan)光(guang)(guang)子(zi)單元(yuan)感(gan)(gan)應(ying)環境中光(guang)(guang)線形成的所述(shu)(shu)原始圖像(xiang)信(xin)號(hao)。
上述(shu)(shu)方案中,所述(shu)(shu)圖像(xiang)采集裝(zhuang)置,還用于對所述(shu)(shu)感(gan)光單(dan)元陣列(lie)層輸出(chu)的(de)(de)模擬信號類型的(de)(de)圖像(xiang)信號進行(xing)(xing)放(fang)大,對放(fang)大后的(de)(de)圖像(xiang)信號進行(xing)(xing)增益控制,并(bing)將所述(shu)(shu)感(gan)光單(dan)元陣列(lie)層輸出(chu)的(de)(de)圖像(xiang)信號進行(xing)(xing)模數轉換,得到預定位(wei)寬(kuan)的(de)(de)數字圖像(xiang)信號。
附圖說明
圖(tu)1為(wei)本發明實施例中圖(tu)像采集裝(zhuang)置的組(zu)成結構(gou)示意圖(tu)一(yi);
圖2為(wei)現有技(ji)術中攝像頭內圖像傳感(gan)器的俯視圖;
圖3為(wei)本發明實施例圖像采集裝(zhuang)置中(zhong)像素點的設計示意(yi)圖;
圖4為(wei)本發明實施例圖像(xiang)采集裝置中感光(guang)單(dan)元感應環境中光(guang)線的示意圖;
圖(tu)(tu)(tu)5為本發明實施(shi)例分別基于第一圖(tu)(tu)(tu)像信號及第二圖(tu)(tu)(tu)像信號得到的圖(tu)(tu)(tu)像的示(shi)意圖(tu)(tu)(tu);
圖6為本發明實施(shi)例中深(shen)度(du)計算(suan)原(yuan)理示意圖;
圖7為本發明實施例中輸出(chu)的(de)深度圖像的(de)一(yi)個(ge)示意圖;
圖(tu)8為本發明實施例中(zhong)圖(tu)像采集裝(zhuang)置的組成結構示意圖(tu)二;
圖(tu)9為本發明實施(shi)例中(zhong)圖(tu)像傳感器的(de)電(dian)路結構示(shi)意圖(tu);
圖(tu)(tu)10為本發(fa)明實施例中圖(tu)(tu)像(xiang)傳感器的組成(cheng)結(jie)構示意圖(tu)(tu);
圖(tu)11為(wei)本發明實施例中電子設備的組成結(jie)構示意(yi)圖(tu)。
具體實施方式
下(xia)面結合附圖和具(ju)體(ti)實施例對本發(fa)明作進(jin)一步(bu)詳細說明。
需要(yao)說明(ming)的(de)(de)(de)是,本(ben)(ben)發明(ming)實施(shi)例(li)所涉及(ji)的(de)(de)(de)術(shu)語“第(di)(di)(di)一(yi)\第(di)(di)(di)二(er)\第(di)(di)(di)三(san)”僅僅是是區別(bie)類似的(de)(de)(de)對(dui)象,不代表針對(dui)對(dui)象的(de)(de)(de)特定排序(xu),可以(yi)(yi)(yi)(yi)理(li)解地,“第(di)(di)(di)一(yi)\第(di)(di)(di)二(er)\第(di)(di)(di)三(san)”在(zai)允許的(de)(de)(de)情(qing)況下(xia)可以(yi)(yi)(yi)(yi)互(hu)換(huan)特定的(de)(de)(de)順序(xu)或(huo)先后(hou)次(ci)序(xu)。應該(gai)理(li)解“第(di)(di)(di)一(yi)\第(di)(di)(di)二(er)\第(di)(di)(di)三(san)”區分的(de)(de)(de)對(dui)象在(zai)適當情(qing)況下(xia)可以(yi)(yi)(yi)(yi)互(hu)換(huan),以(yi)(yi)(yi)(yi)使這(zhe)里(li)描(miao)述(shu)的(de)(de)(de)本(ben)(ben)發明(ming)的(de)(de)(de)實施(shi)例(li)能(neng)夠以(yi)(yi)(yi)(yi)除了(le)在(zai)這(zhe)里(li)圖示或(huo)描(miao)述(shu)的(de)(de)(de)那些以(yi)(yi)(yi)(yi)外(wai)的(de)(de)(de)順序(xu)實施(shi)。
本(ben)(ben)發(fa)明實(shi)施例(li)提供了(le)一種圖像(xiang)采集裝置,如圖1所示,本(ben)(ben)發(fa)明實(shi)施例(li)中圖像(xiang)采集裝置的組成包括:
感(gan)光(guang)單(dan)(dan)元陣(zhen)(zhen)列(lie)層11,設置(zhi)有多個感(gan)光(guang)單(dan)(dan)元,每個所(suo)述(shu)(shu)感(gan)光(guang)單(dan)(dan)元包括以特定距離對稱設置(zhi)的(de)第(di)一感(gan)光(guang)子(zi)單(dan)(dan)元和第(di)二(er)感(gan)光(guang)子(zi)單(dan)(dan)元;其中(zhong),所(suo)述(shu)(shu)感(gan)光(guang)單(dan)(dan)元陣(zhen)(zhen)列(lie)層中(zhong)的(de)第(di)一感(gan)光(guang)子(zi)單(dan)(dan)元形(xing)成(cheng)第(di)一子(zi)陣(zhen)(zhen)列(lie);所(suo)述(shu)(shu)感(gan)光(guang)單(dan)(dan)元陣(zhen)(zhen)列(lie)中(zhong)的(de)第(di)二(er)感(gan)光(guang)子(zi)單(dan)(dan)元形(xing)成(cheng)第(di)二(er)子(zi)陣(zhen)(zhen)列(lie);
第(di)一處理器12,用于刷新所述感(gan)光單元陣列層的第(di)一子陣列,得到所述第(di)一子陣列感(gan)應(ying)環境中光線形成(cheng)的第(di)一圖像信(xin)號;
刷新所述感(gan)光單元陣列(lie)層的第二(er)子陣列(lie),得到(dao)所述第二(er)子陣列(lie)感(gan)應環(huan)境中光線形成的第二(er)圖像信號;
根(gen)據所述(shu)(shu)第(di)一(yi)圖(tu)像(xiang)信(xin)號、所述(shu)(shu)第(di)二圖(tu)像(xiang)信(xin)號中成像(xiang)的視差計算(suan)深度(du)(du)(du),并融合所述(shu)(shu)第(di)一(yi)圖(tu)像(xiang)信(xin)號、所述(shu)(shu)第(di)二圖(tu)像(xiang)信(xin)號以(yi)及所述(shu)(shu)深度(du)(du)(du)形成深度(du)(du)(du)圖(tu)像(xiang)信(xin)號。
這(zhe)里,現(xian)有技術中(zhong)(zhong)攝像(xiang)(xiang)(xiang)頭(tou)內圖(tu)(tu)像(xiang)(xiang)(xiang)傳感(gan)(gan)(gan)器的(de)(de)(de)(de)俯視圖(tu)(tu)如圖(tu)(tu)2所(suo)(suo)示,每(mei)(mei)個(ge)(ge)(ge)感(gan)(gan)(gan)光(guang)(guang)單元(yuan)(yuan)對應一個(ge)(ge)(ge)像(xiang)(xiang)(xiang)素(su)點,每(mei)(mei)個(ge)(ge)(ge)感(gan)(gan)(gan)光(guang)(guang)單元(yuan)(yuan)感(gan)(gan)(gan)應來自所(suo)(suo)處環(huan)(huan)境的(de)(de)(de)(de)光(guang)(guang)線而形成(cheng)(cheng)所(suo)(suo)處環(huan)(huan)境的(de)(de)(de)(de)一個(ge)(ge)(ge)像(xiang)(xiang)(xiang)素(su)點的(de)(de)(de)(de)信號。在本(ben)發(fa)明實施(shi)例(li)中(zhong)(zhong),將每(mei)(mei)個(ge)(ge)(ge)像(xiang)(xiang)(xiang)素(su)點被拆分成(cheng)(cheng)對稱的(de)(de)(de)(de)兩部分,如圖(tu)(tu)3所(suo)(suo)示為(wei)本(ben)發(fa)明實施(shi)例(li)中(zhong)(zhong)像(xiang)(xiang)(xiang)素(su)點的(de)(de)(de)(de)設計示意圖(tu)(tu),每(mei)(mei)個(ge)(ge)(ge)像(xiang)(xiang)(xiang)素(su)點由左右兩個(ge)(ge)(ge)像(xiang)(xiang)(xiang)素(su)構(gou)成(cheng)(cheng),兩個(ge)(ge)(ge)像(xiang)(xiang)(xiang)素(su)相互之間不能透過光(guang)(guang)線,相應的(de)(de)(de)(de),每(mei)(mei)個(ge)(ge)(ge)感(gan)(gan)(gan)光(guang)(guang)單元(yuan)(yuan)被拆分成(cheng)(cheng)了兩個(ge)(ge)(ge)子(zi)單元(yuan)(yuan)(第(di)一感(gan)(gan)(gan)光(guang)(guang)子(zi)單元(yuan)(yuan)和(he)第(di)二感(gan)(gan)(gan)光(guang)(guang)子(zi)單元(yuan)(yuan)),如圖(tu)(tu)4所(suo)(suo)示為(wei)本(ben)發(fa)明實施(shi)例(li)圖(tu)(tu)像(xiang)(xiang)(xiang)采集裝置中(zhong)(zhong)感(gan)(gan)(gan)光(guang)(guang)單元(yuan)(yuan)感(gan)(gan)(gan)應環(huan)(huan)境中(zhong)(zhong)的(de)(de)(de)(de)光(guang)(guang)線的(de)(de)(de)(de)示意圖(tu)(tu);并依據(ju)實際需要設定第(di)一感(gan)(gan)(gan)光(guang)(guang)子(zi)單元(yuan)(yuan)和(he)第(di)二感(gan)(gan)(gan)光(guang)(guang)子(zi)單元(yuan)(yuan)間的(de)(de)(de)(de)所(suo)(suo)述特(te)定距離。
在實際實施時(shi)(shi),第(di)(di)(di)(di)一(yi)(yi)處理器12對感光(guang)(guang)(guang)單元陣(zhen)(zhen)(zhen)列(lie)(lie)的(de)(de)(de)(de)刷(shua)(shua)(shua)(shua)新為依(yi)據需要(yao)設(she)置的(de)(de)(de)(de)定時(shi)(shi)刷(shua)(shua)(shua)(shua)新,如(ru),在第(di)(di)(di)(di)一(yi)(yi)時(shi)(shi)間(jian)刷(shua)(shua)(shua)(shua)新感光(guang)(guang)(guang)單元陣(zhen)(zhen)(zhen)列(lie)(lie)層的(de)(de)(de)(de)第(di)(di)(di)(di)一(yi)(yi)子(zi)陣(zhen)(zhen)(zhen)列(lie)(lie),間(jian)隔特定時(shi)(shi)間(jian)刷(shua)(shua)(shua)(shua)新感光(guang)(guang)(guang)單元陣(zhen)(zhen)(zhen)列(lie)(lie)層的(de)(de)(de)(de)第(di)(di)(di)(di)二(er)(er)(er)子(zi)陣(zhen)(zhen)(zhen)列(lie)(lie)。這里可以理解成(cheng)第(di)(di)(di)(di)一(yi)(yi)處理器12定時(shi)(shi)讀取基(ji)(ji)于(yu)感光(guang)(guang)(guang)單元陣(zhen)(zhen)(zhen)列(lie)(lie)層得到(dao)(dao)的(de)(de)(de)(de)第(di)(di)(di)(di)一(yi)(yi)圖像(xiang)(xiang)(xiang)(xiang)(xiang)信(xin)號(hao)(hao)(hao)及第(di)(di)(di)(di)二(er)(er)(er)圖像(xiang)(xiang)(xiang)(xiang)(xiang)信(xin)號(hao)(hao)(hao),而在實際實施時(shi)(shi),基(ji)(ji)于(yu)第(di)(di)(di)(di)一(yi)(yi)子(zi)陣(zhen)(zhen)(zhen)列(lie)(lie)得到(dao)(dao)的(de)(de)(de)(de)第(di)(di)(di)(di)一(yi)(yi)圖像(xiang)(xiang)(xiang)(xiang)(xiang)信(xin)號(hao)(hao)(hao)及基(ji)(ji)于(yu)第(di)(di)(di)(di)二(er)(er)(er)子(zi)陣(zhen)(zhen)(zhen)列(lie)(lie)得到(dao)(dao)的(de)(de)(de)(de)第(di)(di)(di)(di)二(er)(er)(er)圖像(xiang)(xiang)(xiang)(xiang)(xiang)信(xin)號(hao)(hao)(hao)可看(kan)作(zuo)人(ren)的(de)(de)(de)(de)兩(liang)只(zhi)眼(yan)睛分別得到(dao)(dao)的(de)(de)(de)(de)圖像(xiang)(xiang)(xiang)(xiang)(xiang)信(xin)號(hao)(hao)(hao),也(ye)可看(kan)作(zuo)是由兩(liang)個攝像(xiang)(xiang)(xiang)(xiang)(xiang)頭得到(dao)(dao)的(de)(de)(de)(de)圖像(xiang)(xiang)(xiang)(xiang)(xiang)信(xin)號(hao)(hao)(hao),因此,可采用雙(shuang)目測(ce)距的(de)(de)(de)(de)原(yuan)理根據所(suo)述第(di)(di)(di)(di)一(yi)(yi)圖像(xiang)(xiang)(xiang)(xiang)(xiang)信(xin)號(hao)(hao)(hao)、所(suo)述第(di)(di)(di)(di)二(er)(er)(er)圖像(xiang)(xiang)(xiang)(xiang)(xiang)信(xin)號(hao)(hao)(hao)中成(cheng)像(xiang)(xiang)(xiang)(xiang)(xiang)的(de)(de)(de)(de)視差計(ji)算深(shen)度,即進行(xing)景深(shen)計(ji)算,其中,基(ji)(ji)于(yu)第(di)(di)(di)(di)一(yi)(yi)圖像(xiang)(xiang)(xiang)(xiang)(xiang)信(xin)號(hao)(hao)(hao)得到(dao)(dao)的(de)(de)(de)(de)第(di)(di)(di)(di)一(yi)(yi)圖像(xiang)(xiang)(xiang)(xiang)(xiang)及基(ji)(ji)于(yu)第(di)(di)(di)(di)二(er)(er)(er)圖像(xiang)(xiang)(xiang)(xiang)(xiang)信(xin)號(hao)(hao)(hao)得到(dao)(dao)的(de)(de)(de)(de)第(di)(di)(di)(di)二(er)(er)(er)圖像(xiang)(xiang)(xiang)(xiang)(xiang)的(de)(de)(de)(de)一(yi)(yi)種示意圖如(ru)圖5所(suo)示。
基于本發(fa)明上述實(shi)(shi)施例,在實(shi)(shi)際實(shi)(shi)施時,第一(yi)處理器12包括(kuo):
數字信(xin)號處理器121,用于對(dui)所述感光單元陣列層(ceng)輸出的所述第一圖像信(xin)號、所述第二圖像信(xin)號進(jin)行(xing)預處理并輸出;
這(zhe)里,對所(suo)述第(di)一(yi)圖像信(xin)(xin)號、第(di)二圖像信(xin)(xin)號進行的預處理可以(yi)包括(kuo):自(zi)動曝光控制(aec,automaticexposurecontrol)、自(zi)動增益控制(agc,automaticgaincontrol)、自(zi)動白平(ping)衡(awb,automaticwhitebalance)、色彩校(xiao)正、gamma校(xiao)正、祛除(chu)壞點等(deng)(deng)等(deng)(deng)。
深(shen)度計算單元122,用于根據各像(xiang)(xiang)素(su)(su)點在所述(shu)第(di)一圖(tu)像(xiang)(xiang)信(xin)(xin)(xin)號(hao)(hao)、所述(shu)第(di)二(er)圖(tu)像(xiang)(xiang)信(xin)(xin)(xin)號(hao)(hao)的(de)成(cheng)像(xiang)(xiang)位置差異、與到成(cheng)像(xiang)(xiang)平面的(de)距離的(de)反(fan)比例關(guan)系計算相應像(xiang)(xiang)素(su)(su)點的(de)深(shen)度,將各像(xiang)(xiang)素(su)(su)點的(de)深(shen)度以及在第(di)一圖(tu)像(xiang)(xiang)信(xin)(xin)(xin)號(hao)(hao)、第(di)二(er)圖(tu)像(xiang)(xiang)信(xin)(xin)(xin)號(hao)(hao)的(de)顏(yan)色(se)信(xin)(xin)(xin)息融合,形成(cheng)所述(shu)深(shen)度圖(tu)像(xiang)(xiang)信(xin)(xin)(xin)號(hao)(hao)。
這里,對本發明實施例中深度計算的原理進行簡單的介紹。如圖6所示為本發明實施例中深度計算原理示意圖,主要是利用了目標點在左右兩幅視圖上成像的橫向坐標之間存在的差異,即像素點在所述第一圖像信號、所述第二圖像信號的成像位置差異,即第一感光子單元和第二感光子單元之間的距離,d=xl-xr與目標點到成像平面的距離z(像素點到成像平面的距離)存在著反比例的關系:
基于本(ben)發明上述(shu)(shu)(shu)實(shi)施(shi)例,在實(shi)際(ji)應用中(zhong)(zhong)(zhong)(zhong),所述(shu)(shu)(shu)第(di)一(yi)處理(li)器12,還用于同步刷新所述(shu)(shu)(shu)感(gan)(gan)光(guang)單(dan)(dan)元(yuan)(yuan)陣(zhen)列層(ceng)的(de)(de)(de)第(di)一(yi)子(zi)(zi)陣(zhen)列和(he)(he)所述(shu)(shu)(shu)第(di)二子(zi)(zi)陣(zhen)列,得到(dao)(dao)所述(shu)(shu)(shu)感(gan)(gan)光(guang)單(dan)(dan)元(yuan)(yuan)陣(zhen)列層(ceng)的(de)(de)(de)全部感(gan)(gan)光(guang)子(zi)(zi)單(dan)(dan)元(yuan)(yuan)感(gan)(gan)應環(huan)境中(zhong)(zhong)(zhong)(zhong)光(guang)線形成(cheng)的(de)(de)(de)原始圖(tu)像(xiang)(xiang)信(xin)號(hao)(hao)。也(ye)就是說(shuo),將每(mei)個(ge)感(gan)(gan)光(guang)單(dan)(dan)元(yuan)(yuan)中(zhong)(zhong)(zhong)(zhong)的(de)(de)(de)第(di)一(yi)感(gan)(gan)光(guang)子(zi)(zi)單(dan)(dan)元(yuan)(yuan)和(he)(he)第(di)二感(gan)(gan)光(guang)子(zi)(zi)單(dan)(dan)元(yuan)(yuan)結合,看(kan)作一(yi)個(ge)整(zheng)體(ti),輸(shu)出(chu)(chu)基于每(mei)個(ge)感(gan)(gan)光(guang)單(dan)(dan)感(gan)(gan)應環(huan)境中(zhong)(zhong)(zhong)(zhong)光(guang)線形成(cheng)的(de)(de)(de)原始圖(tu)像(xiang)(xiang)信(xin)號(hao)(hao),也(ye)即,將第(di)一(yi)圖(tu)像(xiang)(xiang)信(xin)號(hao)(hao)、第(di)二圖(tu)像(xiang)(xiang)信(xin)號(hao)(hao)疊加得到(dao)(dao)的(de)(de)(de)圖(tu)像(xiang)(xiang)信(xin)號(hao)(hao)。進而當圖(tu)像(xiang)(xiang)采(cai)集裝(zhuang)(zhuang)置設(she)(she)置于某電子(zi)(zi)設(she)(she)備上時,該電子(zi)(zi)設(she)(she)備中(zhong)(zhong)(zhong)(zhong)的(de)(de)(de)處理(li)器可(ke)以(yi)基于圖(tu)像(xiang)(xiang)采(cai)集裝(zhuang)(zhuang)置輸(shu)出(chu)(chu)的(de)(de)(de)深度圖(tu)像(xiang)(xiang)信(xin)號(hao)(hao)對輸(shu)出(chu)(chu)的(de)(de)(de)原始圖(tu)像(xiang)(xiang)信(xin)號(hao)(hao)進行處理(li),得到(dao)(dao)預(yu)設(she)(she)需求的(de)(de)(de)圖(tu)像(xiang)(xiang)信(xin)息(xi),例如把原始圖(tu)像(xiang)(xiang)信(xin)號(hao)(hao)中(zhong)(zhong)(zhong)(zhong)的(de)(de)(de)前景信(xin)息(xi)作為主體(ti)突(tu)出(chu)(chu)出(chu)(chu)來,把背景信(xin)息(xi)虛化處理(li),形成(cheng)虛實(shi)對比,虛實(shi)結合給人深刻的(de)(de)(de)印象。
在實(shi)(shi)際實(shi)(shi)施時(shi),本(ben)發明實(shi)(shi)施例的圖像(xiang)采(cai)集(ji)裝置(zhi)還(huan)可以包括:
信號(hao)(hao)放(fang)大(da)器13,連接所(suo)述感(gan)光(guang)單元陣列層11,用于對(dui)所(suo)述感(gan)光(guang)單元陣列層11輸(shu)出的(de)模擬信號(hao)(hao)類型的(de)圖像信號(hao)(hao)進(jin)行(xing)放(fang)大(da);
這里包括兩種情況:一(yi)(yi)(yi)種對(dui)(dui)應(ying)(ying)景深模式,也即(ji)對(dui)(dui)第(di)(di)(di)一(yi)(yi)(yi)處理(li)器(qi)12分(fen)別刷新(xin)第(di)(di)(di)一(yi)(yi)(yi)子(zi)陣(zhen)(zhen)列(lie)(lie)和(he)第(di)(di)(di)二子(zi)陣(zhen)(zhen)列(lie)(lie)得到的第(di)(di)(di)一(yi)(yi)(yi)圖(tu)(tu)像(xiang)(xiang)信(xin)號(hao)及(ji)第(di)(di)(di)二圖(tu)(tu)像(xiang)(xiang)信(xin)號(hao)進(jin)行(xing)(xing)放(fang)大(da);另一(yi)(yi)(yi)種對(dui)(dui)應(ying)(ying)常規圖(tu)(tu)像(xiang)(xiang)模式,也即(ji)對(dui)(dui)第(di)(di)(di)一(yi)(yi)(yi)處理(li)器(qi)12同步刷新(xin)第(di)(di)(di)一(yi)(yi)(yi)子(zi)陣(zhen)(zhen)列(lie)(lie)和(he)第(di)(di)(di)二子(zi)陣(zhen)(zhen)列(lie)(lie)得到的原始圖(tu)(tu)像(xiang)(xiang)信(xin)號(hao)進(jin)行(xing)(xing)放(fang)大(da)。
增益(yi)控制(zhi)器14,連接所述信號放(fang)大器13,用于對放(fang)大后(hou)的圖像(xiang)信號進行增益(yi)控制(zhi)。
模(mo)數轉換器(qi)15,連接所(suo)述增益(yi)控(kong)制器(qi)14,用(yong)于將所(suo)述感(gan)光單(dan)元(yuan)陣列層輸出(chu)的圖(tu)像信號進行模(mo)數轉換,按(an)照預定位寬輸出(chu)至所(suo)述第一處理(li)器(qi)12進行處理(li);
這里(li)同(tong)(tong)樣包括兩種(zhong)情況,一(yi)(yi)(yi)(yi)種(zhong)對(dui)應景深模(mo)式,也即對(dui)第(di)一(yi)(yi)(yi)(yi)處理器12分別(bie)刷(shua)新第(di)一(yi)(yi)(yi)(yi)子(zi)陣列和第(di)二(er)(er)子(zi)陣列得到(dao)的(de)第(di)一(yi)(yi)(yi)(yi)圖(tu)(tu)像信號(hao)及第(di)二(er)(er)圖(tu)(tu)像信號(hao),分別(bie)進(jin)(jin)行(xing)模(mo)數(shu)轉(zhuan)換,然后按照(zhao)預(yu)(yu)定(ding)位(wei)寬輸出;另一(yi)(yi)(yi)(yi)種(zhong)對(dui)應常規(gui)圖(tu)(tu)像模(mo)式,也即對(dui)第(di)一(yi)(yi)(yi)(yi)處理器12同(tong)(tong)步刷(shua)新第(di)一(yi)(yi)(yi)(yi)子(zi)陣列和第(di)二(er)(er)子(zi)陣列得到(dao)的(de)原始圖(tu)(tu)像信號(hao)進(jin)(jin)行(xing)模(mo)數(shu)轉(zhuan)換,然后按照(zhao)預(yu)(yu)定(ding)位(wei)寬輸出;在(zai)一(yi)(yi)(yi)(yi)實施例中,所述(shu)預(yu)(yu)定(ding)位(wei)寬可以依(yi)據實際(ji)需要進(jin)(jin)行(xing)設定(ding),如10bit。
基于本(ben)發明上述(shu)實施(shi)例,在實際應用中,本(ben)發明實施(shi)例中的圖像采集裝置還包括:
輸出接口16,連接所述(shu)第一處(chu)理器(qi)12,用于根據先入先出的方式,將傳(chuan)輸至所述(shu)輸出接口16的深(shen)度圖像信號(hao)輸出至所述(shu)圖像傳(chuan)感(gan)器(qi)的外部的處(chu)理單元;
和/或,將(jiang)傳輸至(zhi)所述輸出接口(kou)16的(de)原始圖像(xiang)信號輸出至(zhi)所述圖像(xiang)傳感器的(de)外(wai)部的(de)處理單元(yuan)。
在(zai)實際應用中(zhong),本發明實施例圖(tu)(tu)(tu)像(xiang)(xiang)采(cai)集裝置中(zhong)的上述感(gan)光單元陣列層11、第一處理器(qi)12、信號放大(da)器(qi)13、增(zeng)益控制器(qi)14、模(mo)數轉換器(qi)15、以及所述輸出接口16可集成到(dao)一個(ge)圖(tu)(tu)(tu)像(xiang)(xiang)傳(chuan)感(gan)器(qi)中(zhong),相(xiang)應的,圖(tu)(tu)(tu)像(xiang)(xiang)采(cai)集裝置還包括:鏡(jing)(jing)頭(tou)(tou)(lens)(相(xiang)當于(yu)人眼中(zhong)的晶狀(zhuang)體(ti)(ti),利用透(tou)鏡(jing)(jing)的折射原理,景物光線透(tou)過鏡(jing)(jing)頭(tou)(tou)在(zai)聚焦平面(mian)上形成清晰(xi)的像(xiang)(xiang))、紅外濾光片(irfilter,infraredrayfilter)(主要作用為過濾掉進入鏡(jing)(jing)頭(tou)(tou)的光線中(zhong)的紅外光),圖(tu)(tu)(tu)像(xiang)(xiang)采(cai)集裝置的一個(ge)示意圖(tu)(tu)(tu)如圖(tu)(tu)(tu)8所示,光線通過鏡(jing)(jing)頭(tou)(tou)進入圖(tu)(tu)(tu)像(xiang)(xiang)采(cai)集裝置內部,然后經過紅外濾光片過濾紅外光,最后到(dao)達圖(tu)(tu)(tu)像(xiang)(xiang)傳(chuan)感(gan)器(qi),圖(tu)(tu)(tu)像(xiang)(xiang)傳(chuan)感(gan)器(qi)按照材質(zhi)可以分為互補(bu)金屬氧化物半(ban)導(dao)體(ti)(ti)(cmos,complementarymetaloxidesemiconductor)和電荷耦合元件(ccd,charge-coupleddevice)兩(liang)種,圖(tu)(tu)(tu)8以圖(tu)(tu)(tu)像(xiang)(xiang)傳(chuan)感(gan)器(qi)為cmos為例。
圖(tu)(tu)(tu)9為(wei)本發明實施例中圖(tu)(tu)(tu)像(xiang)(xiang)傳感(gan)器(qi)(qi)(qi)的電(dian)路結構示(shi)意圖(tu)(tu)(tu),如圖(tu)(tu)(tu)9所示(shi),當光(guang)線經(jing)(jing)(jing)紅外(wai)濾光(guang)片進入時首先由感(gan)光(guang)單(dan)元(yuan)(yuan)陣列層感(gan)應,將光(guang)信(xin)(xin)(xin)(xin)號(hao)(hao)(hao)(hao)轉變為(wei)電(dian)信(xin)(xin)(xin)(xin)號(hao)(hao)(hao)(hao)輸(shu)(shu)出,然(ran)后經(jing)(jing)(jing)信(xin)(xin)(xin)(xin)號(hao)(hao)(hao)(hao)放(fang)大器(qi)(qi)(qi)(amp,amplifier)對(dui)電(dian)信(xin)(xin)(xin)(xin)號(hao)(hao)(hao)(hao)進行(xing)放(fang)大、增(zeng)益(yi)控(kong)制器(qi)(qi)(qi)對(dui)放(fang)大后的電(dian)信(xin)(xin)(xin)(xin)號(hao)(hao)(hao)(hao)進行(xing)增(zeng)益(yi)控(kong)制,然(ran)后輸(shu)(shu)出給模數(shu)轉換器(qi)(qi)(qi)(adc,analogtodigitalconverter)將模擬(ni)電(dian)信(xin)(xin)(xin)(xin)號(hao)(hao)(hao)(hao)轉換成數(shu)字(zi)(zi)信(xin)(xin)(xin)(xin)號(hao)(hao)(hao)(hao),然(ran)后輸(shu)(shu)出給數(shu)字(zi)(zi)信(xin)(xin)(xin)(xin)號(hao)(hao)(hao)(hao)處理(li)器(qi)(qi)(qi)(dsp,digitalsignalprocessor),dsp對(dui)傳輸(shu)(shu)過來的數(shu)字(zi)(zi)信(xin)(xin)(xin)(xin)號(hao)(hao)(hao)(hao)進行(xing)預處理(li)(自動(dong)曝光(guang)控(kong)制、自動(dong)增(zeng)益(yi)控(kong)制、自動(dong)白平衡(heng)、色彩校正、gamma校正、祛除壞點等(deng)),然(ran)后輸(shu)(shu)出給深度計算(suan)單(dan)元(yuan)(yuan)進行(xing)像(xiang)(xiang)素點的深度計算(suan),獲得(de)深度圖(tu)(tu)(tu)像(xiang)(xiang)信(xin)(xin)(xin)(xin)號(hao)(hao)(hao)(hao),經(jing)(jing)(jing)輸(shu)(shu)出接口輸(shu)(shu)出至圖(tu)(tu)(tu)像(xiang)(xiang)采集裝置外(wai)部(bu)的處理(li)單(dan)元(yuan)(yuan)。當然(ran),同時輸(shu)(shu)出的還(huan)可以(yi)包括第一圖(tu)(tu)(tu)像(xiang)(xiang)信(xin)(xin)(xin)(xin)號(hao)(hao)(hao)(hao)及第二圖(tu)(tu)(tu)像(xiang)(xiang)信(xin)(xin)(xin)(xin)號(hao)(hao)(hao)(hao)。
作為(wei)一(yi)(yi)種實(shi)現方式(shi),圖(tu)像傳感器中(zhong)部(bu)件的(de)(de)設置(zhi)可(ke)(ke)以采(cai)用(yong)(yong)疊層(ceng)(ceng)技(ji)術(shu),如圖(tu)10中(zhong)的(de)(de)右側(ce)視圖(tu)(其(qi)中(zhong)上(shang)部(bu)分為(wei)局(ju)部(bu)放大圖(tu)),當然亦可(ke)(ke)不采(cai)用(yong)(yong)層(ceng)(ceng)疊技(ji)術(shu),如圖(tu)10中(zhong)的(de)(de)左側(ce)視圖(tu)(其(qi)中(zhong)上(shang)部(bu)分為(wei)局(ju)部(bu)放大圖(tu)),若采(cai)用(yong)(yong)層(ceng)(ceng)疊技(ji)術(shu),上(shang)面一(yi)(yi)層(ceng)(ceng)是感光單元陣(zhen)列層(ceng)(ceng),下面一(yi)(yi)層(ceng)(ceng)是邏輯電路,作為(wei)本(ben)發明實(shi)施例的(de)(de)一(yi)(yi)個可(ke)(ke)實(shi)現方式(shi),圖(tu)像傳感器可(ke)(ke)以為(wei)3d堆疊式(shi)(stacked)cmos,如此,上(shang)層(ceng)(ceng)得到(dao)的(de)(de)數據可(ke)(ke)直接傳送到(dao)下層(ceng)(ceng)進行景深計算,完全(quan)是硬件實(shi)現,可(ke)(ke)以按照(zhao)每行的(de)(de)輸出直接計算,計算速度快,實(shi)時輸出,沒有延時。
基于上述實(shi)施例(li)(li)提供(gong)的(de)圖(tu)像采集(ji)裝置,本發明(ming)實(shi)施例(li)(li)還提供(gong)了一種(zhong)電(dian)子設(she)備(bei),圖(tu)11為本發明(ming)實(shi)施例(li)(li)中(zhong)電(dian)子設(she)備(bei)的(de)組成結構示(shi)意圖(tu),如圖(tu)11所(suo)示(shi),本發明(ming)實(shi)施例(li)(li)中(zhong)電(dian)子設(she)備(bei)的(de)組成包括:
一個圖像采(cai)集裝置21,包括:設(she)置有多個感(gan)(gan)(gan)光(guang)(guang)單(dan)(dan)元(yuan)(yuan)的(de)感(gan)(gan)(gan)光(guang)(guang)單(dan)(dan)元(yuan)(yuan)陣(zhen)(zhen)列(lie)層(ceng),每(mei)個所述感(gan)(gan)(gan)光(guang)(guang)單(dan)(dan)元(yuan)(yuan)包括以特(te)定距離(li)對稱設(she)置的(de)第(di)一感(gan)(gan)(gan)光(guang)(guang)子(zi)(zi)單(dan)(dan)元(yuan)(yuan)和第(di)二(er)感(gan)(gan)(gan)光(guang)(guang)子(zi)(zi)單(dan)(dan)元(yuan)(yuan);其中(zhong),所述感(gan)(gan)(gan)光(guang)(guang)單(dan)(dan)元(yuan)(yuan)陣(zhen)(zhen)列(lie)層(ceng)中(zhong)的(de)第(di)一感(gan)(gan)(gan)光(guang)(guang)子(zi)(zi)單(dan)(dan)元(yuan)(yuan)形成(cheng)第(di)一子(zi)(zi)陣(zhen)(zhen)列(lie);所述感(gan)(gan)(gan)光(guang)(guang)單(dan)(dan)元(yuan)(yuan)陣(zhen)(zhen)列(lie)層(ceng)中(zhong)的(de)第(di)二(er)感(gan)(gan)(gan)光(guang)(guang)子(zi)(zi)單(dan)(dan)元(yuan)(yuan)形成(cheng)第(di)二(er)子(zi)(zi)陣(zhen)(zhen)列(lie);
所述(shu)(shu)(shu)圖像(xiang)采集裝(zhuang)置21,用于刷(shua)新(xin)所述(shu)(shu)(shu)感(gan)光(guang)單元陣列(lie)(lie)層的(de)第一(yi)子陣列(lie)(lie),得到所述(shu)(shu)(shu)第一(yi)子陣列(lie)(lie)感(gan)應環境中(zhong)光(guang)線形成的(de)第一(yi)圖像(xiang)信號;
刷新所(suo)(suo)述感(gan)光單元陣列層的(de)(de)第(di)二(er)(er)子(zi)陣列,得到(dao)所(suo)(suo)述第(di)二(er)(er)子(zi)陣列感(gan)應環境中光線形成的(de)(de)第(di)二(er)(er)圖像信號;
根(gen)據(ju)所述(shu)第一圖(tu)像(xiang)信(xin)號(hao)(hao)、所述(shu)第二圖(tu)像(xiang)信(xin)號(hao)(hao)中成像(xiang)的視差(cha)計算深度,并融合所述(shu)第一圖(tu)像(xiang)信(xin)號(hao)(hao)、所述(shu)第二圖(tu)像(xiang)信(xin)號(hao)(hao)以(yi)及所述(shu)深度形成深度圖(tu)像(xiang)信(xin)號(hao)(hao);
輸(shu)出所(suo)述(shu)深度圖像信號(hao)及對應所(suo)述(shu)深度圖像信號(hao)的原始圖像信號(hao);
第二(er)處理(li)器22,用于(yu)(yu)基于(yu)(yu)所述深(shen)度(du)圖像(xiang)信號(hao)中目標對象的(de)深(shen)度(du),對所述原始圖像(xiang)信號(hao)進行處理(li);
或者,基(ji)于所述(shu)原始圖(tu)像(xiang)信號控制輸出顯示原始圖(tu)像(xiang)。
在一(yi)實施例中,所述第二處(chu)理器(qi)22,還用于識別出所述深度圖像信號中目標對象(xiang)的深度;
對所(suo)述(shu)原始圖像信號中位于對應所(suo)述(shu)深度(du)的焦平面(mian)以(yi)外(wai)的成像區域,進(jin)行模糊化處理。如此,形(xing)成目標對象突出,其它部分模糊的圖像,提高用戶體驗(yan)。
這里(li),所(suo)述模(mo)糊(hu)(hu)化處理(li)具體可(ke)以為與距離正相(xiang)關的模(mo)糊(hu)(hu)化處理(li),即(ji)距離焦平(ping)面越(yue)遠(yuan)越(yue)模(mo)糊(hu)(hu)。
在一實(shi)施例(li)中(zhong),所(suo)述圖像(xiang)采集裝置(zhi)21,還用于對(dui)所(suo)述感光(guang)單(dan)元陣(zhen)列層輸(shu)出的(de)所(suo)述第一圖像(xiang)信號、所(suo)述第二圖像(xiang)信號進(jin)行預(yu)處(chu)理(li);這里的(de)預(yu)處(chu)理(li)可(ke)以(yi)包括:自動(dong)(dong)曝光(guang)控制(zhi)、自動(dong)(dong)增益控制(zhi)、自動(dong)(dong)白平衡、色彩校(xiao)正、gamma校(xiao)正、祛除壞點等等。
以及,根據各像(xiang)(xiang)素(su)點在所述第(di)(di)一圖(tu)像(xiang)(xiang)信(xin)號(hao)、所述第(di)(di)二(er)圖(tu)像(xiang)(xiang)信(xin)號(hao)的(de)(de)成(cheng)像(xiang)(xiang)位置差異(yi)、與到成(cheng)像(xiang)(xiang)平面的(de)(de)距離的(de)(de)反比(bi)例關系(xi)計(ji)算相應像(xiang)(xiang)素(su)點的(de)(de)深(shen)(shen)度,將各像(xiang)(xiang)素(su)點的(de)(de)深(shen)(shen)度以及在第(di)(di)一圖(tu)像(xiang)(xiang)信(xin)號(hao)、第(di)(di)二(er)圖(tu)像(xiang)(xiang)信(xin)號(hao)的(de)(de)顏色信(xin)息融(rong)合(he),形成(cheng)所述深(shen)(shen)度圖(tu)像(xiang)(xiang)信(xin)號(hao)。這里(li),對深(shen)(shen)度的(de)(de)計(ji)算原(yuan)理參見圖(tu)像(xiang)(xiang)采集裝(zhuang)置中的(de)(de)原(yuan)理介紹。
在(zai)一實(shi)施例中,所(suo)述(shu)圖(tu)像(xiang)采(cai)集裝置21,還用(yong)于同步刷新所(suo)述(shu)感(gan)光(guang)(guang)單(dan)元(yuan)(yuan)陣列層的(de)第(di)(di)一子(zi)陣列和所(suo)述(shu)第(di)(di)二(er)子(zi)陣列,得到(dao)所(suo)述(shu)感(gan)光(guang)(guang)單(dan)元(yuan)(yuan)陣列層的(de)全部感(gan)光(guang)(guang)子(zi)單(dan)元(yuan)(yuan)感(gan)應(ying)環(huan)境中光(guang)(guang)線(xian)形成的(de)所(suo)述(shu)原始圖(tu)像(xiang)信號(hao)(hao)。也(ye)(ye)就是說,將(jiang)每個(ge)感(gan)光(guang)(guang)單(dan)元(yuan)(yuan)中的(de)第(di)(di)一感(gan)光(guang)(guang)子(zi)單(dan)元(yuan)(yuan)和第(di)(di)二(er)感(gan)光(guang)(guang)子(zi)單(dan)元(yuan)(yuan)結(jie)合,看作一個(ge)整體,輸(shu)出基(ji)于每個(ge)感(gan)光(guang)(guang)單(dan)感(gan)應(ying)環(huan)境中光(guang)(guang)線(xian)形成的(de)原始圖(tu)像(xiang)信號(hao)(hao),也(ye)(ye)即,將(jiang)第(di)(di)一圖(tu)像(xiang)信號(hao)(hao)、第(di)(di)二(er)圖(tu)像(xiang)信號(hao)(hao)疊(die)加得到(dao)的(de)圖(tu)像(xiang)信號(hao)(hao)。
在一實施(shi)例中,所(suo)述圖像(xiang)采集(ji)裝置21,還用于對所(suo)述感(gan)光單元陣(zhen)列層輸出的模擬信(xin)(xin)號(hao)(hao)類型的圖像(xiang)信(xin)(xin)號(hao)(hao)進(jin)行放大,對放大后的圖像(xiang)信(xin)(xin)號(hao)(hao)進(jin)行增益(yi)控制,并將所(suo)述感(gan)光單元陣(zhen)列層輸出的圖像(xiang)信(xin)(xin)號(hao)(hao)進(jin)行模數轉換,得到預定位寬的數字圖像(xiang)信(xin)(xin)號(hao)(hao)。
在一(yi)實施例中,所(suo)述(shu)圖像(xiang)(xiang)(xiang)采集(ji)裝置21,還用于根據先(xian)入先(xian)出的方式,將(jiang)傳輸至所(suo)述(shu)輸出接口的所(suo)述(shu)深度圖像(xiang)(xiang)(xiang)信(xin)號和/或所(suo)述(shu)原始(shi)圖像(xiang)(xiang)(xiang)信(xin)號輸出至所(suo)述(shu)第二處(chu)理器。
應(ying)用(yong)本發(fa)明上述電(dian)子(zi)設(she)(she)備(bei)的實施(shi)例(li),所述電(dian)子(zi)設(she)(she)備(bei)僅采用(yong)一個圖(tu)像(xiang)采集裝置便實現了原始圖(tu)像(xiang)信(xin)號及深(shen)度(du)圖(tu)像(xiang)信(xin)號的獲取,無需(xu)光學(xue)校(xiao)準(zhun),并(bing)可基于深(shen)度(du)圖(tu)像(xiang)信(xin)號中目標(biao)對(dui)象(xiang)的深(shen)度(du),對(dui)原始圖(tu)像(xiang)信(xin)號進行處(chu)理,得(de)到(dao)預(yu)設(she)(she)需(xu)求的圖(tu)像(xiang);如此,減小了具備(bei)景(jing)深(shen)計(ji)算的電(dian)子(zi)設(she)(she)備(bei)的體積,降低了實現成本。
以(yi)上所(suo)述,僅為本發明(ming)(ming)的具體實施方式,但本發明(ming)(ming)的保(bao)護(hu)范(fan)圍并不局限(xian)于此,任何熟悉(xi)本技術(shu)領域的技術(shu)人員在本發明(ming)(ming)揭露的技術(shu)范(fan)圍內,可輕(qing)易想到變化或(huo)替換(huan),都應涵蓋在本發明(ming)(ming)的保(bao)護(hu)范(fan)圍之內。因此,本發明(ming)(ming)的保(bao)護(hu)范(fan)圍應以(yi)所(suo)述權利(li)要求的保(bao)護(hu)范(fan)圍為準。