本發明(ming)涉及(ji)一(yi)種(zhong)監測方(fang)法、裝(zhuang)置(zhi)及(ji)系統(tong)，特別是一(yi)種(zhong)智能售貨(huo)柜商品監測方(fang)法、裝(zhuang)置(zhi)及(ji)系統(tong)，屬于(yu)智能售貨(huo)。

背景技術：

1、智(zhi)(zhi)能售貨柜由于占地(di)小(xiao)，且能夠24小(xiao)時無(wu)(wu)人營業，無(wu)(wu)需像(xiang)傳統的(de)(de)(de)零售商(shang)(shang)店(dian)那(nei)樣需要(yao)固(gu)定的(de)(de)(de)經(jing)營場(chang)所，因此(ci)能夠十分方(fang)便地(di)在商(shang)(shang)場(chang)、公園以及(ji)(ji)路邊等(deng)各種場(chang)景進行部(bu)署，越(yue)來(lai)越(yue)受(shou)(shou)到消費者的(de)(de)(de)青睞。傳統的(de)(de)(de)智(zhi)(zhi)能售貨柜主要(yao)依托與rfid技(ji)(ji)(ji)術以及(ji)(ji)重(zhong)力(li)傳感器，rfid成本高(gao)且無(wu)(wu)法應用(yong)在液體以及(ji)(ji)鐵盒等(deng)商(shang)(shang)品上，而重(zhong)力(li)傳感器則無(wu)(wu)法分辨同樣重(zhong)量(liang)的(de)(de)(de)商(shang)(shang)品，識別(bie)受(shou)(shou)到極(ji)大(da)的(de)(de)(de)限(xian)制(zhi)。因此(ci)隨著(zhu)智(zhi)(zhi)能技(ji)(ji)(ji)術的(de)(de)(de)發展(zhan)，逐步采用(yong)了以神(shen)經(jing)網絡為(wei)代表的(de)(de)(de)圖像(xiang)識別(bie)技(ji)(ji)(ji)術，其識別(bie)精度高(gao)且沒有商(shang)(shang)品以及(ji)(ji)重(zhong)量(liang)等(deng)限(xian)制(zhi)。但是由于神(shen)經(jing)網絡模型識別(bie)準確率與數據庫(ku)樣本量(liang)直接掛鉤，則為(wei)了保(bao)證識別(bie)的(de)(de)(de)精度，數據庫(ku)的(de)(de)(de)樣本量(liang)很大(da)，造成了每一(yi)次識別(bie)都需要(yao)進行大(da)量(liang)的(de)(de)(de)數據運(yun)算，造成商(shang)(shang)品識別(bie)的(de)(de)(de)延時很大(da)。

技術實現思路

1、本(ben)發明(ming)所要(yao)解決(jue)的技術問題是提供一種智能售貨(huo)柜商品(pin)監測方法、裝置(zhi)及系統(tong)，提高神經網絡(luo)識別商品(pin)的效率。

2、為解(jie)決上述技術問題，本發明所采用的技術方案是：

3、一種(zhong)智能售貨柜商品監測方法，包(bao)含以下步驟：

4、s1、對智(zhi)能(neng)售貨柜設置不(bu)同的單元層(ceng)；

5、s2、為每一個(ge)單(dan)元層(ceng)設(she)置商品放置種類，采集需要放置在(zai)對應單(dan)元層(ceng)的(de)所有商品的(de)各方向的(de)圖像(xiang)(xiang)信(xin)息，并建(jian)立該單(dan)元層(ceng)所有商品的(de)圖像(xiang)(xiang)信(xin)息庫；

6、s3、對(dui)(dui)每一個單元層對(dui)(dui)應的所有商品的圖像信息庫以神經(jing)網(wang)絡模型訓練對(dui)(dui)應的商品識別模型；

7、s4、對每一(yi)個單元層，設(she)置商(shang)品拿取傳感器對商(shang)品拿取進行識別；

8、s5、一個單(dan)元(yuan)層(ceng)中(zhong)商品拿(na)取后，商品攝像(xiang)頭(tou)采集拿(na)取商品的圖(tu)像(xiang)信(xin)息(xi)，在(zai)圖(tu)像(xiang)信(xin)息(xi)上(shang)加上(shang)單(dan)元(yuan)層(ceng)標簽信(xin)息(xi)，并(bing)上(shang)傳(chuan)至服務(wu)器；

9、s6、服務器將接收(shou)到的拿(na)取商(shang)品(pin)(pin)的圖像信息進行(xing)解析(xi)，獲取單元層(ceng)標簽信息，并找到與單元層(ceng)標簽信息對應的商(shang)品(pin)(pin)識(shi)別模(mo)型并以該商(shang)品(pin)(pin)識(shi)別模(mo)型對拿(na)取商(shang)品(pin)(pin)的圖像信息進行(xing)識(shi)別。

10、進一步(bu)地，所(suo)述步(bu)驟s2具體為，為每一個(ge)(ge)單元層(ceng)設置商(shang)(shang)(shang)品(pin)放置種類，對于(yu)智能售貨(huo)柜(ju)需要售賣的(de)(de)(de)(de)(de)所(suo)有(you)(you)的(de)(de)(de)(de)(de)商(shang)(shang)(shang)品(pin)，并且根據智能售貨(huo)柜(ju)的(de)(de)(de)(de)(de)單元層(ceng)的(de)(de)(de)(de)(de)層(ceng)數(shu)，將(jiang)智能售貨(huo)柜(ju)需要售賣的(de)(de)(de)(de)(de)所(suo)有(you)(you)的(de)(de)(de)(de)(de)商(shang)(shang)(shang)品(pin)分(fen)成數(shu)量(liang)與智能售貨(huo)柜(ju)的(de)(de)(de)(de)(de)單元層(ceng)的(de)(de)(de)(de)(de)層(ceng)數(shu)相等的(de)(de)(de)(de)(de)商(shang)(shang)(shang)品(pin)類，然(ran)后采集(ji)需要放置在對應(ying)單元層(ceng)的(de)(de)(de)(de)(de)所(suo)有(you)(you)商(shang)(shang)(shang)品(pin)的(de)(de)(de)(de)(de)各(ge)方(fang)向的(de)(de)(de)(de)(de)圖(tu)像(xiang)信息(xi)(xi)(xi)，即(ji)采集(ji)一個(ge)(ge)商(shang)(shang)(shang)品(pin)類中(zhong)的(de)(de)(de)(de)(de)所(suo)有(you)(you)商(shang)(shang)(shang)品(pin)的(de)(de)(de)(de)(de)各(ge)個(ge)(ge)不同(tong)方(fang)向和視角(jiao)的(de)(de)(de)(de)(de)圖(tu)像(xiang)信息(xi)(xi)(xi)，并以(yi)這些圖(tu)像(xiang)信息(xi)(xi)(xi)建立該(gai)單元層(ceng)所(suo)有(you)(you)商(shang)(shang)(shang)品(pin)的(de)(de)(de)(de)(de)圖(tu)像(xiang)信息(xi)(xi)(xi)庫。

11、進一步地，所述步驟s3具體為，對(dui)(dui)每一個單元層對(dui)(dui)應(ying)的(de)(de)所有(you)商品的(de)(de)圖(tu)(tu)像(xiang)信(xin)息庫，以該(gai)商品類的(de)(de)圖(tu)(tu)像(xiang)信(xin)息庫為基(ji)礎(chu)通過神經(jing)網絡模型訓練對(dui)(dui)應(ying)的(de)(de)商品識別模型。

12、進一步地，所述步驟s4中，商品(pin)拿取傳感(gan)器(qi)(qi)采(cai)用光柵傳感(gan)器(qi)(qi)或者重(zhong)量傳感(gan)器(qi)(qi)。

13、進一步地，所述步驟s5具體為(wei)，一個單元(yuan)層(ceng)中商(shang)品(pin)(pin)拿取后(hou)，商(shang)品(pin)(pin)拿取傳(chuan)感器檢測到商(shang)品(pin)(pin)被拿取并(bing)反饋拿取信號(hao)，控(kong)制器接(jie)收到反饋的拿取信號(hao)后(hou)控(kong)制商(shang)品(pin)(pin)攝像頭開(kai)啟，商(shang)品(pin)(pin)攝像頭采(cai)集(ji)拿取商(shang)品(pin)(pin)的圖(tu)像信息(xi)(xi)，并(bing)在圖(tu)像信息(xi)(xi)上加上單元(yuan)層(ceng)標(biao)簽(qian)信息(xi)(xi)，然后(hou)上傳(chuan)至服務器。

14、進(jin)一(yi)步(bu)地(di)，所述步(bu)驟(zou)s6具(ju)體為，服務器(qi)(qi)將(jiang)接收到的拿(na)取商(shang)品(pin)的圖像信(xin)(xin)息(xi)(xi)(xi)進(jin)行解析(xi)，獲取其(qi)中的單(dan)(dan)(dan)元(yuan)層(ceng)標(biao)(biao)簽(qian)(qian)信(xin)(xin)息(xi)(xi)(xi)，服務器(qi)(qi)數據庫中單(dan)(dan)(dan)元(yuan)層(ceng)標(biao)(biao)簽(qian)(qian)信(xin)(xin)息(xi)(xi)(xi)與對應(ying)的商(shang)品(pin)識別模型(xing)(xing)建立一(yi)一(yi)對應(ying)的映(ying)射關系，則解析(xi)得(de)到單(dan)(dan)(dan)元(yuan)層(ceng)標(biao)(biao)簽(qian)(qian)信(xin)(xin)息(xi)(xi)(xi)后(hou)即能夠通過映(ying)射關系找到與單(dan)(dan)(dan)元(yuan)層(ceng)標(biao)(biao)簽(qian)(qian)信(xin)(xin)息(xi)(xi)(xi)對應(ying)的商(shang)品(pin)識別模型(xing)(xing)，然(ran)后(hou)以該商(shang)品(pin)識別模型(xing)(xing)對拿(na)取商(shang)品(pin)的圖像信(xin)(xin)息(xi)(xi)(xi)進(jin)行識別。

15、一(yi)種智能(neng)售貨(huo)(huo)(huo)(huo)柜(ju)(ju)商(shang)品監測裝置(zhi)，包含智能(neng)售貨(huo)(huo)(huo)(huo)柜(ju)(ju)柜(ju)(ju)體(ti)，智能(neng)售貨(huo)(huo)(huo)(huo)柜(ju)(ju)柜(ju)(ju)體(ti)內設(she)置(zhi)有多(duo)道層(ceng)板(ban)將智能(neng)售貨(huo)(huo)(huo)(huo)柜(ju)(ju)柜(ju)(ju)體(ti)內部分割為多(duo)個(ge)單元(yuan)層(ceng)，每(mei)一(yi)個(ge)單元(yuan)層(ceng)的前側(ce)的上下層(ceng)板(ban)之(zhi)間設(she)置(zhi)有光柵傳(chuan)感器，每(mei)一(yi)個(ge)單元(yuan)層(ceng)的下側(ce)層(ceng)板(ban)設(she)置(zhi)有重(zhong)量傳(chuan)感器，智能(neng)售貨(huo)(huo)(huo)(huo)柜(ju)(ju)柜(ju)(ju)體(ti)的前方設(she)置(zhi)有至少一(yi)個(ge)商(shang)品攝像頭。

16、一種智能(neng)售貨(huo)柜商品(pin)監測系統，包含智能(neng)售貨(huo)柜、控(kong)制(zhi)器(qi)、至少(shao)(shao)一個商品(pin)攝像(xiang)頭(tou)(tou)、交換(huan)機、路由器(qi)和服務器(qi)，智能(neng)售貨(huo)柜內(nei)設置有多(duo)個單元層(ceng)，每一個單元層(ceng)設置有商品(pin)拿(na)取傳(chuan)(chuan)感(gan)器(qi)并(bing)(bing)且(qie)商品(pin)拿(na)取傳(chuan)(chuan)感(gan)器(qi)與(yu)控(kong)制(zhi)器(qi)連(lian)接，至少(shao)(shao)一個商品(pin)攝像(xiang)頭(tou)(tou)設置在智能(neng)售貨(huo)柜前方并(bing)(bing)且(qie)與(yu)控(kong)制(zhi)器(qi)連(lian)接，多(duo)個控(kong)制(zhi)器(qi)通(tong)過交換(huan)機互(hu)聯，交換(huan)機通(tong)過路由器(qi)與(yu)服務器(qi)遠程連(lian)接。

17、本發明與現有(you)技術相(xiang)比，具有(you)以(yi)下優點和效(xiao)(xiao)果：本發明提供了(le)(le)(le)一(yi)種智能售貨(huo)柜(ju)商品(pin)監測(ce)方(fang)法、裝置(zhi)及系統，通過(guo)將智能售貨(huo)柜(ju)的(de)(de)(de)(de)(de)商品(pin)進(jin)行規則分(fen)(fen)類，然(ran)后以(yi)分(fen)(fen)類后的(de)(de)(de)(de)(de)商品(pin)類分(fen)(fen)別訓練(lian)不(bu)同的(de)(de)(de)(de)(de)商品(pin)識(shi)(shi)(shi)(shi)別模(mo)型，配合商品(pin)拿取(qu)傳感(gan)器檢測(ce)用(yong)戶拿取(qu)哪(na)一(yi)類的(de)(de)(de)(de)(de)商品(pin)類，然(ran)后調用(yong)相(xiang)應類別的(de)(de)(de)(de)(de)商品(pin)識(shi)(shi)(shi)(shi)別模(mo)型進(jin)行商品(pin)識(shi)(shi)(shi)(shi)別，這樣大(da)大(da)降低了(le)(le)(le)商品(pin)識(shi)(shi)(shi)(shi)別模(mo)型的(de)(de)(de)(de)(de)樣本量，減少了(le)(le)(le)模(mo)型計算的(de)(de)(de)(de)(de)時間，提高了(le)(le)(le)商品(pin)識(shi)(shi)(shi)(shi)別的(de)(de)(de)(de)(de)效(xiao)(xiao)率。

1.一種(zhong)智能售(shou)貨柜商品監測方法，其特征在于包含(han)以下步(bu)驟(zou)：

2.根據權利要(yao)求1所(suo)(suo)(suo)述(shu)的(de)(de)(de)(de)一種智能(neng)(neng)售(shou)(shou)貨柜商(shang)(shang)品監測方(fang)法，其(qi)特征在于：所(suo)(suo)(suo)述(shu)步驟s2具體為，為每一個單(dan)(dan)元層(ceng)(ceng)設置(zhi)商(shang)(shang)品放置(zhi)種類，對(dui)于智能(neng)(neng)售(shou)(shou)貨柜需(xu)要(yao)售(shou)(shou)賣(mai)的(de)(de)(de)(de)所(suo)(suo)(suo)有(you)(you)的(de)(de)(de)(de)商(shang)(shang)品，并且根據智能(neng)(neng)售(shou)(shou)貨柜的(de)(de)(de)(de)單(dan)(dan)元層(ceng)(ceng)的(de)(de)(de)(de)層(ceng)(ceng)數，將智能(neng)(neng)售(shou)(shou)貨柜需(xu)要(yao)售(shou)(shou)賣(mai)的(de)(de)(de)(de)所(suo)(suo)(suo)有(you)(you)的(de)(de)(de)(de)商(shang)(shang)品分成數量與智能(neng)(neng)售(shou)(shou)貨柜的(de)(de)(de)(de)單(dan)(dan)元層(ceng)(ceng)的(de)(de)(de)(de)層(ceng)(ceng)數相等的(de)(de)(de)(de)商(shang)(shang)品類，然(ran)后采集需(xu)要(yao)放置(zhi)在對(dui)應單(dan)(dan)元層(ceng)(ceng)的(de)(de)(de)(de)所(suo)(suo)(suo)有(you)(you)商(shang)(shang)品的(de)(de)(de)(de)各方(fang)向的(de)(de)(de)(de)圖(tu)像(xiang)信息(xi)，即采集一個商(shang)(shang)品類中的(de)(de)(de)(de)所(suo)(suo)(suo)有(you)(you)商(shang)(shang)品的(de)(de)(de)(de)各個不同方(fang)向和視角的(de)(de)(de)(de)圖(tu)像(xiang)信息(xi)，并以這(zhe)些圖(tu)像(xiang)信息(xi)建立該單(dan)(dan)元層(ceng)(ceng)所(suo)(suo)(suo)有(you)(you)商(shang)(shang)品的(de)(de)(de)(de)圖(tu)像(xiang)信息(xi)庫。

3.根據權(quan)利(li)要求(qiu)1所(suo)述(shu)的一種(zhong)智能售貨柜(ju)商(shang)品監測方法，其特(te)征在于：所(suo)述(shu)步驟s3具(ju)體為(wei)，對每一個(ge)單元層(ceng)對應的所(suo)有商(shang)品的圖像信息(xi)庫，以(yi)該商(shang)品類的圖像信息(xi)庫為(wei)基(ji)礎通過(guo)神經網絡模型訓(xun)練對應的商(shang)品識別(bie)模型。

4.根據權利要(yao)求1所(suo)述的(de)一種智(zhi)能售貨柜商品(pin)監測方法，其特征在于：所(suo)述步驟s4中，商品(pin)拿取傳(chuan)感器采用光柵傳(chuan)感器或者重量(liang)傳(chuan)感器。

5.根據權利要求1所述的一種智能售貨柜商(shang)(shang)品監測(ce)(ce)方(fang)法，其特征在于：所述步驟s5具體(ti)為，一個單(dan)元層(ceng)中(zhong)商(shang)(shang)品拿(na)取后，商(shang)(shang)品拿(na)取傳(chuan)感(gan)器檢(jian)測(ce)(ce)到(dao)商(shang)(shang)品被拿(na)取并反(fan)饋拿(na)取信號(hao)，控制器接收(shou)到(dao)反(fan)饋的拿(na)取信號(hao)后控制商(shang)(shang)品攝像(xiang)頭開啟，商(shang)(shang)品攝像(xiang)頭采集拿(na)取商(shang)(shang)品的圖像(xiang)信息(xi)，并在圖像(xiang)信息(xi)上(shang)加上(shang)單(dan)元層(ceng)標簽信息(xi)，然(ran)后上(shang)傳(chuan)至服務(wu)器。

6.根據權利(li)要求1所(suo)述的(de)一(yi)種智能售(shou)貨柜商品監測方法(fa)，其(qi)特(te)征在于：所(suo)述步驟s6具體為，服務(wu)器將接收到的(de)拿(na)取商品的(de)圖像(xiang)信(xin)(xin)息(xi)(xi)(xi)進行解析(xi)(xi)，獲取其(qi)中(zhong)的(de)單(dan)元層(ceng)標(biao)簽(qian)(qian)信(xin)(xin)息(xi)(xi)(xi)，服務(wu)器數據庫中(zhong)單(dan)元層(ceng)標(biao)簽(qian)(qian)信(xin)(xin)息(xi)(xi)(xi)與(yu)(yu)對(dui)(dui)應的(de)商品識別模(mo)型(xing)建立一(yi)一(yi)對(dui)(dui)應的(de)映(ying)射關系，則解析(xi)(xi)得到單(dan)元層(ceng)標(biao)簽(qian)(qian)信(xin)(xin)息(xi)(xi)(xi)后即能夠通過(guo)映(ying)射關系找(zhao)到與(yu)(yu)單(dan)元層(ceng)標(biao)簽(qian)(qian)信(xin)(xin)息(xi)(xi)(xi)對(dui)(dui)應的(de)商品識別模(mo)型(xing)，然后以該商品識別模(mo)型(xing)對(dui)(dui)拿(na)取商品的(de)圖像(xiang)信(xin)(xin)息(xi)(xi)(xi)進行識別。

7.一種智能(neng)(neng)售(shou)貨(huo)柜(ju)商品監測裝置(zhi)，其特(te)征在于：包(bao)含智能(neng)(neng)售(shou)貨(huo)柜(ju)柜(ju)體，智能(neng)(neng)售(shou)貨(huo)柜(ju)柜(ju)體內設(she)置(zhi)有(you)多道層(ceng)(ceng)板將(jiang)智能(neng)(neng)售(shou)貨(huo)柜(ju)柜(ju)體內部分割為多個(ge)單(dan)(dan)元(yuan)層(ceng)(ceng)，每(mei)一個(ge)單(dan)(dan)元(yuan)層(ceng)(ceng)的前側的上下層(ceng)(ceng)板之間設(she)置(zhi)有(you)光柵傳(chuan)感器(qi)，每(mei)一個(ge)單(dan)(dan)元(yuan)層(ceng)(ceng)的下側層(ceng)(ceng)板設(she)置(zhi)有(you)重量傳(chuan)感器(qi)，智能(neng)(neng)售(shou)貨(huo)柜(ju)柜(ju)體的前方設(she)置(zhi)有(you)至少一個(ge)商品攝像頭。

8.一(yi)種智(zhi)能(neng)(neng)售(shou)(shou)貨柜(ju)商(shang)品監(jian)測系統，其特征在(zai)于：包含智(zhi)能(neng)(neng)售(shou)(shou)貨柜(ju)、控制器(qi)(qi)、至(zhi)少一(yi)個(ge)(ge)商(shang)品攝像(xiang)頭(tou)、交換機(ji)、路(lu)由器(qi)(qi)和服務器(qi)(qi)，智(zhi)能(neng)(neng)售(shou)(shou)貨柜(ju)內設置(zhi)有多個(ge)(ge)單元層(ceng)，每一(yi)個(ge)(ge)單元層(ceng)設置(zhi)有商(shang)品拿(na)取傳感(gan)器(qi)(qi)并(bing)且(qie)商(shang)品拿(na)取傳感(gan)器(qi)(qi)與控制器(qi)(qi)連接，至(zhi)少一(yi)個(ge)(ge)商(shang)品攝像(xiang)頭(tou)設置(zhi)在(zai)智(zhi)能(neng)(neng)售(shou)(shou)貨柜(ju)前方并(bing)且(qie)與控制器(qi)(qi)連接，多個(ge)(ge)控制器(qi)(qi)通過交換機(ji)互(hu)聯，交換機(ji)通過路(lu)由器(qi)(qi)與服務器(qi)(qi)遠程連接。