專利名稱：場景切換點檢測器、記錄和重現裝置、事件生成器和方法
技術領域：
本發明涉及場景切換點檢測器、場景切換點檢測方法、記錄裝置、事件 生成器、事件生成方法、重現裝置和計算機程序，其適合應用于記錄和重現
視頻信號的DVD記錄器、HD記錄器等。
更具體地，本發明涉及一種場景切換點檢測器等，其可以通過按照順序 將在輸入視頻信號的每個固定時間處的每個目標幀設置為相似度計算幀，基 于相似度計算幀和時間上位于相似度計算幀之前的預定數目的目標幀的特征 信息來計算反向相似度，基于相似度計算幀和時間上位于相似度計算幀之后 的預定數目的目標幀的特征信息來計算正向相似度，以及基于每個目標幀的 反向相似度和正向相似度來檢測形成場景切換點的目標幀，以適當的間隔檢 測場景切換點。
本發明還涉及一種事件生成器等，其可以通過將從關于多個系統中的場 景切換點的信息獲得的每個場景切換點設置為事件候選點，并且基于根據關 于多個系統中的場景切換點的信息計算的每個事件候選點的分數，選擇預定 點來設置為事件。
背景技術：
在過去，當由DVD記錄器、HD記錄器等記錄涉及電視廣播、由攝像機 成像的視頻信號等的視頻信號時，可以想象的是檢測場景切換點、與視頻信 號關聯地記錄關于場景切換點的信息，并且使用該信息作為關于用于檢查內 容或搜索編輯點的重現跳過點位置的信息(參見例如JP-A-2002-27411 )。
在過去，作為檢測場景切換點的方法，已經提出了各種方法，如分析視 頻信號以檢測場景切換點的方法和分析與視頻信號相關聯記錄的聲音信號以 檢測場景切換點的方法。

發明內容
當關于場景改變點的信息用作關于場景切換點的信息時，出現了以下所述的問題。在涉及電視廣播的視頻信號的情況下，場景改變的頻率高。當用 戶執行用于跳過重現位置以便檢查內容或搜索編輯點的操作時，跳過操作被 執行許多次并且操作復雜。
在由攝像機成像的視頻信號(個人內容)的情況下， 一個場景的長度實 際上波動，并且在一些情況下，該長度等于或長于IO分鐘。因此，當用戶執 行用于跳過重現位置以便檢查內容或搜索編輯點的操作時，由于跳過間隔實 際上波動，所以困擾了用戶。
因此，期望以適當的間隔檢測場景切換點。還期望從關于多個系統中的 場景切換點的信息令人滿意地生成例如可以用作重現跳過位置信息的事件。
根據本發明的實施例，提供了一種場景切換點檢測器，包括
特征信息生成單元，其將在每個固定時間處的幀設置為目標幀，并且生 成指示每個目標幀的特征的特征信息；
反向相似度計算單元，其按照順序設置每個目標幀作為相似度計算幀， 并且基于由特征信息生成單元生成的相似度計算幀的特征信息、和時間上位 于所述相似度計算幀之前的預定數目的目標幀的特征信息，計算反向相似度；
正向相似度計算單元，其按照順序設置每個目標幀作為相似度計算幀， 并且基于由特征信息生成單元生成的相似度計算幀的特征信息、和時間上位 于所述相似度計算幀之后的預定數目的目標幀的特征信息，計算正向相似度； 以及
場景切換點檢測器，其基于由反向相似度計算單元計算的每個目標幀的 反向相似度和由正向相似度計算單元計算的每個目標幀的正向相似度來檢測 形成場景切換點的目標幀。
在該實施例中，在輸入視頻信號的每個固定時間處的幀設置為用于檢測 場景切換點的目標幀。特征信息生成單元生成指示每個目標幀的圖像的特征 的特征信息。
設置每個目標幀作為相似度計算幀。反向相似度計算單元基于相似度計 算幀的特征信息和時間上位于所述相似度計算幀之前的預定數目的目標幀的 特征信息計算反向相似度。例如，反向相似度計算單元通過計算相似度計算
幀和時間上位于所述相似度計算幀之前的預定數目的目標幀之間的相似度并 且計算各相似度的和來計算反向相似度。
當特征信息是特征矢量時，通過計算各特征矢量之間的距離獲得相似度200910009839.0
計算幀和位于所述相似度計算幀之前的預定數目的目標幀之間的相似度。
正向相似度計算單元基于相似度計算幀的特征信息和時間上位于相似度計算幀之后的預定數目的目標幀的特征信息計算正向相似度。例如，正向相似度計算單元通過以與計算反向相似度相同的方式計算相似度計算幀和時間上位于相似度計算幀之后的預定數目的目標幀之間的相似度并且計算各相似度的和，來計算正向相似度。
場景切換點檢測單元基于如上所述計算的每個目標幀的反向相似度和每個目標幀的正向相似度來檢測形成場景切換點的目標幀。例如，將其反向相似度突然下降并且正向相似度突然上升的目標幀設為形成場景切換點的目標幀。
如上所述，基于目標幀的反向相似度和目標幀的正向相似度檢測場景切換點(形成場景切換點的目標幀)。因此，因為組合了相互類似到一定程度的
場景，所以可以以適當的間隔;險測場景切換點。
優選的是，例如，場景切換點檢測器還包括場景改變點檢測單元，其按照順序設置每個目標幀作為場景改變檢測幀，比較由特征信息生成單元生成的場景改變檢測幀的特征信息與時間上位于場景改變^r測幀之前或之后的目標幀的特征信息，并且檢測形成場景改變點的目標幀，其中當基于由反向相
標幀的正向相似度檢測的形成場景改變點的目標幀、與由場景改變點檢測單元檢測的形成場景改變點的目標幀一致時，場景切換點;險測單元設置后者的目標幀作為形成場景切換點的目標幀。因為還以此方式使用關于場景改變點(形成場景改變點的目標幀)的信息，所以可以防止選擇一個場景中的點(幀)作為場景切換點的不便。
視頻信號和由場景切換點檢測器檢測的關于場景切換點的信息一起、并且關聯地記錄在記錄介質中。在此情況下，只有由場景切換點檢測器檢測的關于場景切換點的信息可以被記錄。可替代地，關于場景切換點的信息可以與關于另一系統中的場景切換點的信息一起記錄。以此方式記錄在記錄介質中的關于場景切換點的信息用于例如生成用作重現期間的跳過位置信息的事件。
根據本發明的另一實施例，提供了一種事件生成器，包括分數計算單元，其接收關于多個系統中的場景切換點的信息的輸入，設
9置每個場景切換點作為事件候選點，并且在每個事件候選點處基于關于多個
系統中的場景切換點的信息來計算在每個事件候選點的分數；以及
事件選擇單元，其基于由分數計算單元計算的每個事件候選點的分數，選擇預定點作為事件。
在該實施例中，輸入關于多個系統中的切換點的信息。關于多個系統中的場景切換點的信息從例如記錄介質中重現，關于場景切換點的信息和視頻信號一起、并且關聯地記錄在該記錄介質中。該分數計算單元在每個事件候
選點處基于關于多個系統中的場景切換點的信息來計算在每個事件候選點的分數。
在該情況下，例如，通過對每個事件候選點求和從關于多個系統中的場景切換點的信息獲得的第一值來計算分數。例如，當關于場景切換點的信息(形成場景切換點的幀)是指示場景切換點的時間日期(時間代碼)信息時，當預定事件候選點是由關于特定系統中的場景切換點的信息指示的場景切換點時，將從在預定事件候選點處的關于特定系統中的場景切換點的信息獲得
的第一值設置為1。否則，將第一值設置為0。
例如，當關于場景切換點的信息是指示在每個固定時間處的每個時間曰期(時間代碼)的場景切換點的可能性的值時，將從在預定事件候選點處的關于特定系統中的場景切換點的信息獲得的第一值設置為指示在預定事件候選點處的場景切換點的可能性的值。
事件選擇單元基于如上所述計算的在每個事件候選點處的分數選擇預定點作為事件。例如，選擇滿足分數等于或高于闊值的條件的事件候選點作為事件。因此，選擇各事件候選點中更適當的事件候選點作為事件。
例如，選擇滿足這樣的條件的事件候選點作為事件，該條件為分數等于或高于闊值，并且在所述事件候選點之前和之后的最短事件間隔的范圍內不存在具有高于所述事件候選點的分數的分數的其它事件候選點。這使得可以防止在所述最短事件間隔生成多個事件。
例如，當在與選擇為事件的另一事件候選點的最短事件間隔之后和最長事件間隔之前的固定范圍內不存在滿足這樣的條件的事件候選點時，在所述固定范圍中的事件候選點當中選擇具有最大分數的事件候選點作為事件，該條件為分數等于或高于閾值、和在所述事件候選點之前和之后的最短事件間隔的范圍內不存在具有高于所述事件候選點的分數的分數的其它事件點。這使得可以防止要選擇的事件間隔變得長于最長事件間隔。
例如，當固定范圍內不存在事件候選點時，選擇該固定范圍內的預定點 作為事件。例如，作為所述預定點，在通過將最短事件間隔加到選擇為事件 的另 一事件候選點獲得的點、和通過將最長事件間隔加到選擇為事件的另一 事件候選點并且從所述另 一事件候選點中減去最短事件間隔獲得的點中選擇 時間上靠后的點作為事件。這使得可以防止選擇的事件間隔變得長于最長事 件間隔。
優選的是，事件生成器還包括權重系數生成單元，其生成對應于關于多 個系統中的場景切換點的信息的權重系數，并且所述分數計算單元通過將從 關于多個系統中的場景切換點的信息中獲得的每個第 一值乘以由權重系數生 成單元生成的權重系數，為每個事件候選點計算第二值，并且將各第二值求 和以便計算分數。在這種情況下，如果將關于期望的系統中的場景切換點的 信息的權重設置得高，則可以增加該關于場景切換點的信息的影響。
如上所述，將從關于多個系統中的場景切換點的信息獲得的每個場景切 換點設置為事件候選點，并且基于根據關于多個系統中的場景切換點的信息 計算的每個事件候選點的分數選擇要設置為事件的預定點。因此，可以令人
滿意地生成事件。
事件生成器例如包括在重現裝置中。該重現裝置包括重現單元，其從記 錄介質中重現視頻信號和關于多個系統中的場景切換點的信息，在該記錄介 質中相互關聯地記錄了視頻信號和關于視頻信號的關于多個系統中的場景切 換點的信息。由事件生成器生成的事件用作用于控制重現操作(例如，在搜 索編輯點中，視頻信號的內容或重現跳過位置的掌握)的控制信息。
根據各實施例，按照順序將在輸入視頻信號的每個固定時間處的目標幀
設置為相似度計算幀，基于相似度計算幀和位于所述相似度計算幀之前的預
定數目的目標幀的特征信息來計算反向相似度；基于相似度計算幀和位于所 述相似度計算幀之后的預定數目的目標幀的特征信息來計算正向相似度；并 且基于每個目標幀的反向相似度和正向相似度來檢測形成場景切換點的目標 幀。因此，可以以適當的間隔4企測場景切換點。
根據各實施例，將從關于多個系統中的場景切換點的信息獲得的每個場 景切換點設置為事件候選點，并且基于根據關于多個系統中的場景切換點的 信息計算的每個事件候選點的分數選擇要設置為事件的預定點。因此，可以令人滿意地生成可以用作例如重現跳過位置信息的事件。


圖1是才艮據本發明實施例的記錄和重現裝置的配置示例的方塊圖2是場景切換點;險測器的配置示例的方塊圖3A和3B是用于說明指示每個目標幀的.圖像的特征的特征矢量的生成 的圖4是用于說明反向相似度和正向相似度的計算的示例的圖5是用于將特征矢量間距離dsit (Xi, Xj)轉換為相似度Sim (Xi， Xj)的轉換函數的示例的圖6是用于說明基于反向相似度Bwdsim (i)和正向相似度Fwdsim (i) 檢測場景切換點的處理的圖7是用于說明場景切換點檢測器的操作的圖8是事件生成器的配置示例的方塊圖9是用于說明基于事件選擇單元中的每個事件候選點的事件生成處理 的流程圖；以及圖10是要選擇或生成的事件候選點和事件的示例的圖。
具體實施例方式
以下將參照附圖描述本發明的實施例。圖1是根據該實施例的記錄和重 現裝置100的配置示例的圖。
記錄和重現裝置100包括控制單元101、用戶操作單元102、視頻信號輸 入端子103V、音頻信號輸入端子103A、記錄和重現處理單元104、場景切換 點-險測單元105、光盤驅動器106、作為記錄介質的DVD107、事件生成器108、 視頻信號輸出端子109V和音頻信號輸出端子109A。
控制單元101控制記錄和重現裝置100的各單元的操作。用戶操作單元 102配置用戶界面并連接到控制單元101。用戶操作單元102包括鍵、按鈕、 轉盤(dial)、遠程控制器的發射機接收機等。
在記錄期間，記錄和重現處理單元104對輸入到輸入端子103V和103A 的視頻信號和音頻信號應用記錄處理(如對應于記錄格式的壓縮編碼)，以生 成^L頻和音頻數據作為記錄數據，并將該數據提供給光盤驅動器106。例如，記錄和重現處理單元104對MPEG (運動圖像專家組)格式的視頻信號應用 編碼以生成視頻基本流(ES)。此外，記錄和重現處理單元104對MPEG格 式的音頻信號應用編碼以生成音頻基本流。記錄和重現處理單元104對^L頻 和音頻基本流和各種控制信號應用多路復用，以生成傳送流(TS)作為記錄 數據。
在重現期間，記錄和重現處理單元104對由光盤驅動器106重現的^L頻 和音頻數據應用解碼以生成視頻信號和音頻信號。例如，記錄和重現處理單 元104將視頻和音頻基本流從重現數據中分離，并且對MPEG (運動圖像專 家組)格式的視頻和音頻基本流應用解碼。記錄和重現處理單元104將重現 的視頻信號提供給視頻信號輸出端子109V,并且將重現的音頻信號提供給音 頻信號輸出端子109A。
場景切換點檢測單元105包括多個場景切換點檢測器105-1到105-n。場 景切換點檢測器105-1到105-n使用例如相互不同的方法檢測場景切換點。場 景切換點檢測器105-1到105-n處理輸入到輸入端子103V和103A的視頻信 號和音頻信號的任何一個或兩個以;險測場景切換點。
例如，處理音頻信號以檢測場景切換點的場景切換點檢測器使用信號電 平或頻率分量來檢測場景切換點。例如，處理視頻信號以檢測場景切換點的 場景切換點檢測器使用例如特征矢量來檢測場景切換點，該特征矢量包括通 過處理每個分割的塊的幀圖像的像素信號獲得的多個矢量元素、或通過處理 幀圖像的像素信號獲得的色差和亮度的柱狀圖。
例如，處理視頻信號以檢測場景切換點的場景切換點檢測器使用特定對 象的檢測(例如，臉部檢測)的檢測輸出來檢測場景切換點。
將從場景切換點檢測器105-1到105-n輸出的、關于多個系統中的場景切 換點的信息提供給控制單元101。關于每個系統中的場景切換點的信息是與 增加到視頻信號并記錄的時間代碼相關聯的時間日期(time-of-day )信息。 例如，在增加到視頻信號并記錄的一系列時間代碼中，將在檢測的場景切換 點的時間代碼設置為關于場景切換點的信息。稍后說明了場景切換點檢測器 的配置示例。
光盤驅動器106對作為記錄介質的DVD 17應用記錄和重現。在記錄期 間，光盤驅動器106將由記錄和重現處理單元104生成的視頻和音頻記錄數 據記錄在DVD 107中。光盤驅動器106將由場景切換點檢測單元105的場景
13切換點檢測器105-1到105-n獲得的、關于多個系統中的場景切換點的信息記 錄在DVD107中。在該情況下，視頻和音頻記錄數據和關于場景切換點的信 息記錄為分開的文件，但是相互關聯地記錄。
在重現期間，光盤驅動器106從DVD107重現視頻和音頻數據，并將視j 頻和音頻數據提供給記錄和重現處理單元104。當光盤驅動器106從DVD 107 重現視頻和音頻數據時，光盤驅動器106重現與視頻和音頻數據相關聯記錄 的、關于多個系統中的場景切換點的信息，并將關于場景切換點的信息提供 給控制單元101。
事件生成器108基于由光盤驅動器106重現的、關于多個系統中的場景 切換點的信息，選擇預定點作為事件。例如，事件生成器108將從關于多個 系統中的場景切換點的信息獲得的每個場景切換點設置為事件候選點，在每 個事件候選點基于關于多個系統中的場景切換點的信息檢測分數，并且基于 每個事件候選點的分數選擇預定點作為事件。稍后說明了事件生成器108的 配置示例。
以下說明了圖1所示的記錄和重現裝置100的操作。
首先，說明了記錄期間的操:作。將輸入到輸入端子103V和103A的4il頻 信號和音頻信號提供給記錄和重現處理單元104。記錄和重現處理單元104 對輸入到輸入端子103V和103A的^L頻信號和音頻信號應用記錄處理(如對 應于記錄格式的壓縮編碼)，以生成視頻和音頻數據作為記錄數據。將該視頻 和音頻數據提供給光盤驅動器106并記錄在DVD 107中。
將輸入到輸入端子103V和103A的視頻信號和音頻信號提供給場景切換 點檢測單元105。場景切換點檢測單元105的場景切換點4全測器105-1到105-n 處理視頻信號和音頻信號的任何一個或兩個以4全測場景切換點。由場景切換 點檢測器105-1到105-n獲得的、關于多個系統中的場景切換點的信息經由控 制單元101提供給光盤驅動器106,并且與視頻和音頻數據相關聯地記錄在 DVD107中。
以下說明了重現期間的操作。光盤驅動器106從DVD 107重現視頻和音 頻數據。作為重現數據的^L頻和音頻數據提供給記錄和重現處理單元104。 記錄和重現處理單元104對視頻和音頻數據應用解碼處理等，以生成視頻信 號和音頻信號。
以此方式由記錄和重現處理單元104生成的視頻信號和音頻信號輸出到
14輸出端子109V和109A。因此，將視頻信號和音頻信號提供給連接到輸出端 子109V和109A的監視器110。重現的圖像顯示在監視器IIO上，并且重現 的聲音從監視器110輸出。
光盤驅動器106從DVD 107重現與視頻和音頻數據相關聯記錄的、關于 多個系統中的場景切換點的信息。關于多個系統中的場景切換點的信,包-經由 控制單元101提供給事件生成器108。事件生成器108基于該關于多個系統 中的場景切換點的信息選擇預定點作為事件。由事件生成器108生成的事件 提供給控制單元101。
控制單元101使用由事件生成器108生成的事件作為例如用于重現跳過 位置的控制信息。當用戶使用用戶操作單元102執行重現位置的跳過操作以 便檢查內容或搜索編輯點時，控制單元101順序跳過重現位置到由事件生成 器108生成的事件點。
說明了包括在場景切換點檢測單元105中的預定場景切換點檢測器105A 的配置示例。圖2是場景切換點檢測器105A的配置示例的圖。場景切換點 檢測器105A包括特征矢量生成單元111、緩沖器112、場景改變點檢測單元 113、反向相似度計算單元114、正向相似度計算單元115和場景切換點檢測 單元116。
特征矢量生成單元111配置特征信息生成單元。特征矢量生成單元111 將在視頻信號SV的每個固定時間(例如，每0.5秒)處的幀設置為目標幀， 并且生成指示每個目標幀的特征的特征矢量。特征矢量生成單元111將目標 幀的圖像劃分為多個塊，處理每個塊的像素信號以計算矢量元素，并且生成 由每個矢量元素形成的特征矢量。
例如，如圖3A所示，在垂直和水平方向的每個方向上將幀的圖像劃分 為5個塊，總共25塊。在每個塊中，處理亮度(Y)、紅色差(Cr)和藍色 差(Cb)的像素信號，并且計算涉及亮度(Y)、紅色差(Cr)和藍色差(Cb) 的矢量元素。當在塊中存在n個像素信號xl到xn時，作為對像素信號的處 理，執行用于計算由公式(1)指示的平均值的處理、用于計算由公式(2) 指示的標準偏差的處理、由公式(3)指示的處理等。公式(2)和(3)中的 x橫杠指示xl到Xn的平均值。
矢量元素=(xl+x2+…+xn)/n ...(l)矢量元素=《》")2
…(2)
矢量元素
|》(x/-x)卩
/7
...(3)
在每個塊中，計算涉及亮度(Y)、紅色差(Cr)和藍色差(Cb)的矢量 元素。因此，當如上所述將幀的圖像劃分為25塊時，如圖3B所示，獲得75 (25 x3 )個矢量元素。特征矢量生成單元111輸出包括75個矢量元素的特 征矢量。
緩沖器112暫時存儲由特征矢量生成單元111生成的每個目標幀的特征 矢量，以便在用于檢測場景切換點的處理中使用各特征矢量。
場景改變點檢測單元113按照順序將每個目標幀設置為場景改變點檢測 幀，并且檢測場景改變點，即，形成場景改變點的目標幀。場景改變點;險測 單元113比較存儲在緩沖器112中的場景改變點檢測幀的特征矢量、和時間 上位于該場景改變點一企測幀之前或之后的目標幀的特征矢量，并且4全測該場 景改變點檢測幀是否是形成場景改變點的目標幀。
在該情況下，當場景改變點檢測幀的特征矢量和時間上位于該場景改變 點檢測幀之前或之后的目標幀的特征矢量之間的矢量間距離(即，相互對應 的矢量元素之間的差的絕對值的和)大于事先設置的閾值時，將該場景改變 點檢測幀檢測為場景改變點。
反向相似度計算單元114按照順序將每個目標幀設置為相似度檢測幀， 并且計算反向相似度。反向相似度計算單元114基于由特征矢量生成單元111 生成的相似度計算幀的特征矢量和時間上位于該相似度計算幀之前的預定數 目(m條)的目標幀的特征矢量，計算反向相似度。在該情況下，反向相似 度計算單元114計算相似度計算幀和時間上位于該相似度計算幀之前的預定 數目的目標幀之間的相似度，并且計算各相似度的和以便計算反向相似度。
正向相似度計算單元115按照順序將每個目標幀設置為相似度計算幀， 并且計算正向相似度。正向相似度計算單元115基于由特征值生成單元111 生成的相似度計算幀的特征矢量和時間上位于該相似度計算幀之后的預定數 目(m條)的目標幀的特征矢量，計算正向相似度。在該情況下，正向相似 度計算單元115計算相似度計算幀和時間上位于該相似度計算幀之后的預定
16數目的目標幀之間的相似度，并且計算各相似度的和以便計算正向相似度。
參照圖4說明了反向相似度和正向相似度的計算的示例。在以下說明中，
相似度計算幀是第i個目標幀。
當假設每個目標幀的特征矢量包括n個矢量元素時，第i個目標幀的特征矢 量Xi由公式(4)表示。位于第i個目標幀之前或之后的第j個目標幀的特征 矢量由公式(5 )表示。在公式(4)中，xil到xin是形成特征矢量Xi的n 個矢量元素。在公式(5)中，xjl到xjn是形成特征矢量Xj的n個矢量元素。
<formula>formula see original document page 17</formula>
通過公式(6 )計算特征矢量Xi和特征矢量Xj之間的距離，即，特征矢 量間距離dsit(Xi， Xj)。通過使用公式(7)的轉換函數將特征矢量間距離 dsit (Xi, Xj)轉換為相似度Sim (Xi, Xj)。圖5是轉換函數的示例的圖。 在圖5所示的轉換函數的情況下，當特征矢量間距離dsit (Xi， Xj)在xa內 時，相似度Sim(Xi, Xj)取固定值Ya。然而，當特征矢量間距離dsit (Xi, Xj)超過xa時，隨著該值增加，相似度Sim ( Xi, Xj)從固定值Ya下降。 當特征矢量間距離dsit (Xi, Xj)超過xb時，相似度Sim (Xi, Xj)下降到 0。
<formula>formula see original document page 17</formula>
如公式(8)所示，按照第i個目標幀和第i-m到第i-1個目標幀之間的相似度Sim ( Xi， Xi-m )到Sim ( Xi， Xi-l )的和計算第i個目標幀的反向相 似度Bwdsim (i )。類似地，如公式(9 )所示，按照第i個目標幀和第i+l到 第i+m個目標幀之間的相似度Sim ( Xi， X i+l )到Sim ( Xi， Xi+m )的和計 算第i個目標幀的正向相似度Bwdsim (i )。
'一l
￡m^>w(/)= Z S/m(Z/,") …(8 )
一m
^V^/wG) = ^ ^'wCA7, ;^') . ( 9 )
場景切換i，i測單元116基于由反向相似度計算單元114計算的每個目 標幀的反向相似度和由正向相似度計算單元115計算的每個目標幀的正向相 似度來檢測場景切換點，即，形成場景切換點的檢測幀。場景切換點檢測單
為形成場景切換點的目標幀。
在該情況下，場景切換點檢測單元116可以通過選擇從第i-l個目標幀 的反向相似度Bwdsim (i-l )減去第i個目標幀的反向相似度Bwdsim (i)獲 得的值(Bwdsim (i-l) -Bwdsim (i))和0中辟交大的一個(Max (Bwdsim
(i-l ) - Bwdsim (i), 0 ))，檢測第i個目標幀的反向相似度Bwdsim (i)是 否突然下降。當第i個目標幀的反向相似度Bwdsim (i)突然下降時，Max
(Bwdsim (i-l ) - Bwdsim (i )， 0 )取大的Y直。
場景切換點檢測單元116可以通過選4奪從第i個目標幀的正向相似度 Fwdsim(i )減去第i-l個目標幀的正向相似度Fwdsim(i-l )獲得的值(Fwdsim
(i) - Fwdsim (i-l ))和0中較大的一個(Max ( Fwdsim (i) - Fwdsim (i匿l ), O))，檢測第i個目標幀的正向相似度Fwdsim (i)是否突然上升。當第i個 目標幀的正向相似度Fwdsim (i)突然上升時，Max ( Fwdsim (i) - Fwdsim
(i-l)， 0)取大的值。
假設反向相似度Bwdsim(i)如圖6(a)所示改變，而正向相似度Fwdsim
(i)如圖6(c)所示改變。在該情況下，Max ( Bwdsim (i-l ) - Bwdsim (i), 0 )如圖6 ( b )所示改變，而Max (Fwdsim (i) - Fwdsim (i-l )， 0 )如圖6
(d)所示改變。因此，在該情況下，場景切換點檢測單元116根據反向相似 度Bwdsim (i)和正向相似度Fwdsim (i),將在TM處的點設置為場景切換 點，在該點處Max ( Bwdsim (i-l) - Bwdsim (i )， 0 )和Max ( Fwdsim (i)
- Fwdsim (i-l )， (U都取大的值。當如上所述檢測的根據反向相似度Bwdsim( i )和正向相似度Fwdsim( i) 的場景切換點(形成場景切換點的目標幀)與由場景改變點檢測單元113檢 測的場景改變點(形成場景改變點的目標幀) 一致時，場景切換點檢測單元 116設置后者的目標幀作為場景切換點，即，形成場景切換點的目標幀。
場景切換點檢測單元116將如上所述檢測的形成場景切換點的目標幀的 時間日期信息(與增加到視頻信號并記錄的時間代碼相關聯的時間日期信息) 輸出作為關于場景切換點的信息。
以下參照圖7說明了圖2所示的場景切換點檢測器105A的操作。
將其中應當檢測場景切換點的視頻信號SV (見圖7 (a))提供給特征矢 量生成單元1U。特征矢量生成單元111將在視頻信號SV的每個固定時間(例 如，每0.5秒)處的幀設置為目標幀，并且生成指示每個目標幀的圖像的特 征的特征矢量(見圖7 (c))。由特征矢量生成單元111生成的每個目標幀的 特征矢量暫時存儲在緩沖器112中，以便用于檢測場景切換點的處理。
場景改變點檢測單元113按照順序將每個目標幀設置為場景改變點檢測 幀，并且檢測場景改變點，即，形成場景改變點的目標幀(見圖7 (b))。在 該情況下，場景改變點檢測單元113比較存儲在緩沖器112中的場景改變點 檢測幀的特征矢量和時間上位于該場景改變點檢測幀之前或之后的目標幀的 特征矢量，并且檢測該場景改變點檢測幀是否是形成場景改變點的目標幀。 場景改變點檢測單元113的檢測輸出提供給場景切換點檢測單元116。
反向相似度計算單元114按照順序將每個目標幀設置為相似度檢測幀， 并且計算反向相似度(見圖7 (d))。在該情況下，反向相似度計算單元114 基于相似度計算幀的特征矢量和時間上位于該相似度計算幀之前的m條目標 幀的特征矢量來計算反向相似度。反向相似度計算單元114的計算結果提供 給場景切換點檢測單元116。
正向相似度計算單元115按照順序將每個目標幀設置為相似度計算幀， 并且計算正向相似度(見圖7 (e))。在此情況下，正向相似度計算單元115 基于相似度計算幀的特征矢量和時間上位于該相似度計算幀之后的m條目標 幀的特征矢量來計算正向相似度。正向相似度計算單元115的計算結果提供 給場景切換點檢測單元116。
場景切換點檢測單元116基于由反向相似度計算單元114計算的每個目 標幀的反向相似度和由正向相似度計算單元115計算的每個目標幀的正向相似度來檢測場景切換點，即，形成場景切換點的目標幀。例如，場景切換點
測為形成場景切換點的目標幀。
當如上所述檢測的根據反向相似度和正向相似度的場景切換點(形成場 景切換點的目標幀)與由場景改變點檢測單元113檢測的場景改變點(形成
場景改變點的目標幀) 一致時，場景切換點檢測單元116設置后者的目標幀 作為場景切換點TM (見圖7 (f))。
場景切換點4全測單元116將指示場景切換點(形成場景切換點的幀)的 時間日期信息(與增加到視頻信號并記錄的時間代碼相關聯的時間日期信息) 輸出作為關于場景切換點的信息。
除了硬件以外，圖2所示的場景切換點^r測器105A也可以由軟件實現。 當場景切換點檢測器105A由軟件實現時，處理程序使得計算機以與圖2所 示的場景切換點檢測器105A的各單元相同的方式工作。
圖2所示的場景切換點檢測器105A生成特征矢量作為每個目標幀的圖 像的特征信息，并且使用該特征矢量。然而，可以使用通過處理目標幀的圖 像的像素信號生成的色差或亮度的柱狀圖作為特征信息。在該情況下，可以 獲得相似度計算幀和位于該相似度計算幀之前或之后的目標幀之間的相似度 作為柱狀圖的交集。
以下說明了事件生成器108的配置示例。圖8是事件生成器108的配置 示例的圖。事件生成器108包括分數計算單元121、系數選擇單元222、系數 集(權重系數的組合)123-1到123-n和事件選擇單元124。
關于多個系統(在該示例中，m個系統)中的場景切換點的信息Sl到 信息Sm從控制單元101提供給分數計算單元121。分數計算單元121將每個 場景切換點設置為事件候選，并且基于關于m個系統中的場景切換點的信息 Sl到Sm計算每個事件候選點的分數。期望在由關于場景切換點的信息指示 的各場景切換點中存在重疊點。因此，基于關于m個系統中的場景切換點的 信息Sl到Sm的場景切換點的最后數目等于或小于由關于每個場景切換點的 信息指示的場景切換點的總數目。
分數計算單元121基本通過將在各事件候選點中、從關于m個系統中的 場景切換點的信息Sl到Sm獲得的第一值求和，計算每個事件候選點的分數。 在該實施例中，如上所述，關于場景切換點的信息是指示場景切換點的時間日期信息(與增加到視頻信號并記錄的時間代碼相關聯的時間日期信息)。當 預定事件候選點是由關于特定系統中的場景切換點的信息指示的場景切換點 時，將從在預定事件候選點處的、關于所述特定系統中的場景切換點的信息 獲得的第一值設置為1。否則，將第一值設置為0。
系數選擇單元122從N個系數集123-1到123-N選擇對應于m個系統中 的場景切換點的信息Sl到Sm的權重系數wl到wm,并且將該權重系數wl 到wm輸出到分數計算單元121。控制單元101基于用戶對用戶操作單元102 的操作，控制系數選擇單元122中的系數集的選擇。系數選擇單元122和系 數集123-1到123-N配置權重系數生成單元。
為了計算每個事件候選點的分數，分數計算單元121不直接將在每個事 件候選點處、從關于m個系統中的場景切換點的信息SI到Sm獲得的第一值 求和。相反，分數計算單元121將每個事件候選點中從關于m個系統中的場 景切換點的信息SI到Sm獲得的第一值，乘以來自系數選擇單元122的權重 系數wl到wm,以計算第二值，并且將各第二值求和以計算分數。
當在該候選點處、從關于m個系統中的場景切換點的信息SI到Sm獲得 的第一值是Sil到Sim時，通過公式(10)計算第i個事件候選點的分數Si。
S!' = J邵, ...(10)
如上，)f述，分數計算單元121將從關于m個系統中的場景切換點的信息 SI到Sm獲得的第一值乘以權重系數wl到wm以計算第二值，并且將各第 二值求和以計算分數。利用該配置，例如，如果將關于期望系統中的場景切 換點的信息的權重設為高，則可以增加該關于場景切換點的信息的影響。
如上所述，從N個系數集123-1到123-N選擇對應于關于m個系統中的 場景切換點的信息SI到Sm的權重系數wl到wm。利用該配置，可以改變 關于每個系統中的場景切換點的信息的權重，并且改變權重的影響。此外， 可以改變要選擇作為事件的事件候選點。
在上面的說明中，輸入到分數計算單元121的、關于m個系統中的場景 切換點的信息是關于指示場景切換點(形成場景切換點的幀)的時間日期(時 間代碼)的信息。然而，輸入到分數計算單元121的、關于m個系統中的場 景切換點的信息可以是指示在每個固定時間處的、在每個時間日期(時間代 碼)的場景切換點的可能性的值(一種分數)。在該情況下，將從關于特定系 統中的場景切換點的信息中獲得的、并且用于在分數計算單元121中計算預定事件候選點的分數的第 一值設置為指示在該預定事件候選點處的、特定系 統中的場景切換點的可能性的值。
將由分數計算單元121計算的每個事件候選點的分數Si提供給事件選擇
單元124。事件選擇單元124基于每個事件候選點的分數Si生成預定點作為 事件。事件選擇單元124根據圖9的流程圖生成事件。
首先，在步驟ST1，事件選擇單元124開始事件選擇的處理，然后，轉 到步驟ST2的處理。在步驟ST2，事件選擇單元124執行初始值設置。事件 選擇單元124將啞事件Ep設置為Tl-Lmin，設置"i，，為1,并且設置"p，， 為0。 Ep指示第p個事件，Tl指示第一事件候選點的時間日期(時間代碼)， Lmin指示最短的事件間隔，并且"i"指示事件候選點的數目。
隨后，在步驟ST3，事件選擇單元124確定是否存在未處理的事件候選 點。當存在未處理的事件候選點時，在步驟ST4，事件選擇單元124遞增"i"， 然后轉到步驟ST5的處理
在步驟ST5,事件選擇單元124在范圍Tk-Lmin<Tk<Tk+Lmin中按照順 序從第i個事件候選點起搜索事件候選點Tk,其中Sk>Th,并且Sk是最大值， 并且Ep+Lmin<Tk<Ep+Lmax (事件候選點匹配條件1 )。 Tk指示第k個事件 候選點，Lmax指示最長的事件間隔，Sk指示第k個事件候選點Tk的分數， 而Th指示閾值。閾值Th是用于選擇為事件的最小分數。
在步驟ST6,事件選擇單元124確定是否存在匹配條件1的事件候選點。 當存在匹配條件1的事件候選點Tk時，在步驟ST7,事件選擇單元124遞增 "p，，，然后在步驟ST8，將匹配條件1的事件候選點Tk設置為第p個事件 Ep。在步驟ST8中的處理后，在步驟ST9，事件選擇單元124將"i"設置為 k,返回到步驟ST3的處理，然后轉到用于未處理事件候選點的處理。
當在步驟ST6中不存在匹配條件1的事件候選點Tk時，在步驟STIO， 事件選擇單元124在范圍Ep+Lmin<Tk<Ep+Lmax中按照順序從第i個事件候 選點起搜索事件候選點Tk,其中分數Sk是最大值(事件候選點匹配條件2 )。
在步驟ST11,事件選擇單元124確定是否存在匹配條件2的事件候選點。 當存在匹配條件2的事件候選點Tk時，在步驟ST13,事件選擇單元124遞 增"p"，然后在步驟ST13，將匹配條件2的事件候選點Tk設置為第p個事 件Ep。在步驟ST13中的處理后，在步驟ST9，事件選擇單元124將"i"設 置為k，返回到步驟ST3的處理，然后轉到用于未處理事件候選點的處理。200910009839.0
當不存在匹配條件2的事件候選點Tk時，在步驟STll，事件選擇單元 124轉到步驟ST14的處理。在步驟ST14,事件選^^單元124將范圍Ep+Lmin 到Ep+Lmax中的預定點(例如，Ep+Lmax-Lmin和Ep+Lmin中時間上靠后的 點)設置為第p+l個事件Ep+l(根據條件3的事件)。在步驟ST14的處理后， 在步驟ST15，事件選擇單元124遞增"p"。在步驟ST9，事件選擇單元124 將"i"設置為k，返回到步驟ST3的處理，然后轉到用于未處理事件候選點 的處理。
當在步驟ST3中不存在未處理的候選點時，事件選擇單元124立刻進行 到步驟ST16，并且結束選擇事件的處理。
圖IO是事件候選點的示例的圖。事件候選點的位置由線條位置指示，而 事件候選點的分數由線條的長度指示。當在該示例中存在事件候選點時，如 該圖中所示生成匹配條件1的事件、匹配條件2的事件和根據條件3的事件。 在該情況下，從各事件候選點中選擇匹配條件1和條件2的事件。然而，在 各事件候選點中不存在根據條件3的事件。在圖10中，根據條件3的事件由 虛線的線條指示。虛線的線條不表示事件候選點。線條的長度沒有意義。
從控制單元101 (見圖1 )給出用于事件選擇單元124的事件選擇處理的 閾值Th、最短事件間隔Lmin、最長事件間隔Lmax。用戶可以操作用戶操作 單元102以改變閾值Th、最短事件間隔Lmin和最長事件間隔Lmax的值。
事件選擇單元124選擇其分數Sk等于或大于閾值Th的事件候選點Tk 作為事件，并且選擇各事件候選點中更適當的事件候選點作為事件。因為可 以根據用戶的沖喿作改變閾值Th的值，所以可以改變闊值Th并且調整可以選 擇為事件的事件候選點的數目。
事件選擇單元124選擇滿足這樣的條件的事件候選點Tk作為事件，該 條件為分數Sk等于或大于闊值Th,并且在所述事件候選點Tk之前和之后的 最短事件間隔Lmin的范圍內，不存在具有高于所述事件候選點Tk的分數Sk 的分數的其它事件候選點。因此，可以防止在最短事件間隔Lmin中生成多個 事件。因為可以根據用戶的操作改變最短事件間隔Lmin的值，所以可以任意 調整要選擇的事件的最短間隔。
當在與選擇作為事件的另一事件候選點的最短事件間隔Lmin之后和最 長事件間隔Lmax之前的固定范圍內不存在滿足這樣的條件的事件候選點Tk 時，該條件為分數Sk等于或大于閾值Th,并且在所述事件候選點Tk之前和
23之后的最短事件間隔Lmin的范圍內不存在具有高于所述事件候選點Tk的分 數Sk的分數的其它事件候選點，事件選擇單元124選擇在該固定范圍內的各 事件候選點中具有最大分數的事件候選作為事件。因此，可以防止選擇的事 件間隔變得長于最長的事件間隔Lmax。因為可以根據用戶的操作改變最長事 件間隔Lmax的值，所以可以任意調整要選擇的事件的最長間隔。
當在與選l奪作為事件的另一事件候選點的最短事件間隔Lmin之后和最 長事件間隔Lmax之前的固定范圍內不存在事件候選點時，事件選擇單元124 選擇該固定范圍內的預定點作為事件。因此，可以防止要選擇的事件變得長 于最長事件間隔Lmax。
除了硬件以外，圖8所示的事件生成器108也可以由軟件實現。當事件 生成器108由軟件實現時，處理程序使得計算機以與圖8所示的事件生成器 108的各單元相同的方式工作。
如上所述，在圖1所示的記錄和重現裝置100中，包括在場景切換點牙全 測單元105 (見圖2)中的場景切換點^r測器105A按照順序將在輸入^L頻信 號的每個固定時間處的每個目標幀設置為相似度計算幀，基于相似度計算幀 和位于該相似度計算幀之前的m條目標幀的特征信息(特征矢量)來計算反 向相似度；并且基于相似度計算幀和位于該相似度計算幀之后的m條目標幀 的特征信息(特征矢量)來計算正向相似度。
場景切換點檢測器105A基于每個目標幀的反向相似度和正向相似度檢 測場景切換點，即，形成場景切換點的目標幀。因為以此方式使用反向相似 度和正向相似度，所以組合相似的場景。因此，可以以適當的間隔檢測場景 切換點。
當基于反向相似度和正向相似度檢測的形成場景切換點的目標幀與由場 景改變點檢測單元113檢測的目標幀一致時，場景切換點檢測器105A設置后 者的目標幀作為形成場景切換點的目標幀。因為以此方式進一步使用關于場 景改變點(形成場景改變點的目標幀)的信息，所示可以防止選擇一個場景 中的點(幀)作為場景切換點的不便。
在圖1所示的記錄和重現裝置100中，事件生成器108將從關于m個系 統中的場景切換點的信息獲得的每個場景切換點設置為事件候選點，并且基 于根據關于m個系統中的場景切換點的信息Sl到Sm計算的每個事件候選點 的分數Si選擇預定點作為事件。因此，可以令人滿意地生成事件。
24在上述實施例中，本發明應用于采用DVD 107作為記錄介質的記錄和重 現裝置100。然而，不必說本發明還可以應用于處理其它記錄介質(如HD(硬 盤)和半導體存儲器)的記錄和重現裝置。
本發明可以以適當的間隔檢測場景切換點，可以從關于多個系統中的場 景切換點的信息令人滿意地生成可以用作重現跳過位置信息等的事件，并且 可以應用于采用DVD、 HD、半導體存儲器等作為記錄介質的記錄和重現裝 置。
本領域技術人員應當理解的是，依賴于設計要求和其它因素，可以出現 各種修改、組合、子組合和更改，只要它們在權利要求或其等效的范圍內。 相關申請的交叉引用
本發明包含涉及于2008年1月25日向日本專利局提交的日本專利申請 JP的主題，在此通過引用并入其全部內容。
權利要求
1.一種場景切換點檢測器，包括特征信息生成單元，其將在輸入視頻信號的每個固定時間處的幀設置為目標幀，并且生成指示每個目標幀的特征的特征信息；反向相似度計算單元，其按照順序設置每個目標幀作為相似度計算幀，并且基于由特征信息生成單元生成的相似度計算幀的特征信息、和時間上位于所述相似度計算幀之前的預定數目的目標幀的特征信息，計算反向相似度；正向相似度計算單元，其按照順序設置每個目標幀作為相似度計算幀，并且基于由特征信息生成單元生成的相似度計算幀的特征信息、和時間上位于所述相似度計算幀之后的預定數目的目標幀的特征信息，計算正向相似度；以及場景切換點檢測器，其基于由反向相似度計算單元計算的每個目標幀的反向相似度和由正向相似度計算單元計算的每個目標幀的正向相似度來檢測形成場景切換點的目標幀。
2. 如權利要求1所述的場景切換點檢測器，還包括場景改變點檢測單元， 其按照順序設置每個目標幀作為場景改變檢測幀，比較由特征信息生成單元 生成的場景改變檢測幀的特征信息與時間上位于場景改變檢測幀之前或之后 的目標幀的特征信息，并且檢測形成場景改變點的目標幀，其中當基于由反向相似度計算單元計算的每個目標幀的反向相似度和由正向 相似度計算單元計算的每個目標幀的正向相似度檢測的形成場景改變點的目 標幀、與由場景改變點檢測單元檢測的形成場景改變點的目標幀一致時，場 景切換點檢測單元設置后者的目標幀作為形成場景切換點的目標幀。
3. 如權利要求1所述的場景切換點檢測器，其中特征信息生成單元將目 標幀劃分為多個塊，為每個塊處理像素信號以便計算矢量元素，并且生成由 從多個塊計算的矢量元素形成的特征矢量作為特征信息。
4. 如權利要求1所述的場景切換點檢測器，其中 反向相似度計算單元計算相似度計算幀和時間上位于相似度計算幀之前的預定數目的目標幀之間的相似度，并且計算各相似度的和以便計算反向相 似度；以及正向相似度計算單元計算相似度計算幀和時間上位于相似度計算幀之后的預定數目的目標幀之間的相似度，并且計算各相似度的和以便計算正向相 似度。
5. —種場景切換點檢測方法，包括以下步驟將在輸入視頻信號的每個固定時間處的幀設置為目標幀，并且生成指示 每個目標幀的特征的特征信息；按照順序設置每個目標幀作為相似度計算幀，并且基于由特征信息生成 步驟生成的相似度計算幀的特征信息和時間上位于相似度計算幀之前的預定 數目的目標幀的特征信息來計算反向相似度；按照順序設置每個目標幀作為相似度計算幀，并且基于由特征信息生成 步驟生成的相似度計算幀的特征信息和時間上位于相似度計算幀之后的預定 數目的目標幀的特征信息來計算正向相似度；基于在反向相似度計算步驟中計算的每個目標幀的反向相似度和在正向 相似度計算步驟中計算的每個目標幀的正向相似度來檢測形成場景切換點的 目標幀。
6. —種記錄裝置，包括多個場景切換點檢測器，其檢測視頻信號的場景切換點；以及 記錄單元，其在記錄介質中相互關聯地記錄視頻信號、和由多個場景切 換點檢測器對視頻信號檢測的關于多個系統中的場景切換點的信息。
7. 如權利要求6所述的記錄裝置，其中多個場景切換點檢測器包括預定場景切換點檢測器，其將在輸入視頻信 號的每個固定時間處的幀設置為目標幀，并且檢測場景切換點；以及 所述預定場景切換點檢測器包括特征信息生成單元，其生成指示每個目標幀的特征的特征信息； 反向相似度計算單元，其按照順序設置每個目標幀作為相似度計算 幀，并且基于由特征信息生成單元生成的相似度計算幀的特征信息、和時間 上位于所述相似度計算幀之前的預定數目的目標幀的特征信息，計算反向相 似度；正向相似度計算單元，其按照順序設置每個目標幀作為相似度計算 幀，并且基于由特征信息生成單元生成的相似度計算幀的特征信息、和時間 上位于所述相似度計算幀之后的預定數目的目標幀的特征信息，計算正向相 似度；以及3場景切換點一全測器，其基于由反向相似度計算單元計算的每個目標 幀的反向相似度和由正向相似度計算單元計算的每個目標幀的正向相似度來 檢測形成場景切換點的目標幀。
8. —種事件生成器，包括分數計算單元，其接收關于多個系統中的場景切換點的信息的輸入，設 置每個場景切換點作為事件候選點，并且在每個事件候選點處基于關于多個 系統中的場景切換點的信息來計算在每個事件候選點的分數；以及事件選擇單元，其基于由分數計算單元計算的每個事件候選點的分數， 選擇預定點作為事件。
9. 如權利要求8所述的事件生成器，還包括權重系數生成單元，其生成 對應于關于多個系統中的場景切換點的信息的權重系數，其中所述分數計算單元通過將從關于多個系統中的場景切換點的信息中獲得 的每個第 一值乘以由權重系數生成單元生成的權重系數，為每個事件候選點 計算第二值，并且將各第二值求和以便計算分數。
10. 如權利要求8所述的事件生成器，其中事件選擇單元選擇滿足分數 等于或高于閾值的條件的事件候選點作為事件。
11. 如權利要求IO所述的事件生成器，其中事件選擇單元選擇滿足這樣 的條件的事件候選點作為事件，該條件為在所述事件候選點之前和之后的最 短事件間隔的范圍內不存在具有高于所述事件候選點的分數的分數的其它事 件候選點。
12. 如權利要求ll所述的事件生成器，其中當在與選擇作為事件的另一 事件候選點的最短事件間隔之后和最長事件間隔之前的固定范圍內不存在滿 足這樣的條件的事件候選點時，事件選擇單元在所述固定范圍中的事件候選 點當中選擇具有最大分數的事件候選點作為事件，該條件為分數等于或高于 閾值、并且在所述事件候選點之前和之后的最短事件間隔的范圍內不存在具 有高于所述事件候選點的分數的分數的其它事件候選點。
13. 如權利要求12所述的事件生成器，其中當在所述固定范圍內不存在 事件候選點時，事件選擇單元選擇所述固定范圍內的預定點作為事件。
14. 如權利要求13所述的事件生成器，其中當在所述固定范圍內不存在 事件候選點時，事件選擇單元將通過將最短事件間隔加到選擇為事件的另一 事件候選點獲得的點、和通過將最長事件間隔加到選擇為事件的另 一事件候選點并且從所述另 一事件候選點中減去最短的事件間隔獲得的點中時間上靠 后的點選擇為事件。
15. 如權利要求8所述的事件生成器，其中任何一條關于多個系統中的場景切換點的信息是由預定場景切換點檢測 器檢測的信息，所述預定場景切換點檢測器將在輸入視頻信號的每個固定時 間處的幀設置為目標幀，并且檢測場景切換點，以及 所述預定場景切換點檢測器包括特征信息生成單元，其生成指示每個目標幀的特征的特征信息； 反向相似度計算單元，其按照順序設置每個目標幀作為相似度計算 幀，并且基于由特征信息生成單元生成的相似度計算幀的特征信息、和時間 上位于所述相似度計算幀之前的預定數目的目標幀的特征信息，計算反向相 似度；正向相似度計算單元，其按照順序設置每個目標幀作為相似度計算 幀，并且基于由特征信息生成單元生成的相似度計算幀的特征信息、和時間 上位于所述相似度計算幀之后的預定數目的目標幀的特征信息，計算正向相 似度；以及場景切換點檢測器，其基于由反向相似度計算單元計算的每個目標 幀的反向相似度和由正向相似度計算單元計算的每個目標幀的正向相似度來 斥企測形成場景切換點的目標幀。
16. —種事件生成方法，包括以下步驟接收關于多個系統中的場景切換點的信息的輸入，設置每個場景切換點 作為事件候選點，并且在每個事件候選點處基于關于多個系統中的場景切換 點的信息來計算在每個事件候選點的分數；以及基于在分數計算步驟中計算的每個事件候選點的分數，選擇預定點作為 事件。
17. —種重現裝置，包括重現單元，其從記錄介質中重現視頻信號和關于多個系統中的場景切換 點的信息，在該記錄介質中相互關聯地記錄了視頻信號和關于視頻信號的關 于多個系統中的場景切換,A的信,包-;事件生成器，其基于由重現單元重現的關于多個系統中的場景切換點的 信息設置預定點作為事件；以及控制單元，其基于由事件生成器生成的事件控制重現單元中的用于視頻 信號的重現操作。
18.如權利要求17所述的重現裝置；其中事件生成器包括 分數計算單元，其接收關于多個系統中的場景切換點的信息的輸入，設 置每個場景切換點作為事件候選點，并且在每個事件候選點處基于關于多個 系統中的場景切換點的信息來計算在每個事件候選點的分數；以及事件選擇單元，其基于由分數計算單元計算的每個事件候選點的分數， 選擇預定點作為事件。
全文摘要
本發明涉及場景切換點檢測器、記錄和重現裝置、事件生成器和方法。一種場景切換點檢測器，包括特征信息生成單元，其生成指示每個目標幀的特征的特征信息；反向相似度計算單元，其按照順序設置每個目標幀作為相似度計算幀，并且基于相似度計算幀的特征信息和時間上位于所述相似度計算幀之前的目標幀的特征信息來計算反向相似度；正向相似度計算單元，其按照順序設置每個目標幀作為相似度計算幀，并且基于相似度計算幀的特征信息和時間上位于所述相似度計算幀之后的目標幀的特征信息來計算正向相似度；以及場景切換點檢測器，其基于反向相似度和正向相似度來檢測形成場景切換點的目標幀。
文檔編號H04N5/14GK101494726SQ200910009839
公開日2009年7月29日 申請日期2009年1月24日 優先權日2008年1月25日
發明者岡本裕成, 宮本勝 申請人:索尼株式會社