信息處理裝置、成像控制方法、程序、數字顯微鏡系統、顯示控制裝置、顯示控制方法和程序的制作方法
【專利摘要】用于允許利用較少的精力和時間對圖像進行重新成像。提供了一種信息處理裝置，該信息處理裝置包括：檢測單元，該檢測單元通過評估使用數字顯微鏡所捕獲的圖像以檢測需要與圖像相關的重新成像的失敗；以及生成單元，用于當通過檢測單元檢測到失敗時生成用于設置在重新成像時的成像條件的設置信息。
【專利說明】信息處理裝置、成像控制方法、程序、數字顯微鏡系統、顯示控制裝置、顯示控制方法和程序

【技術領域】
[0001]本公開涉及信息處理裝置、成像控制方法、程序、數字顯微鏡系統、顯示控制裝置、顯示控制方法和程序。

【背景技術】
[0002]過去，已經使用了利用顯微鏡來捕獲樣本的數字圖像的數字顯微鏡系統。例如，在病理診斷領域，通過利用數字顯微鏡系統來捕獲生物樣本的數字圖像，可以在任何地方執行基于生物樣本的病理診斷，而不用長期的保留關于生物樣本的信息或者運送生物樣本本身。專利文獻I公開了一種用于通過捕獲生物樣本的局部圖像并且組合這些局部圖像來生成高分辨率的合成圖像數據的技術。
[0003]引用列表
[0004]專利文獻
[0005]專利文獻I JP2OlO-23CM95A


【發明內容】

[0006]技術問題
[0007]如在專利文獻I中所示，在一般的數字顯微鏡系統中，從利用顯微鏡所捕獲的多個局部圖像生成一個樣本圖像。在從圖像捕獲到生成的過程中，經常發生失敗。例如，當連續地自動捕獲多個樣本時，樣本的所有圖像捕獲都成功是很罕見的。盡管如此，在與數字顯微鏡系統相關的先前技術中，例如，當已經獲得了將會在將樣本圖像用于病理診斷等時引起問題的圖像時，即，當存在需要重新成像的失敗時，從發現該失敗到重新成像要花費大量的時間和精力。例如，該失敗可能僅能通過在屏幕上確認圖像才能發現。因此，對將要重新成像的樣本進行搜索，重新插入該樣本，重新設置成像條件以避免另一個失敗，并且執行重新成像。因此，重新成像花費大量的時間和精力。
[0008]因此，期望提供一種能夠更快速且更省力地執行重新成像的方法。
[0009]問題的解決方案
[0010]根據本公開，提供了一種信息處理裝置，該信息處理裝置包括:檢測單元，被配置為通過評估使用數字顯微鏡所捕獲的圖像來檢測需要與圖像相關的重新成像的失敗；以及生成單元，被配置為如果通過檢測單元檢測到失敗，則生成用于設置在重新成像時的成像條件的設置信息。
[0011]根據本公開的另一個實施方式，提供了一種成像控制方法，包括:通過評估使用數字顯微鏡捕獲的圖像來檢測需要與圖像相關的重新成像的失敗；以及如果通過檢測單元檢測到失敗，則生成用于設置在重新成像時的成像條件的設置信息。
[0012]根據本公開的另一個實施方式，提供了一種程序，其使得計算機起到以下功能:檢測單元，被配置為通過評估使用數字顯微鏡捕獲的圖像來檢測需要與圖像相關聯的重新成像的失敗；以及生成單元，被配置為如果檢測單元檢測到失敗，則生成用于設置在重新成像時的成像條件的設置信息。
[0013]根據本公開的另一個實施方式，提供了一種數字顯微鏡系統，包括數字顯微鏡和信息處理裝置，信息處理裝置包括檢測單元，被配置為通過評估使用數字顯微鏡捕獲的圖像來檢測需要與圖像相關的重新成像的失敗；以及生成單元，被配置為如果通過檢測單元檢測到失敗，則生成用于設置在重新成像時的成像條件的設置信息。
[0014]根據本公開的另一個實施方式，提供了一種顯示控制裝置，包括:獲取單元，被配置為獲取當通過評估使用數字顯微鏡捕獲的圖像來檢測到需要與圖像相關的重新成像的失敗時生成的、用于設置重新成像時的成像條件的設置信息；以及顯示控制單元，被配置為將通過獲取單元獲取的設置信息顯示在顯示面上。
[0015]發明的有益效果
[0016]根據本公開的信息處理裝置、成像控制方法、程序、數字顯微鏡系統、顯示控制裝置、顯示控制方法和程序可以更快速且更省力地執行重新成像。

【專利附圖】

【附圖說明】
[0017][圖1]是示出了根據本公開實施方式的數字顯微鏡系統的示意性配置的實例的說明圖。
[0018][圖2]是示出了根據第一實施方式的掃描儀的配置的實例的框圖。
[0019][圖3]是通過數字顯微鏡成像的實例的說明圖。
[0020][圖4]是示出了組合圖像的實例的說明圖。
[0021][圖5A]是示出了成像遺漏的實例的說明圖。
[0022][圖5B]是示出了成像遺漏的檢測的實例的說明圖。
[0023][圖6]是示出了在組合失敗時在合成圖像中出現邊緣的實例的說明圖。
[0024][圖7]是示出了根據第一實施方式的服務器的配置的實例的框圖。
[0025][圖8]是示出了根據第一實施方式的觀測儀(viewer)的配置的實例的框圖。
[0026][圖9]是示出了根據第一實施方式的成像控制處理的示意性流程的實例的流程圖。
[0027][圖10]是示出了與成像遺漏有關的單個圖像評估處理的流程的實例的流程圖。
[0028][圖11]是示出了與組合失敗有關的單個圖像評估處理的流程的實例的流程圖。
[0029][圖12]是示出了根據第二實施方式的掃描儀的配置的實例的框圖。
[0030][圖13]是示出了根據第二實施方式的服務器的配置的實例的框圖。
[0031][圖14]是示出了根據第二實施方式的在服務器側的成像控制處理的示意性流程的實例的流程圖。
[0032][圖15]是示出了與成像遺漏有關的合成圖像評估處理的流程的實例的流程圖。
[0033][圖16]是示出了與組合失敗有關的合成圖像評估處理的流程的實例的流程圖。
[0034][圖17]是示出了根據第二實施方式的在掃描儀側的成像控制處理的示意性流程的實例的流程圖。

【具體實施方式】
[0035]在下文中，將參照附圖詳細描述本發明的優選實施方式。應注意的是，在該說明書和附圖中，使用相同的參考標號表示基本上具有相同功能和結構的元件，并且省略了重復描述。
[0036]應注意的是，將按以下順序進行描述。
[0037]1.數字顯微鏡系統的示意性的配置
[0038]2.第一實施方式
[0039]2.1掃描儀的配置
[0040]2.2服務器的配置
[0041]2.3觀測儀的配置
[0042]2.4處理的流程
[0043]3.第二實施方式
[0044]3.1掃描儀的配置
[0045]3.2服務器的配置
[0046]3.3處理的流程
[0047]4.總結
[0048]〈1.數字顯微鏡系統的示意性配置>
[0049]首先，將參照圖1描述根據本公開實施方式的數字顯微鏡系統I的示意性配置。圖1是示出了根據本公開實施方式的數字顯微鏡系統的示意性配置的實例的說明圖。如在圖1中所示，數字顯微鏡系統I包括掃描儀100、服務器200以及觀測儀300。
[0050]掃描儀100是具有數字顯微鏡或者被連接至數字顯微鏡的信息處理裝置。掃描儀100使用數字顯微鏡捕獲樣本的圖像。例如，將于其上固定了樣本的預制玻片(slide)插入數字顯微鏡中。當將預制玻片插入數字顯微鏡中時，掃描儀100確定成像條件并將所確定的成像條件設置在數字顯微鏡中。此外，掃描儀100使用數字顯微鏡捕獲預制玻片上的樣本的圖像。更具體地，掃描儀100確定樣本的成像區域作為成像條件，并且在數字顯微鏡中設置所確定的成像區域。然后，掃描儀100將成像區域分成多個單個區域，確定這些多個單個區域的成像順序，并且將所確定的成像順序設置在數字顯微鏡中。接下來，掃描儀100使數字顯微鏡在每個單獨的區域捕獲樣本的圖像。然后，掃描儀100通過組合作為局部圖像的多個捕獲到的單獨區域的圖像來生成合成圖像。因此，通過掃描儀100生成了一個樣本圖像，即，合成圖像。
[0051]服務器200是管理由掃描儀100生成的樣本圖像的信息處理裝置。例如，服務器200將通過掃描儀100生成的合成圖像與關于樣本的標識信息相關聯并存儲在數據庫中。
[0052]觀測儀300是顯示控制裝置的實例。例如，觀測儀300在顯示面上顯示由掃描儀100生成的或者由服務器200存儲的樣本的合成圖像。此外，例如，觀測儀300提供了用于能夠基于用戶操作來指定掃描儀100的成像條件的用戶界面。即，用戶可以經由在觀測儀300上進行的操作來指定掃描儀100的成像條件。
[0053]在根據本公開的實施方式中，可以使用較少的時間和精力在數字顯微鏡系統I中執行重新成像。現在將在下文描述〈2.第一實施方式〉和〈3.第二實施方式〉的特定主題。
[0054]<2.第一實施方式>
[0055]首先，將描述根據本公開的第一實施方式。根據本公開的第一實施方式，通過掃描儀100自動地檢測到需要重新成像的失敗，并且基于該失敗來執行重新成像。
[0056]<2.1掃描儀的配置>
[0057]現在將參照圖2至圖6描述根據第一實施方式的掃描儀100-1的配置的實例。圖2是示出了根據第一實施方式的掃描儀100-1的配置的實例的框圖。如在圖2中所示，掃描儀100-1包括成像控制單元110、數字顯微鏡120、組合單元130、失敗檢測單元140、設置信息生成單元150和通信單元160。
[0058](成像控制單元110)
[0059]成像控制單元110控制使用數字顯微鏡120的成像。例如，成像控制單元110在數字顯微鏡120中設置用戶指定的或者其自動確定的成像條件，并且使得數字顯微鏡120基于這些成像條件來捕獲樣本的圖像。例如，成像控制單元110將成像區域、成像順序、照明亮度、白平衡系數等作為整個樣本的成像條件。進一步地，例如，成像控制單元110將焦點位置設置作為用于每個單獨區域的成像條件。
[0060]此外，當設置信息生成單元150已經生成了用于設置重新成像時的成像條件的設置信息時，成像控制單元110將數字顯微鏡120中的上述成像條件中的至少一些進行重新設置。然后，成像控制單元110使數字顯微鏡120基于重新設置的成像條件重新捕獲樣本的圖像。
[0061]成像控制條件110將關于設置或重新設置的成像條件的信息(下文中，稱之為“成像條件信息”)輸出至通信單元160。
[0062](數字顯微鏡120)
[0063]數字顯微鏡120基于通過成像控制單元110所設置的成像條件來捕獲圖像。例如，數字顯微鏡120捕獲示出了在所設置的成像區域中的每個單個區域的圖像(在下文中，稱之為“單個圖像”)。下面將參照圖3更詳細地描述這一點。
[0064]圖3是示出了通過數字顯微鏡120的成像的實例的說明圖。如在圖3中所示，為了捕獲生物樣本10的圖像，設置了包括整個生物樣本10的成像區域20。該成像區域20被分成多個單個區域21。可以以任意順序設置單個區域21的成像順序，例如，以從生物樣本10的中心朝外側的螺旋形順序、或者以從頂部到底部或者從底部到頂部通過每列交替移動的Z字形的順序。基于由此設置的成像順序，數字顯微鏡120捕獲示出了每個單個區域21的單個圖像。這里，數字顯微鏡120捕獲包括單個區域21的擴展區域23作為單個圖像，使得可以順序地組合相鄰的單個圖像。
[0065]數字顯微鏡120將所捕獲的單個圖像輸出至組合單元130和失敗檢測單元140。
[0066]應注意的是，例如，數字顯微鏡120包括光學系統、圖像傳感器、圖像處理電路以及驅動電路。例如，光學系統可以包括物鏡。例如，圖像傳感器可以是CM0S(互補金屬氧化物半導體)圖像傳感器或CCD(電荷耦合器件)圖像傳感器。圖像處理電路執行諸如去馬賽克處理和白平衡校正的顯影處理。驅動電路基于所設置的成像區域和成像順序在每次捕獲單個圖像時移動物鏡和樣本的相對的位置。
[0067](組合單元130)
[0068]組合單元130通過組合由數字顯微鏡120捕獲的單個圖像來生成合成圖像。下面將參照圖4更詳細地描述這一點。
[0069]圖4是示出了組合圖像的實例的說明圖。圖4示出了在相鄰的單個區域21捕獲的單個圖像30a和30b。如已經參照圖3所描述的，單個圖像30是包括單個區域21的區域23的圖像。因此，單個圖像30具有與單個區域21相對應的部分31以及其中圖像重疊的部分33 (在下文中，稱之為“重疊部分”)。組合單元130通過將重疊部分33b適當地疊加在重疊部分33a上來組合單個圖像30a和單個圖像30b。這里，組合單元130利用重疊部分33a的亮度值和重疊部分33b的亮度值來將重疊部分33b疊加在重疊部分33a上。作為實例，例如，組合單元130將重疊部分33b疊加在重疊部分33a上，計算重疊部分33a的每個像素與相對應的重疊部分33b的像素之間的亮度值的差，并且將多個像素之間的這些差的絕對值相加。組合單元130在改變重疊部分33b的位置的同時，計算每個位置的亮度值的差的絕對值的這種總值。此外，在組合時，組合單元130確定其中計算的最小的總值的重疊位置33b的位置作為重疊位置33b的最佳位置。組合單元130以此方式順序組合相鄰的單個區域的單個圖像以最終生成整個樣本的一個合成圖像。
[0070]組合單元130將生成的合成圖像輸出至通信單元160。此外，組合單元130將關于組合相應的單個圖像的上述最小的總值輸出至失敗檢測單元140。應注意的是，組合單元130還可以將生成的合成圖像輸出至失敗檢測單元140。
[0071](失敗檢測單元140)
[0072]失敗檢測單元140通過評估使用數字顯微鏡120捕獲的圖像檢測需要與該圖像有關的重新成像的失敗。“評估圖像”的表述包括評估單個圖像中的每一個以及評估由單個圖像形成的合成圖像。下面將利用特定失敗檢測的第一實例至第五實例來描述由失敗檢測單元140進行的失敗檢測。應注意的是，在失敗檢測的第一實例和第二實例中，失敗檢測單元140檢測與通過組合多個單個圖像生成的合成圖像有關的失敗作為上述失敗。
[0073]在第一實例中，失敗檢測單元140檢測應當被包括在合成圖像中的區域的成像遺漏作為與合成圖像有關的失敗。將參照圖5A和圖5B更詳細地描述這一點。
[0074]圖5A是示出了成像遺漏的實例的說明圖。與圖3A類似，圖5A示出了生物樣本10、成像區域20、多個單個區域21以及作為單個圖像的成像區域并且包括單個區域21的區域23。這里，雖然成像區域20包括生物樣本10的整個深色部分11，但成像區域20不包括生物樣本10的淺色部分13。即，即使其是應當被包括在合成圖像中的區域，但樣本10的一部分沒有被捕獲。例如，當通過使用整個生物樣本的圖像檢測生物樣本的邊緣來確定成像區域時，淺色部分13因此會從成像區域遺漏。因此，如果存在成像遺漏，則將變得難以(例如，在病理診斷中)正確地利用樣本。
[0075]因此，例如，失敗檢測單元140通過評估其中在圖像中的紋理存在的方向來檢測應當被包括在合成圖像中的區域的成像遺漏。更具體地，例如，失敗檢測單元140評估其中被定位在成像區域20的周緣部分的區域的單個圖像中(即，在形成合成圖像的周緣部分的單個圖像中)的紋理存在的方向。將參照圖5B更詳細地描述這一點。
[0076]圖5B是示出了成像遺漏的檢測的實例的說明圖。圖5B示出了形成合成圖像的周緣部分35的單一的單個圖像30。因為單個圖像30是包括單個區域21的區域23的圖像，故單個圖像30包括從合成圖像突出的突出部分37。換句話說，該突出部分37示出了位于成像區域20的外側的區域。因此，如果在單個圖像30的突出部分37中存在某些類型的紋理，則可以說，在從成像區域20遺漏的突出部分37的方向上存在也應被捕獲的樣本。因此，失敗檢測單元140可以通過確定在單個圖像30的突出部分37中是否存在紋理作為對其中紋理存在的方向的評估來確定是否存在成像遺漏。應注意的是，失敗檢測單元140例如可以通過使用邊緣檢測濾波器檢測突出部分37中的邊緣、計算檢測到的邊緣量以及確定該邊緣量是否超過預定閾值來檢測突出部分37中是否存在紋理。
[0077]此外，失敗檢測單元140可以使用合成圖像而不是單個圖像來檢測成像遺漏。在該情況下，失敗檢測單元140通過評估其中在被包括在合成圖像中的單個圖像中紋理存在的方向來檢測上述成像遺漏。例如，因為單個圖像30的突出部分37沒有被包括在合成圖像中，故失敗檢測單元140確定在周緣部分35而不是單個圖像30的突出部分37中是否存在紋理。如果在周緣部分35中存在某些類型的紋理，則可以假設在與周緣部分35相對應的方向上，在成像區域20的外側有很大的可能性存在應當被捕獲的樣本。因此，失敗檢測單元140可以通過確定在周緣部分35中是否存在紋理作為對紋理存在的方向的評估，來檢測是否存在成像遺漏。應注意的是，例如，失敗檢測單元140可以確定周緣部分35的邊緣方向或者與此組合，而不是確定在周緣部分35中是否存在紋理。即，因為可以假設如果在合成圖像的外部方向上存在邊緣(在圖5B中，在垂直方向上的邊緣)，邊緣還在突出部分37中延伸，則可以假設在與周緣部分35相對應的方向上，在成像區域的外側有很大的可能性也存在應當被捕獲的樣本。
[0078]因此，失敗檢測單元140例如通過評估在單個圖像中紋理存在的方向來檢測應當被包括在合成圖像中的區域的成像遺漏。
[0079]在第二實例中，失敗檢測單元140檢測在生成上述合成圖像時的組合失敗作為與合成圖像有關的失敗。如參照圖4所描述的，雖然通過組合所捕獲的單個圖像來生成合成圖像，但是存在其中沒有適當地組合單個圖像的情況。因此，在整個合成圖像中或者在合成圖像的一部分中可能會發生不自然的移位，這會阻礙正確地確認樣本。
[0080]因此，作為實例，失敗檢測單元140通過評估生成合成圖像時重疊部分的亮度值來檢測上述組合失敗。如已經參照圖4所描述的，當組合單個圖像30a和單個圖像30b時，組合單元130計算重疊部分33a中的每一個像素與重疊部分33b相對應的像素之間的亮度值的差，并且將多個像素之間的這些差的絕對值相加。此外，在組合期間，組合單元130確定其中將計算的最小的總值的重疊位置33b的位置作為重疊位置33b的最佳位置。因此，可以說上述最小總值是最終指示組合的適宜水平的值。即，如果最小總值小，則可以說組合是成功的，而如果最小總值很大，則可以說組合是失敗的。因此，失敗檢測單元140可以通過確定最小總值是否超過了預定閾值來檢測組合失敗。應注意的是，失敗檢測單元140從組合單元130獲取最小總值。
[0081]此外，作為另一個實例，失敗檢測單元140還可以通過評估出現在合成圖像中的預定方向上的邊緣來檢測上述組合失敗。以下將參照圖6更詳細地描述這一點。
[0082]圖6是示出了在組合失敗時出現在合成圖像中的邊緣的實例的說明圖。在圖6中，示出了合成圖像40。如果當生成合成圖像40時，在組合時發生了失敗，則因為單個圖像在組合邊界上相互偏移，故在組合邊界處出現邊緣。例如，出現了水平方向上的邊緣41a和垂直方向上的邊緣41b。因此，例如，失敗檢測單元140檢測合成圖像中出現在預定方向(例如，水平方向和垂直方向)上的邊緣，并且評估所檢測的邊緣的長度或強度。例如，如果所檢測到的邊緣的長度大于單個區域21的一側長度的預定比，則可以假設該邊緣是作為組合失敗的結果而產生的邊緣。此外，如果所檢測到的邊緣的強度大于可以預計的樣本的特殊邊緣的強度，則也可以假設該邊緣是因為組合失敗而產生的邊緣。在該情況下，失敗檢測單元140檢測到上述組合失敗。
[0083]因此，例如，失敗檢測單元140通過評估重疊部分或在合成圖像中的預定方向上出現的邊緣的亮度值來檢測組合失敗。
[0084]在第三實例中，失敗檢測單元140檢測焦點位置中的的缺陷作為需要與單個圖像或合成圖像有關的重新成像的失敗。當數字顯微鏡120捕獲單個圖像時，成像控制單元110設置數字顯微鏡120中的焦點位置。然而，如果焦點位置的設置是不正確的，則會捕獲到模糊的圖像。因此，會難以正確地確認樣本。
[0085]因此，作為實例，失敗檢測單元140通過評估單個圖像的對比度來檢測焦點位置中的缺陷。模糊的圖像具有較低的對比度。因此，失敗檢測單元140可以通過計算單個圖像的對比度、并且確定所計算的對比度是否超過預定閾值來檢測焦點位置的缺陷。應注意的是，可以使用任意方法作為對比度計算方法。作為實例，失敗檢測單元140計算每四個相鄰像素之間的亮度值的差，并且將這些差的絕對值相加。另外，失敗檢測單元140還可以將計算的整個單個圖像的每個像素的總值相加。例如，因此計算出的總值可以被用作單個圖像的對比度。這樣，失敗檢測單元140檢測焦點位置中的缺陷。
[0086]在第四實例中，失敗檢測單元140檢測白平衡上的缺陷作為需要與單個圖像或合成圖像有關的重新成像的失敗。雖然在單個圖像的顯影處理期間在數字顯微鏡120中執行白平衡校正，但是錯誤的白平衡會導致待顯影的單個圖像的顏色是不同于實際樣本的顏色。因此，這會使得難以正確地確認樣本的顏色。
[0087]因此，作為實例，數字顯微鏡120捕獲其中不存在樣本的區域的圖像(即，沒有示出任何東西)。然后，失敗檢測單元140將關于圖像的顏色信息與提前準備作為模板的顏色信息相比較。如果它們之間的差大于預定閾值，則失敗檢測單元140檢測到白平衡上的缺陷。以這種方式，失敗檢測單元140檢測到白平衡上的缺陷。
[0088]在第五實例中，失敗檢測單元140檢測亮度上的缺陷作為需要與單個圖像或和合成圖像有關的重新成像的失敗。雖然在數字顯微鏡120中的成像期間調節了照明亮度，但是錯誤的亮度會導致單個圖像太亮或太暗而不能被捕獲。因此，這會使得難以正確地確認樣本。
[0089]因此，作為實例，與白平衡上的缺陷類似，數字顯微鏡120捕獲了其中不存在樣本的區域的圖像(即，沒有示出任何東西)。然后，失敗檢測單元140將關于圖像的亮度信息與提前準備作為模板的亮度信息相比較。如果它們之間的差大于預定閾值，則失敗檢測單元140檢測亮度中的缺陷。這樣，失敗檢測單元140檢測到亮度上的缺陷。
[0090]上面，利用特定的失敗檢測的第一實例至第五實例描述了通過失敗檢測單元140進行的失敗檢測。基于這種失敗檢測，在沒有讓用戶確認屏幕上的圖像的情況下可以自動檢測需要重新成像的失敗。
[0091]在第一實施方式中，每當捕獲多個單個圖像中的每一個時，失敗檢測單元140評估每個圖像以檢測需要重新成像的失敗。基于這種評估，可以在捕獲單個圖像的點上檢測失敗，其能夠在檢測到失敗之后立即執行重新成像。即，為了執行重新成像，沒有必要將樣本重新插入數字顯微鏡120或者改變不需要重新設置的項目的設置。因此，在該情況下，執行重新成像所需的工作是非常有限的，并且充分地減少了重新成像花費的時間。
[0092]失敗檢測單元140將與檢測到的失敗有關的信息輸出至設置信息生成單元150。
[0093](設置信息生成單元150)
[0094]當通過失敗檢測單元140檢測到失敗時，設置信息生成單元150生成用于設置重新成像時的成像條件的設置信息。下面將利用失敗檢測的上述第一實例至第五實例來描述通過設置信息生成單元150進行的設置信息的生成。
[0095]首先，將描述檢測到成像遺漏時的設置信息的生成。當通過失敗檢測單元140檢測到上述成像遺漏時，例如，設置信息生成單元150生成用于重新設置成像區域以包括將被新捕獲的追加區域的成像區域信息的成像區域。該成像區域信息是一條設置信息。更具體地，例如參照圖5A和圖5B所描述的，當評估其中在單個圖像中存在紋理的方向時，失敗檢測單元140知道單個區域21 (或者單個圖像30)和成像遺漏所在的方向(例如，左、右、上、下)。因此，設置信息生成單元150從失敗檢測單元140獲取單個區域21坐標和成像遺漏方向的組合作為與該成像遺漏有關的信息，并且生成包括該組合的信息作為區域信息。基于這種成像區域信息，成像控制單元110可以重新設置成像區域以包括成像遺漏區域。因此，在重新成像時可以避免相同的成像遺漏。
[0096]應注意的是，成像區域信息可以包括簡單地指示擴大成像區域的信息。在該情況下，成像控制單元110改變用于確定成像區域的參數，使得成像區域更寬。作為實例，成像控制單元110通過檢測在整個樣本的圖像中出現的樣本的邊緣來確定成像區域。在該情況下，成像控制單元110減小邊緣檢測中的閾值。因此，因為還檢測到了較弱的邊緣，故在數字顯微鏡120中確定并重新設置了較寬的成像區域。此外，作為另一個實例，成像控制單元110將整個樣本的圖像分成塊，計算每個塊的亮度值上的變化，并且將具有超過閾值的變化的塊區域確定為成像區域。在該情況下，成像控制單元110減小用于與該變化相比較的閾值。因此，因為多個塊區域被確定為成像區域，故在數字顯微鏡120中重新設置了更寬的成像區域。
[0097]另外，例如，如果成像區域被重新設置，設置信息生成單元150還生成用于重新設置單個圖像的成像順序的成像順序信息。該成像順序信息是一條設置信息。例如，該成像順序信息包括指示成像順序被重新設置的信息。通常，連續地捕獲相鄰單個區域21的單個圖像。通過這樣連續地捕獲相鄰的單個圖像并且將它們按順序組合，減小了組合失敗的可能性。另一方面，在重新成像時，如果首先以最初的成像順序捕獲單個圖像，并且追加捕獲了擴展區域的單個圖像，則沒有以原始成像區域的單個圖像的順序捕獲擴展區域的單個圖像。因此，增加了組合失敗的可能性。因此，當重新設置成像區域時，通過追加生成成像順序信息并且重新設置成像順序可以在重新成像時避免組合失敗。
[0098]其次，將描述在生成合成圖像期間檢測到組合失敗時設置信息的生成。當通過失敗檢測單元140檢測到上述組合失敗時，設置信息生成單元150生成用于設置單個圖像的成像順序的成像順序信息。該成像順序信息是指示將被設置的成像順序的信息，該成像順序不同于檢測到組合失敗時的成像順序。表述“不同的成像順序”可以是其中不同于成像的開始位置的成像順序，或者是其中不同于掃描模式(螺旋形順序、Z字形順序等)的成像順序。組合失敗的發生很大程度上取決于設置了何種成像順序。如參照圖4所描述的，利用重疊部分33的亮度值來執行單個圖像30的組合。例如，當從其中在重疊部分33的像素中幾乎沒有亮度變化的單個圖像30成像時，在組合時發生偏差，使得在成像區域中組合失敗的可能性增加。因此，組合失敗的發生取決于成像順序。因此，如果已經發生了組合失敗，通過以不同的成像順序執行重新成像，將會減小發生組合失敗的可能性。應注意的是，成像順序信息可以包括指示檢測到組合失敗時的成像順序本身的信息。
[0099]第三，將描述檢測到焦點位置中的缺陷時的設置信息的生成。當檢測到焦點位置中的缺陷時，設置信息生成單元150生成用于重新設置焦點位置的焦點位置信息。該焦點位置信息是一條設置信息。例如，該焦點位置信息是包括與檢測到的其焦點位置中的缺陷的單個圖像相對應的單個區域的坐標和設置的焦點位置的信息。基于這種焦點位置信息，成像控制單元110可以改變具體用于在其焦點位置具有缺陷的單個區域的焦點位置。因此，在重新成像期間，可以避免相同的焦點位置中的缺陷。
[0100]應注意的是，當確定在成像區域中的每個單個區域上的焦點位置時，成像控制單元110例如通過在若干單獨區域上獨立地測量焦點位置并且通過使用測量的焦點位置執行插補，確定另一單個區域的焦點位置。在該情況下，基于該焦點位置，成像控制單元110可以改變單獨地測量焦點位置的單個區域，或者可以改變插補方法。在該情況下，焦點位置信息可以包括簡單地指示改變焦點位置的信息。
[0101]第四，將描述檢測到白平衡上的缺陷時的設置信息的生成。當檢測到白平衡上的缺陷時，設置信息生成單元150生成用于重新設置白平衡的白平衡信息。該白平衡信息是一條設置信息。例如，該白平衡信息包括關于在檢測到白平衡上的缺陷時其中不存在樣本的區域的圖像的顏色信息(即，與模板顏色信息相比的顏色信息)。基于這種白平衡信息，成像控制單元110可以將白平衡(例如，白平衡校正中的RGB系數)調節到適當值。因此，在重新成像期間，可以避免相同的白平衡缺陷。應注意的是，設置信息生成單元150還可以確定應當如何改變RGB系數(例如，將R乘以因子0.8等)，并且從關于其中不存在樣本的圖像的顏色信息以及被預先準備作為模板的顏色信息生成包括這種信息的白平衡信息。
[0102]第五，將描述在檢測到亮度中的缺陷時設置信息的生成。當檢測到亮度中的缺陷時，設置信息生成單元150生成用于重新設置照明亮度的亮度信息。該亮度信息是一條設置信息。例如，該亮度信息包括關于當檢測到亮度的缺陷時其中不存在樣本的區域的圖像的亮度信息(即，與模板亮度信息相比的亮度信息)。基于這種亮度信息，成像信息控制單元110可以將照明亮度調節到適當值。因此，在重新成像期間可以避免相同的亮度缺陷。應注意的是，設置信息生成單元150還可以確定應當如何調整照明亮度(例如，將亮度R乘以因子1.2等)，并且從關于其中不存在樣本的圖像的亮度信息以及被預先準備作為模板的亮度信息生成包括這種信息的亮度信息。
[0103]以上，已經通過利用特定失敗檢測的第一實例至第五實例描述了設置信息生成單元150的設置信息的生成。基于這種設置信息，掃描儀100在用戶無須單獨重新考慮用于避免另一失敗的成像條件的情況下可以自動設置用于重新成像的成像條件。
[0104]設置信息生成單元150將生成的設置信息輸出至成像控制單元110和通信單元160。
[0105](成像控制單元110)
[0106]因此，通過組合單元130檢測到了需要重新成像的失敗，并且設置信息生成單元150基于該失敗生成了設置信息。另一方面，例如，成像控制單元110基于失敗檢測單元140所檢測到的上述失敗的類型，確定是否使數字顯微鏡120重新捕獲單個圖像中的每一個或者重新捕獲多個單個圖像的全部。即，確定是執行局部重新成像還是整體重新成像。例如，成像控制單元110如下所述來執行確定。
[0107][表1]
[0108]

【權利要求】
1.一種信息處理裝置，包括: 檢測單元，被配置為通過評估使用數字顯微鏡捕獲的圖像來檢測需要與所述圖像相關的重新成像的失敗；以及 生成單元，被配置為如果通過所述檢測單元檢測到所述失敗，則生成用于設置在重新成像時的成像條件的設置信息。
2.根據權利要求1所述的信息處理裝置，其中，所述檢測單元被配置為將與通過組合多個圖像生成的合成圖像相關的失敗檢測作為所述失敗。
3.根據權利要求2所述的信息處理裝置，其中，與所述合成圖像相關的所述失敗包括應當被包括在所述合成圖像中的區域的成像遺漏。
4.根據權利要求3所述的信息處理裝置，其中，所述檢測單元被配置為通過評估在所述圖像中紋理存在的方向來檢測所述成像遺漏。
5.根據權利要求2所述的信息處理裝置，其中，所述生成單元被配置為如果通過所述檢測單元檢測到所述成像遺漏，則生成用于重新設置成像區域以包括將被新捕獲的追加區域的成像區域信息。
6.根據權利要求5所述的信息處理裝置，其中，所述生成單元被配置為如果所述成像區域將被重新設置，則進一步生成用于重新設置所述圖像的成像順序的成像順序信息。
7.根據權利要求2所述的信息處理裝置，其中，與所述合成圖像相關的所述失敗包括生成所述合成圖像時的組合失敗。
8.根據權利要求7所述的信息處理裝置，其中，所述檢測單元被配置為通過評估被包括在所述合成圖像的預定方向上的邊緣來檢測所述組合失敗。
9.根據權利要求7所述的信息處理裝置，其中，所述檢測單元被配置為通過評估當生成所述合成圖像時的重疊部分的亮度值來檢測所述組合失敗。
10.根據權利要求7所述的信息處理裝置，其中，所述生成單元被配置為如果通過所述檢測單元檢測到所述組合失敗，則生成用于重新設置所述圖像的成像順序的成像順序信肩、O
11.根據權利要求2所述的信息處理裝置，其中，所述檢測單元被配置為進一步將焦點位置、白平衡或者亮度上的缺陷檢測作為所述失敗。
12.根據權利要求2所述的信息處理裝置，進一步包括: 成像控制單元，被配置為基于通過所述檢測單元檢測到的所述失敗的類型來確定是使所述數字顯微鏡重新捕獲各個圖像還是重新捕獲所述多個圖像的全部。
13.根據權利要求2所述的信息處理裝置，其中，所述檢測單元被配置為每當捕獲所述多個圖像中的每一個時評估用于檢測所述失敗的各個圖像。
14.根據權利要求2所述的信息處理裝置，其中，所述檢測單元被配置為在生成了所述合成圖像之后評估所述合成圖像或者所述合成圖像的局部圖像。
15.根據權利要求1所述的信息處理裝置，進一步包括: 顯示控制單元，被配置為能夠在執行重新成像之前將通過所述生成單元生成的所述設置信息呈現給用戶或者由所述用戶進行編輯。
16.一種成像控制方法，包括: 通過評估使用數字顯微鏡捕獲的圖像來檢測需要與所述圖像相關的重新成像的失敗；以及 如果通過檢測單元檢測到所述失敗，則生成用于設置在重新成像時的成像條件的設置信息。
17.一種程序，使計算機起到以下功能: 檢測單元，被配置為通過評估使用數字顯微鏡捕獲的圖像來檢測需要與所述圖像相關聯的重新成像的失敗；以及 生成單元，被配置為如果所述檢測單元檢測到所述失敗，則生成用于設置在重新成像時的成像條件的設置信息。
18.—種數字顯微鏡系統,包括: 數字顯微鏡；以及 信息處理裝置，所述信息處理裝置包括: 檢測單元，被配置為通過評估使用數字顯微鏡捕獲的圖像來檢測需要與所述圖像相關的重新成像的失敗；以及 生成單元，被配 置為如果通過所述檢測單元檢測到所述失敗，則生成用于設置在重新成像時的成像條件的設置信息。
19.一種顯示控制裝置，包括:獲取單元，被配置為獲取當通過評估使用數字顯微鏡捕獲的圖像而檢測到需要與所述圖像相關的重新成像的失敗時生成的、用于設置重新成像時的成像條件的設置信息；以及顯示控制單元，被配置為將通過所述獲取單元獲取的所述設置信息顯示在顯示面上。
20.一種信息處理裝置，包括: 檢測單元，被配置為通過評估圖像來檢測與通過將利用數字顯微鏡捕獲的多個圖像組合所生成的合成圖像相關的失敗；以及 生成單元，被配置為如果通過所述檢測單元檢測到所述失敗，則生成用于設置在重新成像時的成像條件的設置信息。
【文檔編號】H04N5/225GK104081248SQ201280066139
【公開日】2014年10月1日 申請日期:2012年12月7日 優先權日:2012年1月11日
【發明者】渡邊真司, 林信裕 申請人:索尼公司