Top > Search of Japanese Patents > IMAGE PROCESSING SYSTEM, IMAGE PROCESSING METHOD, AND PROGRAM

IMAGE PROCESSING SYSTEM, IMAGE PROCESSING METHOD, AND PROGRAM foreign

Patent code P130008681
File No. S2011-0993-N0
Posted date Mar 13, 2013
Application number P2011-182615
Publication number P2013-045284A
Patent number P5808004
Date of filing Aug 24, 2011
Date of publication of application Mar 4, 2013
Date of registration Sep 18, 2015
Inventor
  • (In Japanese)中尾 恵
  • (In Japanese)湊 小太郎
Applicant
  • (In Japanese)国立大学法人奈良先端科学技術大学院大学
Title IMAGE PROCESSING SYSTEM, IMAGE PROCESSING METHOD, AND PROGRAM foreign
Abstract PROBLEM TO BE SOLVED: To solve the problem that a necessary image cannot be conventionally obtained by effectively using a two-dimensional image and a three-dimensional image of the same object.
SOLUTION: A necessary image can be obtained by an image processing system which is equipped with: a three-dimensional image storing unit which stores a three-dimensional image which is image data on one or more three-dimensional objects, and constituted of a plurality of pieces of voxel information having position information, color information, and depth information; a two-dimensional image with depth information storing unit which stores a two-dimensional image with depth information obtained by photographing the one or more three-dimensional objects, aligned with the three-dimensional image, and constituted of a plurality of pieces of pixel information having the position information, the color information, and the depth information; a two-dimensional image with depth information processing unit which performs first image processing by using the depth information to the two-dimensional image with depth information, and acquires a two-dimensional image with depth information after the processing; an extension image generation unit which generates an extension image obtained by overlapping the two-dimensional image with depth information after the processing with the tree-dimensional image after the processing; and an output unit which outputs the extension image.
Outline of related art and contending technology (In Japanese)

従来、内視鏡による二次元画像を用いて、外科手術、診断、または医師の手術教育がなされていた。

また、三次元物体の変形を、色情報を伴ってリアルタイムでシミュレートできる情報処理装置があった(例えば、特許文献1参照)。

Field of industrial application (In Japanese)

本発明は、二次元画像と三次元画像とを重ね合わせる画像処理装置等に関するものである。

Scope of claims (In Japanese)
【請求項1】
 
1以上の三次元の物体の画像データであり、位置を示す情報である位置情報と、色についての情報である色情報と、基準点からの深さを示す深さ情報とを有する点の情報である複数のボクセル情報から構成される三次元画像を格納し得る三次元画像格納部と、
前記1以上の三次元の物体を撮影した画像であり、前記三次元画像と位置合わせがされている画像であり、位置情報と色情報と深さ情報とを有する点の情報である複数のピクセル情報から構成される深さ情報付き二次元画像を格納し得る深さ情報付き二次元画像格納部と、
前記深さ情報付き二次元画像に対して、深さ情報を用いて、第一の画像処理を行い、処理後深さ情報付き二次元画像を取得する深さ情報付き二次元画像処理部と、
前記処理後深さ情報付き二次元画像と、前記三次元画像に対して第二の画像処理を施した処理後三次元画像または前記三次元画像とを重ね合わせた拡張像を生成する拡張像生成部と、
前記拡張像を出力する出力部とを具備する画像処理装置。

【請求項2】
 
前記1以上の三次元の物体を撮影した画像であり、前記三次元画像と位置合わせがされている画像であり、位置情報と色情報とを有する点の情報である複数のピクセル情報から構成される二次元画像を格納し得る二次元画像格納部と、
前記三次元画像が有する複数のボクセル情報において、平面上の同一の位置情報を有する複数の点の情報から、透明ではない色情報を有し、かつ深さ情報が基準位置から最も手前を示す情報であるボクセル情報が有する深さ情報を、平面上の位置情報ごとに取得する深さ情報取得部と、
前記深さ情報取得部が平面上の位置情報ごとに取得した2以上の各深さ情報を、前記二次元画像が有する複数の各ピクセル情報であり、前記平面上の位置情報が一致する各ピクセル情報に付加し、位置情報と色情報と深さ情報とを有する2以上のピクセル情報からなる深さ情報付き二次元画像を取得する深さ情報付き二次元画像取得部とをさらに具備し、
前記深さ情報付き二次元画像格納部の深さ情報付き二次元画像は、前記深さ情報付き二次元画像取得部が取得した深さ情報付き二次元画像である請求項1記載の画像処理装置。

【請求項3】
 
前記深さ情報付き二次元画像処理部は、
前記深さ情報付き二次元画像に対して、ピクセル情報が有する深さ情報の違いに応じて、少なくとも2以上の異なる色情報または/および異なる不透明度情報を設定する第一の画像処理を行い、処理後深さ情報付き二次元画像を取得する請求項1または請求項2記載の画像処理装置。

【請求項4】
 
前記三次元画像に対して、ボクセル情報が有する深さ情報の違いに応じて、少なくとも2以上の異なる色情報または/および異なる不透明度情報を設定する第二の画像処理を行い、処理後三次元画像を取得する三次元画像処理部をさらに具備する請求項1から請求項3いずれか記載の画像処理装置。

【請求項5】
 
出力されている二次元画像または深さ情報付き二次元画像または拡張像のうちの1以上の点に対する指示を受け付ける受付部と、
前記指示に対応する1以上の点に対応するボクセル情報が有する色情報を用いて、連続する2以上のボクセル情報を決定する指示ボクセル情報決定部をさらに具備し、
前記三次元画像処理部は、
前記指示ボクセル情報決定部が決定した2以上のボクセル情報、または当該2以上のボクセル情報以外のボクセル情報に、他とは異なる色情報または/および異なる不透明度情報を設定する第二の画像処理を行い、処理後三次元画像を取得する請求項4記載の画像処理装置。

【請求項6】
 
前記三次元画像は、
1以上の3次元の物体のボリュームテクスチャである3Dボクセル情報である請求項1から請求項5いずれか記載の画像処理装置。

【請求項7】
 
前記三次元画像は、
1以上の三次元の物体のボリュームテクスチャである3Dボクセル情報を複数の平面で切り出した結果の二次元の画像データに基づいて構成される情報であるスライス情報であり、位置情報と色情報と深さ情報とを有する複数の点の情報から構成される複数のスライス情報を有するスライス情報群からなる請求項1から請求項5いずれか記載の画像処理装置。

【請求項8】
 
記憶媒体に、
1以上の三次元の物体の画像データであり、位置を示す情報である位置情報と、色についての情報である色情報と、基準点からの深さを示す深さ情報とを有する点の情報である複数のボクセル情報から構成される三次元画像と、
前記1以上の三次元の物体を撮影した画像であり、前記三次元画像と位置合わせがされている画像であり、位置情報と色情報と深さ情報とを有する点の情報である複数のピクセル情報から構成される深さ情報付き二次元画像とを格納しており、
深さ情報付き二次元画像処理部、拡張像生成部、および出力部により実現され得る画像処理方法であって、
前記深さ情報付き二次元画像処理部が、前記深さ情報付き二次元画像に対して、深さ情報を用いて、第一の画像処理を行い、処理後深さ情報付き二次元画像を取得する深さ情報付き二次元画像処理ステップと、
前記拡張像生成部が、前記処理後深さ情報付き二次元画像と、前記三次元画像に対して第二の画像処理を施した処理後三次元画像または前記三次元画像とを重ね合わせた拡張像を生成する拡張像生成ステップと、
前記出力部が、前記拡張像を出力する出力ステップとを具備する画像処理方法。

【請求項9】
 
記憶媒体に、
1以上の三次元の物体の画像データであり、位置を示す情報である位置情報と、色についての情報である色情報と、基準点からの深さを示す深さ情報とを有する点の情報である複数のボクセル情報から構成される三次元画像と、
前記1以上の三次元の物体を撮影した画像であり、前記三次元画像と位置合わせがされている画像であり、位置情報と色情報と深さ情報とを有する点の情報である複数のピクセル情報から構成される深さ情報付き二次元画像とを格納しており、
前記記憶媒体を具備したコンピュータを、
前記深さ情報付き二次元画像に対して、深さ情報を用いて、第一の画像処理を行い、処理後深さ情報付き二次元画像を取得する深さ情報付き二次元画像処理部と、
前記処理後深さ情報付き二次元画像と、前記三次元画像に対して第二の画像処理を施した処理後三次元画像または前記三次元画像とを重ね合わせた拡張像を生成する拡張像生成部と、
前記拡張像を出力する出力部として機能させるためのプログラム。
IPC(International Patent Classification)
F-term
Drawing

※Click image to enlarge.

JP2011182615thum.jpg
State of application right Registered
Please contact us by E-mail or facsimile if you have any interests on this patent.


PAGE TOP

close
close
close
close
close
close
close