Top > Search of Japanese Patents > APPARATUS, METHOD, AND PROGRAM FOR VISUALIZING DEGREE OF ACTIVITY WITHIN IMAGE

APPARATUS, METHOD, AND PROGRAM FOR VISUALIZING DEGREE OF ACTIVITY WITHIN IMAGE meetings

Patent code P150011899
File No. S2013-1349-N0
Posted date Apr 17, 2015
Application number P2013-173053
Publication number P2015-041945A
Patent number P6413134
Date of filing Aug 23, 2013
Date of publication of application Mar 2, 2015
Date of registration Oct 12, 2018
Inventor
  • (In Japanese)豊浦 正広
  • (In Japanese)茅 暁陽
  • (In Japanese)西口 敏司
  • (In Japanese)村上 正行
Applicant
  • (In Japanese)国立大学法人山梨大学
  • (In Japanese)学校法人常翔学園
  • (In Japanese)学校法人京都外国語大学
Title APPARATUS, METHOD, AND PROGRAM FOR VISUALIZING DEGREE OF ACTIVITY WITHIN IMAGE meetings
Abstract PROBLEM TO BE SOLVED: To provide a technique for summarizing an image content which does not require a skill for grasping the content and performs sufficient display to understand the content.
SOLUTION: An apparatus for visualizing the degree of activity within an image comprises: a display screen controller for controlling the display screen of a display; an image controller for acquiring image data and displaying an image on a portion of the display screen; a panel controller for setting an area of interest within the image as a panel; an activity degree calculator for calculating the degree of activity within the panel; and a seek bar controller for displaying as a seek bar the degree of the activity within the panel with respect to the lapse time of the image.
Outline of related art and contending technology (In Japanese)

カメラは世界中の至る所に設置され、人間が処理しきれない量の映像が蓄積されてきている。画像処理による自動認識の精度には限界があり、人間が映像を理解する場面はまだ多い。伝統的なツールによって映像を解析する場合には、ショートカットキーに早送りや巻き戻しの機能を割り当て、あるいは倍速再生などの機能を利用して、映像を見ていくことになる。1人の人間が解析できる映像の量には限界があり、また、人間への負担も大きい。大事なイベントを見逃す恐れもある。

従来技術として、映像を人間の目に見える形に要訳するVideo Visualizationの技術がある。たとえば非特許文献1には、ドーナツ状に示されるボリュームデータによって、映像の中で重要な位置を色付けして表示することができ、ニュース映像の切れ目や監視映像中の人の流れなどの可視化が可能となる。この種のシステムを利用すれば、映像を見ることなく映像の中身を理解することも可能であるが、可視化された結果を解釈するのに慣れや経験が多分に必要とされる。

また非特許文献2には、天井からの映像に限定し、また、部屋全体を隙間なくブロックに分割し、それぞれのブロックの映像における活動を3次元ボリュームで表現する技術がある。この技術は、ボリュームのみから活動を表現することが目標であるが、これでは映像を見直すことで得られる情報が限定されてしまう。たとえば、顔を掻くような仕草や寝ているかどうかの判別は、生成された3次元ボリュームのみから判断することは難しい。

Field of industrial application (In Japanese)

本発明は、映像内活動度可視化装置、方法及びプログラムに関するものである。

Scope of claims (In Japanese)
【請求項1】
 
ディスプレイの表示画面を制御する表示画面制御部と、
映像データを取得し、前記表示画面の一部に映像を表示する映像制御部と、
前記映像内の注目する領域をパネルとして設定するパネル制御部と、
前記パネル内の活動度を算出する活動度算出部と、
映像の経過時間に対する前記パネル内の前記活動度をシークバーとして表示するシークバー制御部と、
を備え、
前記シークバー制御部が、
複数の前記パネル内の映像の時間的変化を示す活動度をシークバーとして表示し、
前記シークバーは複数の前記パネル内の映像の時間軸を合わせて並べて表示し、
さらに前記複数のパネル内のあらかじめ選択された複数のパネルの映像群の時間的変化を示す、群に対する活動度をシークバーとして表示する
ことを特徴とする映像内活動度可視化装置。

【請求項2】
 
複数の前記パネル内の映像の時間的変化を示す前記活動度の各々は、
前記パネルごとに、あらかじめ設定した固定値で正規化され画素値に換算されて表示される請求項1に記載の映像内活動度可視化装置。

【請求項3】
 
前記群に対する活動度は、あらかじめ選択された複数のパネルの活動度の論理和を前記シークバーに表示することを特徴とする請求項2に記載の映像内活動度可視化装置。

【請求項4】
 
前記活動度が、前記パネル内のひとつの映像フレームの全画素のうち、時間的に隣接した直前又は直後の映像フレームの対応する画素との特性値の差が、あらかじめ設けられたしきい値を超えた画素の割合とすることを特徴とする請求項1乃至請求項3のいずれかに記載の映像内活動度可視化装置。

【請求項5】
 
前記パネル内の、表示中の映像の映像フレームに対する前記活動度を、リアルタイムに表示するパワーゲージ制御部をさらに備えることを特徴とする請求項1乃至請求項4のいずれかに記載の映像内活動度可視化装置。

【請求項6】
 
前記シークバーは、前記パネル内のある時点における映像フレームの活動度を、その時点を示す位置に対する画素の色で、表示することを特徴とする請求項1乃至請求項5のいずれかに記載の映像内活動度可視化装置。

【請求項7】
 
前記シークバーの時間方向に対する画素数が、映像の全映像フレーム数よりも少ない場合には、前記シークバーの時間方向の画素一つに複数の映像フレームが割り当てられ、前記画素の一つに割り当てられた複数の映像フレームの活動度のうち最大値を、画素の色で表示することを特徴とする請求項6に記載の映像内活動度可視化装置。

【請求項8】
 
前記シークバーの任意の位置を指定することで、対応する時点から、映像を再生し、指定したシークバーに対応するパネルをハイライト表示することを特徴とする請求項6又は請求項7のいずれかに記載の映像内活動度可視化装置。

【請求項9】
 
前記シークバー制御部が、
映像以外の、映像と同期した信号の時間的変化を示す活動度をシークバーとしてさらに表示することを特徴とする請求項1乃至請求項8のいずれかに記載の映像内活動度可視化装置。

【請求項10】
 
前記映像以外の信号が音声又は生体信号であることを特徴とする請求項9に記載の映像内活動度可視化装置。

【請求項11】
 
前記映像が、授業内容を撮影した映像であり、前記パネルが受講者毎に設定され、前記受講者毎の動作を把握するために用いられることを特徴とする請求項1乃至請求項10のいずれかに記載の映像内活動度可視化装置。

【請求項12】
 
前記映像が、ゲージ内の実験動物の動作を撮影した映像であり、前記パネルがゲージ内の特定の箇所に対して設定され、前記特定の箇所毎の動物の行動を把握するために用いられることを特徴とする請求項1乃至請求項10のいずれかに記載の映像内活動度可視化装置。

【請求項13】
 
前記映像が、特定の場所における人の行動を撮影した映像であり、前記パネルが前記特定の場所におけるさらに限定された箇所に対して設定され、前記限定された箇所毎の人の流れ、行動を把握するために用いられることを特徴とする請求項1乃至請求項10のいずれかに記載の映像内活動度可視化装置。

【請求項14】
 
映像データを取得し、ディスプレイの一部に前記映像データにより映像を表示するステップと、
表示された前記映像内で、外部からの信号により指定された複数の領域を各々パネルとして設定するステップと、
前記パネル内の映像の時間的変化を示す活動度を各々算出するステップと、
前記映像の経過時間に対する前記パネル内の前記活動度各々をシークバーとして表示するステップと、
を備え、
前記表示するステップにおいて、
前記パネル内の映像の時間的変化を示す活動度を各々シークバーとして表示し、
前記シークバーは複数の前記パネル内の映像の時間軸を合わせて並べて表示し、
さらに前記複数のパネル内のあらかじめ選択された複数のパネルの映像群の時間的変化を示す、群に対する活動度をシークバーとして表示する
ことを特徴とする映像内活動度可視化方法。

【請求項15】
 
複数の前記パネル内の映像の時間的変化を示す前記活動度の各々は、
前記パネルごとに、あらかじめ設定した固定値で正規化され画素値に換算されて表示される請求項14に記載の映像内活動度可視化方法。

【請求項16】
 
コンピュータに、
映像データを取得し、ディスプレイの一部に前記映像データにより映像を表示する手順と、
表示された前記映像内で、外部からの信号により指定された複数の領域を各々パネルとして設定する手順と、
前記パネル内の映像の時間的変化を示す活動度を各々算出する手順と、
前記映像の経過時間に対する前記パネル内の前記活動度各々をシークバーとして表示する手順と、
前記表示する手順において、
複数の前記パネル内の映像の時間的変化を示す活動度を各々シークバーとして表示し、
前記シークバーは、
前記パネル内の映像の時間軸を合わせて並べて表示する手順と、
さらに前記複数のパネル内のあらかじめ選択された複数のパネルの映像群の時間的変化を示す、群に対する活動度をシークバーとして表示する手順と
を実行させるための映像内活動度可視化プログラム。

【請求項17】
 
前記パネル内の映像の時間的変化を示す前記活動度の各々を、
前記パネルごとに、あらかじめ設定した固定値で正規化され画素値に換算されて表示させる手順を備える請求項16に記載の映像内活動度可視化プログラム。
IPC(International Patent Classification)
F-term
Drawing

※Click image to enlarge.

JP2013173053thum.jpg
State of application right Registered
Please feel free to contact us by email or facsimile if you have any interests in this patent.


PAGE TOP

close
close
close
close
close
close
close