Top > Search of Japanese Patents > (In Japanese)ロボット制御システム、機械制御システム、ロボット制御方法、機械制御方法、および記録媒体

(In Japanese)ロボット制御システム、機械制御システム、ロボット制御方法、機械制御方法、および記録媒体 foreign

Patent code P200016893
File No. 5447
Posted date May 14, 2020
Application number P2018-552962
Date of filing Nov 24, 2017
International application number JP2017042155
International publication number WO2018097223
Date of international filing Nov 24, 2017
Date of international publication May 31, 2018
Priority data
  • P2016-227546 (Nov 24, 2016) JP
Inventor
  • (In Japanese)松野 文俊
  • (In Japanese)村田 諒介
  • (In Japanese)遠藤 孝浩
Applicant
  • (In Japanese)国立大学法人京都大学
Title (In Japanese)ロボット制御システム、機械制御システム、ロボット制御方法、機械制御方法、および記録媒体 foreign
Abstract (In Japanese)オペレーションコンピュータは、第一の空間にいるオペレータがロボットの存在する第二の空間に居るならばオペレータの視界に現われる様子を表わす視界画像をヘッドマウントディスプレイのようなディスプレイに表示させる。そして、オペレータの動作に応じてタスクを行うようにロボットを制御する。
Outline of related art and contending technology (In Japanese)

オペレータは、ロボットにタスクをリアルタイムで実行させる場合、通常、ロボットを操作する。ロボットを操作する際に用いられる技術として、例えば次のような技術が知られている。

特許文献1に記載される視覚装置は、操作者の頭部の動きに応じて、ロボットであるスレーブ装置に搭載した撮像装置に映像を撮像させ、ヘッドマウントディスプレイに投影させる。

特許文献2に記載される遠隔操作システムは、吹き付け作業を開始する前に、吹き付け機1の左カメラ、右カメラでトンネルの吹き付け対象面の画像を撮像し、メモリに記憶する。吹き付け作業が開始されると吹き付けノズルの位置、方向等を計測し、吹き付け対象面の吹き付け量、吹き付け厚を推定し、吹き付けられるモルタルの画像を作成し、メモリに書き込む。また、吹き付けを行っている吹き付けノズルの画像を左カメラ、右カメラで撮像し、画像合成部でこの吹き付けノズルの画像とメモリから送られる吹き付け対象面、および吹き付けられるモルタルの画像とを合成し、立体画像表示部で立体表示する。オペレータは、この画像を見つつ吹き付け機を遠隔操作する。

非特許文献1には、人間の身体と類似した構造を持つヒューマノイド型ロボットの操作方法が開示されている。非特許文献2には、移動マニピュレータの遠隔操作システムが開示されている。

非特許文献3には、ロボットのいる遠隔地を仮想空間に再現し、その中に人間の手のモデルとタスクを実現するためのツールを提示する手法が開示されている。

また、従来、人間の身体とは異なる構造を有するロボットをオペレータが操作する場合は、ジョイスティックまたはゲームコントローラなどの入力装置が用いられる。以下、このようなロボットを「非ヒューマノイド型ロボット」と記載する。

Field of industrial application (In Japanese)

本発明は、ロボットなどの機械をオペレータの動作に応じて動作させる技術に関する。

Scope of claims (In Japanese)
【請求項1】
 
ディスプレイに表示された画像をオペレータに見せながら、タスクを実行するようロボットを制御するロボット制御システムであって、
前記オペレータが前記ロボットの存在する空間に居るならば前記オペレータの視界に現われる様子を表わす視界画像を前記ディスプレイに表示させる表示手段と、
前記オペレータの動きに応じたタスクを前記ロボットに実行させるための制御命令を生成し、前記ロボットに送信する制御手段と、
を有するロボット制御システム。

【請求項2】
 
前記ロボットは、物体を取り扱う第一の部位を有し、
前記オペレータは、第二の部位を有し、
前記制御手段は、前記第二の部位の動きに基づいて前記第一の部位を動かす命令を前記制御命令として生成し前記ロボットに送信する、
請求項1に記載のロボット制御システム。

【請求項3】
 
前記制御手段は、前記オペレータが前記第二の部位を動かした際に、前記オペレータが前記空間に居るならば前記第二の部位が前記空間の中で動く軌跡に合わせて前記第一の部位が動くように前記ロボットを制御する、
請求項2に記載のロボット制御システム。

【請求項4】
 
前記ディスプレイは、前記オペレータに装着するためのヘッドマウントディスプレイであり、
前記表示手段は、前記空間を仮想的に再現した仮想空間の中に前記オペレータの動きに合わせて動くアバターを配置し、前記アバターの目から視線方向に見える様子を表わす画像を前記視界画像として前記ディスプレイに表示させる、
請求項2または請求項3に記載のロボット制御システム。

【請求項5】
 
前記表示手段は、前記オペレータを計測することによって求められた三次元形状および前記ロボットに設けられた計測装置によって得られたデータに基づいて求められた三次元形状を用いて前記アバターを前記空間に配置する、
請求項4に記載のロボット制御システム。

【請求項6】
 
前記オペレータが足踏みするのに伴って前記ロボットを移動させる第二の制御手段、を有し、
前記表示手段は、前記ロボットが前記仮想空間において再現される位置に前記アバターを配置し、前記視界画像を前記ディスプレイに表示させる、
請求項4または請求項5に記載のロボット制御システム。

【請求項7】
 
前記表示手段は、前記ロボットを仮想した仮想ロボットを前記仮想空間の中の前記位置に配置し、前記視界画像を前記ディスプレイに表示させる、
請求項6に記載のロボット制御システム。

【請求項8】
 
前記表示手段は、特定のコマンドが入力されまたは前記ロボットに特定のイベントが生じた場合に、前記ロボットを仮想した仮想ロボットを前記仮想空間の中の前記位置に配置し、前記アバターを前記位置の近傍に配置し直し、前記視界画像を前記ディスプレイに表示させる、
請求項6に記載のロボット制御システム。

【請求項9】
 
前記アバターが配置し直された後に前記オペレータが動作を行った場合に、前記オペレータと前記ロボットとの位置関係が前記アバターと前記仮想ロボットとの位置関係と同じであるならば前記動作によって前記ロボットに生じる変化が起きるように前記ロボットを制御する、第三の制御手段、を有する、
請求項8に記載のロボット制御システム。

【請求項10】
 
前記ロボットが前記物体に触れまたは前記空間の中の障害物に干渉した場合に、前記物体に触れたことまたは前記障害物に干渉したことを、力覚、触覚、または聴覚を前記オペレータを与えることによって知らせる報知手段、を有する、
請求項2ないし請求項9のいずれかに記載のロボット制御システム。

【請求項11】
 
前記第一の部位によって前記物体を前記オペレータの所望する通りに取り扱うことができない場合に他のロボットと協同して当該物体を取り扱うための処理を行う協同手段、を有する、
請求項2ないし請求項10のいずれかに記載のロボット制御システム。

【請求項12】
 
前記表示手段は、前記オペレータの動きに応じたタスクを行うように前記アバターを動かしながら前記視界画像を前記ディスプレイに表示させる、
請求項4ないし請求項9のいずれかに記載のロボット制御システム。

【請求項13】
 
機械を制御する機械制御システムであって、
オペレータが前記機械の存在する空間の中の前記機械の近傍の位置に居るならば前記オペレータの視界に現われる様子を表わす視界画像をディスプレイに表示させる表示手段と、
前記オペレータが動作を行った場合に、前記オペレータが前記空間の中の前記位置に居るならば前記動作によって前記機械に生じる変化が起きるように前記機械を制御する、制御手段と、
を有する機械制御システム。

【請求項14】
 
前記ディスプレイは、前記オペレータに装着するためのヘッドマウントディスプレイであり、
前記機械は、パワーアシストスーツである、
請求項13に記載の機械制御システム。

【請求項15】
 
ディスプレイに表示された画像をオペレータに見せながら、タスクを実行するようロボットを制御するロボット制御方法であって、
前記オペレータが前記ロボットの存在する空間に居るならば前記オペレータの視界に現われる様子を表わす視界画像を前記ディスプレイに表示させる表示処理を行い、
前記オペレータの動きに応じたタスクを前記ロボットに実行させるための制御命令を生成し前記ロボットに送信する制御処理を行う、
ロボット制御方法。

【請求項16】
 
前記ロボットは、物体を取り扱う第一の部位を有し、
前記オペレータは、第二の部位を有し、
前記制御処理は、前記第二の部位の動きに基づいて前記第一の部位を動かす命令を前記制御命令として生成し前記ロボットに送信する処理である、
請求項15に記載のロボット制御方法。

【請求項17】
 
前記制御処理は、前記オペレータが前記第二の部位を動かした際に、前記オペレータが前記空間に居るならば前記第二の部位が前記空間の中で動く軌跡に合わせて前記第一の部位が動くように前記ロボットを制御する処理である、
請求項16に記載のロボット制御方法。

【請求項18】
 
前記ディスプレイは、前記オペレータに装着するためのヘッドマウントディスプレイであり、
前記表示処理は、前記空間を仮想的に再現した仮想空間の中に前記オペレータの動きに合わせて動くアバターを配置する配置し、前記アバターの目から視線方向に見える様子を表わす画像を前記視界画像として前記ディスプレイに表示させる処理である、
請求項16または請求項17に記載のロボット制御方法。

【請求項19】
 
前記表示処理は、前記オペレータを計測することによって求められた三次元形状および前記ロボットに設けられた計測装置によって得られたデータに基づいて求められた三次元形状を用いて前記アバターを前記空間に配置し、前記視界画像を前記ディスプレイに表示させる処理である、
請求項18に記載のロボット制御方法。

【請求項20】
 
前記オペレータが足踏みするのに伴って前記ロボットを移動させる第二の制御処理、を行い、
前記表示処理は、前記ロボットが前記仮想空間において再現される位置に前記アバターを配置し、前記視界画像を前記ディスプレイに表示させる処理である、
請求項18または請求項19に記載のロボット制御方法。

【請求項21】
 
前記表示処理は、前記ロボットを仮想した仮想ロボットを前記仮想空間の中の前記位置に配置し、前記視界画像を前記ディスプレイに表示させる処理である、
請求項20に記載のロボット制御方法。

【請求項22】
 
前記表示処理は、特定のコマンドが入力されまたは前記ロボットに特定のイベントが生じた場合に、前記ロボットを仮想した仮想ロボットを前記仮想空間の中の前記位置に配置し、前記アバターを前記位置の近傍に配置し直し、前記視界画像を前記ディスプレイに表示させる処理である、
請求項20に記載のロボット制御方法。

【請求項23】
 
前記アバターが配置し直された後に前記オペレータが動作を行った場合に、前記オペレータと前記ロボットとの位置関係が前記アバターと前記仮想ロボットとの位置関係と同じであるならば前記動作によって前記ロボットに生じる変化が起きるように前記ロボットを制御する、第三の制御処理を行う、
請求項22に記載のロボット制御方法。

【請求項24】
 
前記ロボットが前記物体に触れまたは前記空間の中の障害物に干渉した場合に、前記物体に触れたことまたは前記障害物に干渉したことを、力覚、触覚、または聴覚を前記オペレータを与えることによって知らせる報知処理を行う、
請求項16ないし請求項23のいずれかに記載のロボット制御方法。

【請求項25】
 
前記第一の部位によって前記物体を前記オペレータの所望する通りに取り扱うことができない場合に他のロボットと協同して当該物体を取り扱うための協同処理を行う、
請求項16ないし請求項24のいずれかに記載のロボット制御方法。

【請求項26】
 
前記表示処理は、前記オペレータの動きに応じたタスクを行うように前記アバターを動かしながら前記視界画像を前記ディスプレイに表示させる処理である、
請求項18ないし請求項23のいずれかに記載のロボット制御方法。

【請求項27】
 
機械を制御する機械制御方法であって、
オペレータが前記機械の存在する空間の中の前記機械の近傍の位置に居るならば前記オペレータの視界に現われる様子を表わす視界画像をディスプレイに表示させる表示処理を行い、
前記オペレータが動作を行った場合に、前記オペレータが前記空間の中の前記位置に居るならば前記動作によって前記機械に生じる変化が起きるように前記機械を制御する制御処理を行う、
機械制御方法。

【請求項28】
 
前記ディスプレイは、前記オペレータに装着するためのヘッドマウントディスプレイであり、
前記機械は、パワーアシストスーツである、
請求項27に記載の機械制御方法。

【請求項29】
 
ディスプレイに表示された画像をオペレータに見せながら、タスクを実行するようロボットを制御するコンピュータに用いられるコンピュータプログラムを格納した、前記コンピュータによるアクセスが可能な記録媒体であって、
前記コンピュータプログラムは、
前記オペレータが前記ロボットの存在する空間に居るならば前記オペレータの視界に現われる様子を表わす視界画像を前記ディスプレイに表示させる表示処理を前記コンピュータに実行させ、
前記オペレータの動きに応じたタスクを前記ロボットに実行させるための制御命令を生成し前記ロボットに送信する制御処理を前記コンピュータに実行させる、
記録媒体。

【請求項30】
 
前記ロボットは、物体を取り扱う第一の部位を有し、
前記オペレータは、第二の部位を有し、
前記制御処理は、前記第二の部位の動きに基づいて前記第一の部位を動かす命令を前記制御命令として生成し前記ロボットに送信する処理である、
請求項29に記載の記録媒体。

【請求項31】
 
前記制御処理は、前記オペレータが前記第二の部位を動かした際に、前記オペレータが前記空間に居るならば前記第二の部位が前記空間の中で動く軌跡に合わせて前記第一の部位が動くように前記ロボットを制御する処理である、
請求項30に記載の記録媒体。

【請求項32】
 
前記ディスプレイは、前記オペレータに装着するためのヘッドマウントディスプレイであり、
前記表示処理は、前記空間を仮想的に再現した仮想空間の中に前記オペレータの動きに合わせて動くアバターを配置する配置し、前記アバターの目から視線方向に見える様子を表わす画像を前記視界画像として前記ディスプレイに表示させる処理である、
請求項30または請求項31に記載の記録媒体。

【請求項33】
 
前記表示処理は、前記オペレータを計測することによって求められた三次元形状および前記ロボットに設けられた計測装置によって得られたデータに基づいて求められた三次元形状を用いて前記アバターを前記空間に配置し、前記視界画像を前記ディスプレイに表示させる処理である、
請求項32に記載の記録媒体。

【請求項34】
 
前記オペレータが足踏みするのに伴って前記ロボットを移動させる第二の制御処理を前記コンピュータに実行させ、
前記表示処理は、前記ロボットが前記仮想空間において再現される位置に前記アバターを配置し、前記視界画像を前記ディスプレイに表示させる処理である、
請求項32または請求項33に記載の記録媒体。

【請求項35】
 
前記表示処理は、前記ロボットを仮想した仮想ロボットを前記仮想空間の中の前記位置に配置し、前記視界画像を前記ディスプレイに表示させる処理である、
請求項34に記載の記録媒体。

【請求項36】
 
前記表示処理は、特定のコマンドが入力されまたは前記ロボットに特定のイベントが生じた場合に、前記ロボットを仮想した仮想ロボットを前記仮想空間の中の前記位置に配置し、前記アバターを前記位置の近傍に配置し直し、前記視界画像を前記ディスプレイに表示させる処理である、
請求項34に記載の記録媒体。

【請求項37】
 
前記アバターが配置し直された後に前記オペレータが動作を行った場合に、前記オペレータと前記ロボットとの位置関係が前記アバターと前記仮想ロボットとの位置関係と同じであるならば前記動作によって前記ロボットに生じる変化が起きるように前記ロボットを制御する第三の制御処理を前記コンピュータに実行させる、
請求項36に記載の記録媒体。

【請求項38】
 
前記ロボットが前記物体に触れまたは前記空間の中の障害物に干渉した場合に、前記物体に触れたことまたは前記障害物に干渉したことを、力覚、触覚、または聴覚を前記オペレータを与えることによって知らせる報知処理を前記コンピュータに実行させる、
請求項30ないし請求項37のいずれかに記載の記録媒体。

【請求項39】
 
前記第一の部位によって前記物体を前記オペレータの所望する通りに取り扱うことができない場合に他のロボットと協同して当該物体を取り扱うための協同処理を前記コンピュータに実行させる、
請求項30ないし請求項38のいずれかに記載の記録媒体。

【請求項40】
 
前記表示処理は、前記オペレータの動きに応じたタスクを行うように前記アバターを動かしながら前記視界画像を前記ディスプレイに表示させる処理である、
請求項32ないし請求項37のいずれかに記載の記録媒体。

【請求項41】
 
機械を制御するコンピュータに用いられるコンピュータプログラムを格納した、前記コンピュータによるアクセスが可能な記録媒体であって、
前記コンピュータプログラムは、
オペレータが前記機械の存在する空間の中の前記機械の近傍の位置に居るならば前記オペレータの視界に現われる様子を表わす視界画像をディスプレイに表示させる表示処理を前記コンピュータに実行させ、
前記オペレータが動作を行った場合に、前記オペレータが前記空間の中の前記位置に居るならば前記動作によって前記機械に生じる変化が起きるように前記機械を制御する制御処理を前記コンピュータに実行させる、
記録媒体。

【請求項42】
 
前記ディスプレイは、前記オペレータに装着するためのヘッドマウントディスプレイであり、
前記機械は、パワーアシストスーツである、
請求項41に記載の記録媒体。
IPC(International Patent Classification)
F-term
Drawing

※Click image to enlarge.

JP2018552962thum.jpg
State of application right Published
Please contact us by e-mail or facsimile if you have any interests on this patent. Thanks.


PAGE TOP

close
close
close
close
close
close
close