未来の非接触UIのカギを握る 距離画像カメラ

未来の非接触UIのカギを握る
距離画像カメラ
~カメラからセンサへZC-1000シリーズ
オプテックス株式会社 要素技術部/部長 村田記一
最近、
ゲーム用に低価格の距離画像を取得できるカメラが市販されている。
これにより、
距離画像、
あるいは3Dの動画距離映像を利用した研究や、開発が進んでいる。
また、距離画像技術を利用し
た研究や論文は増加傾向にある。
本稿では、外乱光の影響が少なく10万Lxの太陽光下でも距離画像を取得できる距離画像カメラ
「ZC-1000シリーズ」
を紹介する。
これはTOF方式の距離画像カメラであるが、競合するその他の
距離画像技術との違いを示し、それぞれのアプリケーションに対して、TOF方式の距離画像技
術の利点、欠点を解説する。
市場背景など、実際の応用例や、そこに利用されているソフトウェアな
ども紹介しながら、距離画像市場を概観する。最後に、距離画像技術の今後の方向性やトレンド
を紹介する。
1
TOF方式距離画像カメラの優位点
2009 年、画像処理による屋外用防犯センサの実
プ、LAN タイプ、カラーカメラを追加した RGB-Z
など、ユーザの要望に応じていくつかの仕様を提
供している。
証実験をイギリスで行ったが、車のヘッドライト
や、照明環境の違いにより、安定した検知と誤報
低減を達成できずにいた。一方で、当時、TOF の
距離画像技術を今後の技術として検討しており、
距離画像カメラの優位性に可能性を感じていた。
同年、オプテックスは、距離画像カメラのプロ
トタイプの提供を開始し、2010 年から量産機の販
売を始めた
(図1)
(表1)
。現在では、高出力タイ
表 1 ZC-1000 シリーズ仕様書
仕様項目
ZC-1070U(標準タイプ)
ZC-1050U(狭角タイプ)
視野角(水平/垂直/対角)
70 / 55 / 90 (*1)
50 / 37 / 59 (*1)
DC12V(付属のACアダプタで供給)
電源入力
15-20W(Typ.) 、 30W(最大)
消費電力
0~50℃ / 85%RH以下
動作温度/湿度
160×120 ピクセル (176×132 ピクセル)
有効画素(出力画素)
近赤外線LED(850nm)
光源
0.5 ~ 4.0m (*2)
測定距離
X,Y方向 : ±5% (*2) 、 Z方向 : ±2% (*2)
距離精度
Z方向 : σ =±2% (*2)
距離繰り返し誤差
10万Lx以下 (*2)
使用周囲照度
20MHz(20/30MHz:ロングレンジモード時)
変調周波数
60FPS(最大)
(*2)
フレームレート
160mm(幅)×65mm(高さ)×55mm(奥行き)
サイズ
600g以下
質量
カメラマウント 上下2箇所 1/4インチネジ止め
固定方法
Windows-XP(SP2以降) 、 Windows 7 (32bit)
PC側対応OS
Visual C++対応
対応開発環境
USB 2.0
インタフェイス
B,Z,X,Y(各16ビット)又は B,Z(各16ビット)を選択可
画像データの出力フォーマット
FCC クラス A準拠 、 CE クラス A準拠
エミッション
*1 視野角の数値は目安となる.
*2 使用環境、設定モードにより数値は異なる.
図 1 ZC-1000 シリーズ
eizojoho industrial
February 2013︱21
■ 複雑な立体形状を捉える[3次元計測]
カラーカメラでの画像処理では、侵入者を抽出
また、1 秒間に 60 フレームの撮像を行うことが
するために、画像の変化を検出する差分処理(背
できるため、距離画像を動画のように録画、再生
景差分、フレーム間差分)
を行う。しかし、侵入者
することができる。人間の一般的な動きであれば、
が、背景と類似した服を着用していると、輝度の
このフレームレートで、動きぶれ(Motion Blur)の
違い(コントラスト)
がなくなり、分離が難しくな
影響を受けずに画像取得することができる
(図2)。
る。3 次元情報があれば、侵入者の距離と背景と
各ピクセルには、3 次元の距離情報(x、y、z)を
の距離の違いにより、侵入者を抽出することがで
有するため、それを立体空間で再構成し、視点を
きる。距離コントラストとして抽出することがで
変えれば、上空からの位置関係や、横から見た距
きるため画像処理プロセッサの負担も少なくする
離を解析することができる。一方向から撮影した
ことができ、侵入者の身長、形状などの特徴抽出
だけで、物体の立体的構成、空間の物体配置をす
や、形状認識による誤報低減処理に集中すること
ることもできる(図3)。
ができる。
カラーカメラを使った距離画像の取得方法には、
カメラを 2 台以上使うステレオカメラの手法があ
る。基本原理は、画像処理の世界では古典的と言
われるほど確立しているが、カメラの価格低下や
処理チップの進化により、その応用範囲は広い。
ただし、屋外の侵入者の検出に対しては、背景と
同じ色の服を着ていると分離が難しく、夜間の警
戒時には照明が必要など現実的には実用的ではな
い。また、ステレオ法は、2 つのカメラに写って
いるパターンを照合する必要があり、画像処理プ
ロセッサの負担は重く、また、パターンマッチン
グ処理が必要である。したがって、白い壁などテ
クスチャのない物体の距離計測ができない。アク
ティブ型の TOF 法にはテクスチャや、背景との色
図 2 ジャンプ 60fps
の違いは必要ない。最近、ステレオ法でも、ラン
図 3 3 次元による距離解析
22 ︱February 2013
eizojoho industrial
オプテックス株式会社
ダムパターンを照射することで、物体にはテクス
理チップであり、それぞれが進化の著しいトレン
チャがなくても距離計測ができるアクティブ型が
ド技術である。性能や価格面で、急速な変化が期
研究されている。
待される所以である。
光切断法は、精度の高い立体データの取得方法
として知られている。レーザーなどで立体を切断
するように光を照射し、カメラから見た位置から
2
距離画像の応用
立体を計算する手法である。切断面をスキャンす
現在、距離画像がポピュラーな技術になったの
るために時間が必要であり、動画には適さない。
は、2010 年 11 月発売になったMicrosoft社のKinect
スキャン速度を高速化する手法として、光パター
の影響が大きい。低価格で距離画像を取得できる
ン法、あるいは光コード法と呼ばれるものがある。
機器として、研究にも利用されている。
切断面を複数作成することでスキャン時間を短縮
上記の理由もあり、距離画像の応用はゲーム用
し、高速化を図る。このような方法でスキャン速
途が多い。エンターテインメントとしてのゲーム
度を 1 秒以内にしたと言う報告もあるが、リアル
にも人気があるが、シリアスゲームとしても研究
タイムの反応には、計算速度の高速化も同時に必
されている。シリアスゲームとは、教育や、訓練
要である。
のためのゲームで、距離画像を利用することによ
ランダムパターンを画面全体に投射し、その位
りプレーヤーが動作を立体的に確認しながら作業
置から立体を計算する手法もあり、計算速度さえ
を習得することができる。運動不足の学生の興味
高速化されれば、リアルタイムで距離画像を取得
を引くための手段として学校で使われる例もある
することができる。Microsoft社のKinectはこの原
が、軍事訓練や、リハビリなど、必然性の高い用
理で動作している。専用チップにより計算の高速化
途もある(図4)。このような用途には、骨格認識
を図っているが、計算量は多く、XBOX の CPU も
のソフトウェアが活用されている(図5)。
距離演算に使用されているといわれている。
人体の特殊な動作や、ポーズをジェスチャー入
TOF の手法は、投光して物体から反射した光の
力 と し て 利 用 す る こ と が で き る。2011 年 か ら
時間を何らかのアナログ量で計測する手法で、距
Kinect を利用した論文がロボット学会などから発
離演算は、計測値と実測値の補正計算が主なもの
表されており、2012 年の秋には、累積数十件を超
となり、計算量は少ない。レーザー測距計は、特
えるものとなっている。その中には、ロボットへ
定の一点の距離を計測する手段であるが、これを
の命令手段として、ジェスチャーや、手指の動き
回転させたものがレーザースキャンで、線上のエ
を認識する研究もされている。手話の自動読み取
リアの距離計測をすることができる。これを全体
りも研究テーマの 1 つである。手話は言語により
で上下にモータで動かすことにより距離画像を得
異なり、手話通訳は、英語の知識だけではなく、
る手法があり、スキャンレートは高くないが障害
日本語と英語の手話の両方を知る必要がある。し
物認識などの一般的な手法である。
たがって、手話通訳者の数は少なく、自動翻訳の
TOF 方式の距離画像カメラは、距離計測用の受
要求は高い。
光素子が 2 万点以上あり、同時に距離計測を行う
ジェスチャー入力を店舗などで使用すると、広
ためモータなどの可動部が不要で、移動体などの
告用途に使用することができる(図6)。距離画像
振動・衝撃の耐性が要求される用途には、安心し
カメラをショッピング・ウィンドウの中に設置し、
て利用することができる。使用する技術は、投光
ウィンドウショッピングする顧客の動きに合わせ
では、LED やレーザー、受光では CMOS、画像処
て、ディスプレイを変化させることでアイキャッ
eizojoho industrial
February 2013︱23
■ 複雑な立体形状を捉える[3次元計測]
図 4 Silverfit 社(蘭)リハビリソフトウェア
図 5 (有)
アルファ 骨格認識ソフトウェア
図 6 日本コントロールシステム(株)ジェスチャー認識ソフトウェア
チとして利用できる。ZC-1000 は、太陽光の影響
アとしては、人体トラッキングソフトや、ジェス
を低減できる機能があり、ショッピング・ウィン
チャー認識ソフトをベースに作成することができ、
ドウの中に設置し、屋外の人の動きに反応するシ
コンテンツ(表示内容)を用意すれば、比較的容易
ステムを作成することもできる。案内板にはタッ
にアプリケーションを提供することができる
(図7)
。
チパッドが使われているが、非接触の案内板は動
ロボットの用途としては、周囲の 3D マッピン
作が面白く、楽しめる案内板としてイベント用途
グによる位置認識と、障害物認識がある。産業用
に利用されている。このような用途のソフトウェ
の無人搬送車(AGV:Automated Guided Vehicle)
24 ︱February 2013
eizojoho industrial
オプテックス株式会社
図 7 島根県産業技術センター、
(株)日立ソリューションズ ジェスチャー認識ソフトウェア
には、レーザースキャナが一般的に利用されてい
用することができる。安全用途には、安全規格へ
るが、今後、荷物の搭載量が増加すると積み上げ
の認証なども必要になるが、研究レベルでは検討
た高さに対応する障害物認識が必要になってく
が始まっている。空間上に任意の危険領域を設定
る。当社では、障害物を空間ブロックの位置とし
し、その空間への侵入を検知するソフトウェアで
て表示するソフトウェアをカメラに搭載したもの
ある。カメラに画像処理プロセッサを搭載した機
を準備している。このようなものを利用すると、
種も提案しており、既にカメラ本体にインストー
カメラとしてではなく、障害物の位置センサとし
ルされている。
ての運用をすることができる。
公共の施設では混雑度合いにより、災害時の対
車載用途にも興味が集まっているが、前方・後
応が変化するため、現在の人数や人の流れの情報
方の障害物検知用途以外にも、車室の搭乗者の位
の要求もある。天井から見た人の流れを距離画像
置検知用にも期待されている。車内を個人のエン
で計測することにより、公共の場所でプライバ
ターテインメント空間にしようとする動きもあり、
シーを侵害せず情報を取得することができる。
非接触の入力装置としての要望もある。
これには、
データセンターや金融機関では、一部の施設の
ヘッドアップディスプレイなど、表示器とのコラ
入場に特定の ID を有している人だけを管理して
ボレーションも期待されている。距離画像の技術
入場させる。正規入場者の後に付いて不正に入場
は、3 次元表示技術とも相性がよく、表示空間に
する人を検出することを共連れ検出と称する。ス
ジェスチャーを行うと表示が変わるなど、3 次元
テレオカメラなどの距離画像で、共連れを検出す
ユーザインタフェイスのフィードバックとしても
るのが一般的であったが、TOF方式の距離画像を
考えられている。
利用することにより、誤動作を防ぎ実用的な性能
また、距離画像カメラは、安全センサとして利
を確保することができた。
eizojoho industrial
February 2013︱25
■ 複雑な立体形状を捉える[3次元計測]
図 8 ZC-1000 シリーズ 高出力仕様を用いた太陽光下 距離画像
(10 万 Lx)
寸法計測の分野でも、±数 mm 程度の精度を確
を付加したいというものである。距離情報の抽出
保することに成功している。光切断法やレーザー
とともに、カラー画像が取得できると、立体ムー
測距器の方式に比べると距離精度は劣るが、縦横
ビーとなる。立体 TV の方向性と合致することか
高さの計測を同時に行うなど、不定形の物体の体
ら、今後の市場トレンドである。
積を一度に計測する手法としては優れている。タ
一般的にこのような光学センサは太陽光などの
ンクの容量管理など、センチ単位の精度で充分な
強力な光には影響を受けるものであり、距離計測
分野では、凹凸のある物体の容積の計測で期待さ
が不能になるセンサも多い。ZC-1000 は 10 万 Lx
れており、一部では液体の計測としても研究され
の太陽光下での使用も可能であるが、より性能の
ている。
高い外光対策が求められている(図8)。
価格に対する要求も強いが、利用されているデ
3
距離画像カメラの今後
バイスは、技術トレンドの強いものばかりであり、
数量の増加とともに価格は低下する方向である
TOFを利用した距離画像の技術は、画角を広く、
が、システム全体の低価格化の手法として、カメ
長距離まで距離計測ができることが顧客要求であ
ラに、画像処理プロセッサを追加する手法を提案
り、そのためには感度向上が必須である。また、
している。これにより、距離画像カメラは、PC 不
現在の距離画像カメラは、2 万画素程度が一般的
要となり、カメラからセンサとしての利用ができ
である。長距離用途では解像度も要求され、数
るようになる。
十万画素の画素数が望まれる。画素数が多くなる
距離画像カメラの技術は今後も、急速に進化を
と各画素の面積も小さくなり、感度低下となるた
遂げる。当社もユーザのご要望に応じて、より使
め、解像度の要求と、広角や長距離の要求は技術
いやすい製品開発を続けていく所存である。
的には相矛盾した要求事項となる。
距離画像カメラの受光素子は、CMOS 技術を
使って作られており、現在の汎用 CMOS カメラの
☆オプテックス株式会社
感度向上技術を流用することで、性能向上の可能
TEL.077-579-8360 FAX.077-579-7030
性は高い。
[email protected]
そのほかの要求事項は、距離画像にカラー情報
http://www.optex.co.jp/
26 ︱February 2013
eizojoho industrial