POST-CRESTプロジェクト

  JST CRESTの「実世界検索に向けたネットワークセンシング基盤ソフトウェアOSOITE」に平成18年度から参画させて頂き,様々なセンサーで街をセンシングしセンシングした情報を街のユーザーに提供するシステムを他大学と共同で開発していました.その中で中央大学チームのCREST班では,カメラを用いた人物のセンシングを担当しました.平成23年度にこのプロジェクトは終了し,現在はPost-CREST班としてこの研究を継続して続けています.
  カメラには,複雑な立体環境下でも三次元計測が簡易に行えるステレオカメラを用い,三次元計測には我々が提案している差分ステレオという手法を用いています.本手法を用いて得られる三次元情報をもとに,ユーザーに提供する人の流れや人数,不審者の情報を動画中から検出することが目標です.

差分ステレオを用いた人物検出

  我々が提案している差分ステレオや影検出を用いることで,屋外環境での計測における影に対しても,人物領域の抽出ならびにその距離情報の取得を直接的に実現しています.さらに,不安定になりがちなステレオ計測に関して,差分ステレオにより抽出した前景のみに計測を限定できるため, 計測のロバスト化と高速化が可能になっています.
img01
  差分ステレオのアルゴリズム
    
img02
  人物検出の流れ

-関連論文-
    梅田和昇,寺林賢司,橋本優希,中西達也,入江耕太:“差分ステレオ−運動領域に注目したステレオ視−の提案”,精密工学会誌,Vol.76, No.1, 2010


HOG特徴量と差分ステレオによる人物検出

  監視カメラからの人流計測のために,カメラ画像から自動的に人物を検出することが重要です.そこで,差分ステレオにHOG特徴量を複数用いた人物の大まかな形を表現することが可能なJoint HOG特徴量を用いて高速で高精度な人物検出手法を提案します.
JointHOG
  JointHOG特徴を用いた人物検出

-関連論文-

人物の追跡手法

  人物の行動や人の流れの検出には,人物の時系列での情報が必要です.この人物の時系列情報を得るために,画像中の人物を認識・追跡する手法を提案しています. 我々の提案手法では,等速直線運動を運動モデルとしたカルマンフィルタを用いて人物の位置を予測し,実際に計測される人物の位置と比較・対応付けることで同一人物として認識し追跡します.
  また,人物が画像中で重なり合うような混雑環境下においてもロバストな追跡が可能なパーティクルフィルタをベースにした手法も提案しています.
  予測→計測→対応付けを繰り返して人物を追跡し,その人物の時系列での情報を取得します.
Human_Tracking
  人物追跡

-関連論文-

人流計測手法

  駅などの公共施設での災害時における人の誘導やマーケティングなど様々な場面で人流計測のニーズが高まっています.そこで,我々はKLTとボロノイ分割を用いた人流計測手法を提案しています.
people_flow
  人流計測の一例(赤:進行方向右,緑:進行方向左)

-関連論文-