特に深度画像を対象とするコンピュータービジョンアルゴリズムはありますか?


9

私はkinectベースのアプリケーションで使用するマーカー検出アルゴリズムを調査してきました。私が見つけることができた作業の大部分は、明らかに「通常の」画像の特徴検出に焦点を当てています。

ただし、kinectハードウェアは、ピクセルごとに11ビットの深度値を提供します(基本的に、調整後)。

この深度画像には、オブジェクトのエッジの周りに投影された影からのさまざまな視覚的なアーティファクトもあります(たとえば、このビデオの濃い黒の境界線http://www.youtube.com/watch?v=-q8rRk8Iqww&feature=relatedを参照してください)。

一部の従来のマシンビジョンテクニック(エッジ検出など)はこれでうまく機能しますが、他のマシンビジョンテクニックはうまくいかず、これについて議論しているネット上の情報はほとんどないようです。

簡単な例として、depth値を使用すると、マーカーブロックを見つけたら、その方向を簡単に検出できます。

それで、特徴検出のための深度画像の処理をカバーする議論/論文などを見た人はいますか?

「深度」マーカーを検出するための優れたアルゴリズムを推奨できますか?

私がこれまでに行ったことは、イメージを処理するためにopencvを使用したアドホックな実験でしたが、安定していないか、十分に高速ではありません。

なんらかの試用をせずに市販のマシンビジョン製品にリンクする場合は、それが適切だと思う理由を回答に含めてください。


このための論文やプログラムはたくさんあります。申し訳ありませんが、低帯域幅ではこれ以上詳しく答えることはできません。RGBDemoアプリを参照してください。オブジェクト認識機能が含まれています。また、PointCloud Library(PCL)、ROS、OpenCV、ソフトウェア用、おそらく論文用のGoogle Scholar。あなたはOpenCVはあなたに満足ではないと述べていますが、PCLとRGBDemoは満足しているかもしれません。

Kinectを披露するデモの実装や、Kinectまたは画像処理ツールキット(opencvなど)から3Dモデルを生成する方法を示すPCデモを探していません。深度画像に基づく特徴認識のアルゴリズムを探しています。

RGBDemoはこれらのアルゴリズムを実装しています。コードまたはコードのリファレンスを読みます。

回答:


8

登録と認識のための私のお気に入りの2.5D / 3D機能記述子は、スピン画像です(オリジナルの論文+ 博士論文ソフトウェアの詳細) CMUから入手可能な)。

その他の最近の進歩(すべて適切なアルゴリズムをオンラインで検索可能)には、3Dシフト、高速ポイントフィーチャヒストグラム、法線整列放射状フィーチャ(NARF)、深度カーネル記述子が含まれます。古い方法では、曲率やエッジなどの表面プロパティを使用して、領域パッチを識別していました。

どれが一番いいですか?検索したいもの、視点の不変性、追加の混乱などに依存します。


7

キーワードはすべて正解でしたが、資料を探しているときに関連記事がまったく見つからなかったのには驚いています。

幸いにも、私はIEEE Xploreデジタルライブラリにアクセスできます。以前はこれらの特定のアルゴリズムは必要ありませんでしたが、とても興味深いので、関連があると思われるクイック検索の結果をいくつか示します(タイトルで判断せず、要約を見てください)。

残念ながら、少なくともIEEE Xploreライブラリ経由ではなく、これらの論文に無料でアクセスできるとは思いません。アクセス権がない場合は、おそらくGoogleの学者で問題なく解決できます。無料の紙のデータベースもいくつかあります(IEEEにアクセスできないときは、Mendeleyデータベースを使用していました)。また、論文の抽象的な部分やランダムな部分をググリングするだけで、結果が得られる場合があります(記事のほぼ完成した発行済みバージョンに出くわす可能性があります)。

前述の論文を見つけるために使用した検索クエリは、3D画像深度画像kinectでした。最初の2つのクエリを検索するときに処理を投入することもできます。

これが一部に役立つことを願っています!これ以上本題に入れないのが残念で、本当に面白いですね。



@mankoffは抽象的ですが、追跡に集中している作業を見ているだけですが、特徴をあまり検出せずに直接情報を使用することに集中しているようです。しかし、私は要約を読んだだけなので、よくわかりません。

いくつかの論文のPDFを見つけるには、論文のタイトルをグーグルするだけで十分です。別の良い情報源はCiteSeerです。 citeseerx.ist.psu.edu/index論文のリストをありがとう!
12
弊社のサイトを使用することにより、あなたは弊社のクッキーポリシーおよびプライバシーポリシーを読み、理解したものとみなされます。
Licensed under cc by-sa 3.0 with attribution required.