マシンビジョン
マシンビジョン（Machine Vision、MV）とは、産業（特に製造業）でのコンピュータビジョンの応用を意味し、自動検査、プロセス制御、ロボットのガイドなどに使われる[1][2]。MVの適用範囲は幅広い[2][3][4]。
コンピュータビジョンがコンピュータによる画像処理を主に研究対象としているのに対して、マシンビジョンはそれ以外にロボットアームなどの他の製造機器を接続するコンピュータネットワークやデジタル入出力機器も含めたシステムが必要となる。従って、マシンビジョンは、計算機科学、機械工学、光学、ファクトリーオートメーションなどを統合した工学の一分野となっている。
概要
[編集]マシンビジョンシステムは、ベルトコンベア上の物体を数えるとか、シリアル番号を読み取るとか、表面の傷がないか調べるなどの極めて限定されたタスクを実行する。製造業者がマシンビジョンを導入するのは、それが高速で細部にわたる目視検査を休み無く実行できるからである。人間の検査者は体調の変動や長時間にわたる注意力の維持に問題があるが、短時間であれば機械以上の認識能力と問題発生時の柔軟な対応力がある。
コンピュータは必ずしも人間と同じように「見ている」わけではない。カメラは人間の眼と同じではないし、人間が推論したり想定したりすることに依存しているのに対して、コンピュータは画像の個々のピクセルを調べることで「見ている」のであり、知識ベースやパターン認識エンジンを使って結論を出すのである。人間の知覚を真似たマシンビジョンのアルゴリズムも開発されてきたが、効率を重視した特定用途向けの様々な画像処理手法も開発されてきた。マシンビジョンやコンピュータビジョンシステムは画像を一貫して処理できるが、そのようなシステムは一般に単一で繰り返されるタスクを実行するよう設計されることが多い。この分野の進展にもかかわらず、マシンビジョンやコンピュータビジョンシステムは未だに人間の画像理解能力に到達していない。具体的には、光の当たり方の変化や画質の劣化、部分的な変動に対応できない。
用途
[編集]マシンビジョンの典型的な用途としては、各種製品（ICチップ、自動車、食品、医薬品など）の検査がある。工場のラインで人間の検査者が眼で見て製品を検査する代わりに、デジタルカメラ、スマートカメラ、画像処理ソフトウェアなどで構成されるマシンビジョンシステムが同様の検査を行う。マシンビジョンシステムは半導体部品工場で広く利用されている。マシンビジョン無しではCPUの生産量は激減するだろう。マシンビジョンシステムはシリコンウェハやチップ、抵抗やコンデンサなどの検査に使われている。
自動車産業などでは、マシンビジョンシステムが産業用ロボットのガイドとして使われている[5]。溶接すべき箇所の位置あわせや表面の傷の検出などに使われている。他にも、品質保証、仕分け、資材搬送、光学的計測などの用途がある[4]。
技法
[編集]マシンビジョンの技法はMVソリューションを定義し生み出す過程で定義され[6][7]、そういったソリューションの運用に際して行われる技術的過程として定義される。ここでは主に後者を解説する。2006年の時点でMVで使われているインタフェースやコンフィギュレーションの標準化はあまり進んでいない。例えば、ユーザーインタフェース、複数コンポーネントを組み合わせる際のインタフェース、データ交換を自動化するためのインタフェースなどがある[8]。いずれにしてもMVの第一段階は画像を撮影することであり、カメラやレンズや照明を使い、その後の処理で必要な部分が識別可能となる画像を撮影できるよう設計される[9][10]。撮影した画像にMVソフトウェアパッケージによって各種デジタル画像処理が施され、必要な情報を抽出し、多くの場合抽出された情報に基づいた判断（検査の合否判定など）が行われる[11]。
多くのマシンビジョン・アプリケーションは2次元画像を使っているが、3次元画像を使う（対象物を立体的に把握する）ものも徐々に増えている[12][13]。
撮影
[編集]2次元・可視光の一般的な撮影が最も多く使われており、他にも赤外線撮影[14]、ラインスキャン撮影、3次元撮影、X線撮影[5]などが使われることがある。2次元・可視光の場合でも、モノクロ撮影とカラー撮影、解像度の違い、画像全体について同時に画像処理を行うか否か、動いている物体の認識が可能か[15]といった差異がある。3次元撮影でよく使われるのは三角測量に基づくスキャンである。他にも、レーザー光の反射にかかる時間で距離を計測する技法（TOF法）、グリッド方式、ステレオ方式などの3次元撮影技法がある[12]。
撮影機器（カメラなど）は画像処理装置とは分離しているものもあるし、一体化していることもある。後者はスマートカメラやスマートセンサーと呼ばれる[16][17]。分離型の場合、両者の接続には標準インタフェース（CameraLink、CoaXPressなど）や独自インタフェースのフレーム取り込み装置という専用ハードウェアを経由することがある[18][19][20][21]。コンピュータに直接接続可能なカメラが使われることもあり、FireWire、USB、ギガビット・イーサネットといったインタフェースで接続する[21][22]。
画像処理
[編集]画像を撮影したら、それを処理する[20]。次のような画像処理技法が使われている。
- ピクセルカウント: 明るい（あるいは暗い）ピクセル数を数える。
- しきい値設定: グレイ階調画像を白黒画像に変換する[23]。
- セグメンテーション: デジタル画像を複数のセグメントに分割して単純化したり、より分析しやすい意味のある形に変換する[24]。
- ブロブ検出と操作: 画像からブロブ（例えば灰色の物体中にある黒い穴など）と呼ばれる部分を識別する。ブロブは光学的ターゲットとして何らかのロボット操作の対象を表したり、検査においては傷を表す[25]。
- パターン認識: テンプレートマッチングなど。特定パターンを見つけ出し、カウントしたりする。物体の位置のずれや向きの違いを認識したり、重なりを認識したり、大きさの変化を認識したりといったことが含まれる[26]。
- バーコード読み取り: マシンビジョンシステム向けの一次元や二次元のバーコードを読み取る[27]。
- 光学文字認識: シリアル番号などを自動的に読み取る[28]。
- 計測: 物体の寸法をミリメートルなどの単位で測定する[29]。
- エッジ検出: 物体の輪郭を検出する[30]。
- ニューラルネットワーク処理: 自律学習型の判断システム[31]
- 数理形態学などを応用したフィルタリング
出力
[編集]マシンビジョンシステムの一般的な出力は、何らかの判定の合否である。その出力をトリガーとして何らかの機構を働かせて問題のある製品をはじいたり、警報音を発したりする。また、物体の位置や向きに関する情報を出力し、産業用ロボットへの入力とする場合もある[5]。出力データの型としては、計測値を表す数値、バーコードなどを読み取ったコード、シリアル番号を読み取った文字列、画像そのものなど様々なものがある[6][10]。
具体的な処理の流れ
[編集]同期センサーが製品（あるいは部品）がコンベア上の所定の検査位置に来たことを知らせる。センサーがトリガーを発生するとカメラがその画像をとる。このとき光源のON/OFFも同期して行われる。光源はその物体の特徴が分かり易くなるように考慮して配置され、検査に関係ない特徴は無視される（影になってもよい）。
カメラのとった画像はフレーム取り込み装置に渡される。フレーム取り込み装置はデジタイズ機器であり（スマートカメラなら内蔵しているし、そうでなければコンピュータ用のボードである）、カメラの出力をデジタル形式に変換し（一般に数値の二次元配列で画像を表す）、その画像データがコンピュータの記憶装置に蓄えられる。画像データはマシンビジョン・ソフトウェアによって処理される。
ソフトウェアはいくつかの段階で画像を処理する。一般に画像はまずノイズを低減させた後で、グレイの階調だったものが白と黒の二値画像に変換される。そのような単純化の後でソフトウェアは画像から物体を数えたり、大きさを測ったり、傷がないか調べたりする。最後にプログラムされた規則に従って、撮影された物体（製品や部品）に問題があるかどうかを決定する。問題がある場合、ソフトウェアは部品をラインから排除する機構に信号を送る。あるいは、ラインを止め、人間に通知して問題への対処を任せる。
多くのマシンビジョンシステムは白黒カメラを使用するが、最近ではカラーのカメラを使用することが多くなってきた。マシンビジョンシステムがデジタルカメラを装備することも多くなり、フレーム取り込み装置が不要となって画質の劣化が低減されてきている。
スマートカメラはプロセッサが組み込まれているカメラであり、マシンビジョン市場でシェアを伸ばしている。画像処理に最適化されたプロセッサを内蔵するため、フレーム取り込み装置も外部のコンピュータも不要となる。そのためコストが低減され、システムが単純化し、個々のカメラが専用のプロセッサを持つことになる。
市場
[編集] |
2006年時点の北米のMV市場は15億ドルと見積もられていた[32]。しかし、MV専門誌の編集長は「マシンビジョンは本来1つの産業ではない」とし、むしろ「自動車などに代表される製造業、農業、軍需産業などに役立つサービスやアプリケーションを提供するテクノロジーと製品を統合したもの」だとしている[3]。 2021年時点の市場規模は100～110億ドルとの報告もある。[33]。
脚注
[編集]- ^ Steger, Carsten, Markus Ulrich, and Christian Wiedemann (2018). Machine Vision Algorithms and Applications (2nd ed.). Weinheim: Wiley-VCH. p. 1. ISBN 978-3-527-41365-2 2018年1月30日閲覧。
- ^ a b Graves, Mark & Bruce G. Batchelor (2003). Machine Vision for the Inspection of Natural Products. Springer. p. 5. ISBN 978-1-85233-525-0 2010年11月2日閲覧。
- ^ a b Holton, W. Conard (October 2010). “By Any Other Name”. Vision Systems Design 15 (10). ISSN 1089-3709 2013年3月5日閲覧。.
- ^ a b Relf, Christopher G. (2004). Image Acquisition and Processing with LabVIEW. 1. CRC Press. ISBN 978-0-8493-1480-3 2010年11月2日閲覧。
- ^ a b c Turek, Fred D. (June 2011). “Machine Vision Fundamentals, How to Make Robots See”. NASA Tech Briefs 35 (6): 60–62 2011年11月29日閲覧。.
- ^ a b West, Perry A Roadmap For Building A Machine Vision System Pages 1-35
- ^ Dechow, David (January 2009). “Integration: Making it Work”. Vision & Sensors: 16–20 2012年5月12日閲覧。.
- ^ Hornberg, Alexander (2006). Handbook of Machine Vision. Wiley-VCH. p. 709. ISBN 978-3-527-40584-8 2010年11月5日閲覧。
- ^ Hornberg, Alexander (2006). Handbook of Machine Vision. Wiley-VCH. p. 427. ISBN 978-3-527-40584-8 2010年11月5日閲覧。
- ^ a b Demant C., Streicher-Abel B. and Waszkewitz P. (1999). Industrial Image Processing: Visual Quality Control in Manufacturing. Springer-Verlag. ISBN 3-540-66410-6
- ^ Hornberg, Alexander (2006). Handbook of Machine Vision. Wiley-VCH. p. 429. ISBN 978-3-527-40584-8 2010年11月5日閲覧。
- ^ a b Murray, Charles J (February 2012). “3D Machine Vison Comes into Focus”. Design News 2012年5月12日閲覧。.
- ^ Davies, E.R. (2012). Computer and Machine Vision: Theory, Algorithms, Practicalities (4th ed.). Academic Press. pp. 410–411. ISBN 9780123869081 2012年5月13日閲覧。
- ^ Wilson, Andrew (April 2011). “The Infrared Choice”. Vision Systems Design 16 (4): 20–23 2013年3月5日閲覧。.
- ^ West, Perry High Speed, Real-Time Machine Vision CyberOptics, pages 1-38
- ^ Belbachir, Ahmed Nabil, ed (2009). Smart Cameras. Springer. ISBN 978-1-4419-0952-7
- ^ Dechow, David (February 2013). “Explore the Fundamentals of Machine Vision: Part 1”. Vision Systems Design 18 (2): 14-15 2013年3月5日閲覧。.
- ^ Wilson, Andrew (May 31, 2011). “CoaXPress standard gets camera, frame grabber support”. Vision Systems Design 2012年11月28日閲覧。.
- ^ Wilson, Dave (November 12, 2012). “Cameras certified as compliant with CoaXPress standard”. Vision Systems Design 2013年3月5日閲覧。.
- ^ a b Davies, E.R. (1996). Machine Vision - Theory Algorithms Practicalities (2nd ed.). Harcourt & Company. ISBN 978-0-12-206092-2
- ^ a b Dinev, Petko (March 2008). “Digital or Analog?”. Vision & Sensors: 10–14 2012年5月12日閲覧。.
- ^ Wilson, Andrew (December2011). “Product Focus - Looking to the Future of Vision”. Vision Systems Design 16 (12) 2013年3月5日閲覧。.
- ^ Demant C., Streicher-Abel B. and Waszkewitz P. (1999). Industrial Image Processing: Visual Quality Control in Manufacturing. Springer-Verlag. p. 96. ISBN 3-540-66410-6
- ^ Linda G. Shapiro and George C. Stockman (2001): “Computer Vision”, pp 279-325, New Jersey, Prentice-Hall, ISBN 0-13-030796-3
- ^ Demant C., Streicher-Abel B. and Waszkewitz P. (1999). Industrial Image Processing: Visual Quality Control in Manufacturing. Springer-Verlag. p. 95. ISBN 3-540-66410-6
- ^ Demant C., Streicher-Abel B. and Waszkewitz P. (1999). Industrial Image Processing: Visual Quality Control in Manufacturing. Springer-Verlag. p. 111. ISBN 3-540-66410-6
- ^ Demant C., Streicher-Abel B. and Waszkewitz P. (1999). Industrial Image Processing: Visual Quality Control in Manufacturing. Springer-Verlag. p. 125. ISBN 3-540-66410-6
- ^ Demant C., Streicher-Abel B. and Waszkewitz P. (1999). Industrial Image Processing: Visual Quality Control in Manufacturing. Springer-Verlag. p. 132. ISBN 3-540-66410-6
- ^ Demant C., Streicher-Abel B. and Waszkewitz P. (1999). Industrial Image Processing: Visual Quality Control in Manufacturing. Springer-Verlag. p. 191. ISBN 3-540-66410-6
- ^ Demant C., Streicher-Abel B. and Waszkewitz P. (1999). Industrial Image Processing: Visual Quality Control in Manufacturing. Springer-Verlag. p. 108. ISBN 3-540-66410-6
- ^ Turek, Fred D. (March 2007). “Introduction to Neural Net Machine Vision”. Vision Systems Design 12 (3) 2013年3月5日閲覧。.
- ^ Hapgood, Fred (December 15, 2006/January 1, 2007). “Factories of the Future”. CIO 20 (6): 46. ISSN 0894-9301 2010年10月28日閲覧。.
- ^ 【そもそも編】マシンビジョンとは, (November 2021)
関連項目
[編集]外部リンク
[編集]- 画像処理ポータル 画像機器総覧 画像機器総覧は画像処理に関連する製品、技術情報を紹介しているポータルサイト
- マシンビジョン倶楽部（Mavic）マシンビジョンに特化したポータル＆コミュニティサイト マシンビジョン倶楽部
- マシンビジョンシステム業界の予測と展望 －画像処理－ 丸地三郎（FAビジョン株式会社）、PDF形式
- The Machine Vision Portal::Buyers Guide::Solutions::News::Informations
- 【そもそも編】マシンビジョンとは？市場規模や将来性について
| 分野 |
| ||
|---|---|---|---|
| トピック | |||
| 典拠管理データベース: 国立図書館 |
|---|
