3/2 リアルタイム物体検出アプリでよりよいフィードバックを提供する #tryswiftconf

try!Swiftのセッションまとめシリーズです。Shinichi Gotoさんの「Providing Better Feedback in Real-time Object Detection Apps」についての記事になります。

資料

内容

• イメージ、動画からオブジェクトを検出する過程について
• Wantedly People
  • 名刺管理アプリ
  • 複数の名刺を検出できる
  • カメラを向けている間、ずっと名刺を検出し続けている
• 今日話すこと
  • どうやってフィードバックを改善したか
  • どうやって検出したのかは今回はしゃべらない
• エリアの座標はわかっている状態
• 名刺の部分に円を描画する
• ジャギーが発生し、フレーム間にギャップがある
• たったひとつのオブジェクトだけを検出すればいいのであれば簡単
• 人間なら区分けを推測できるが複数のオブジェクトの場合はアプリはわからない
• 改善するためにトラッキングをする
• OpenCVはiOSデバイスで性能上の問題があったので独自に開発した
  • dHash比較的軽量で良かった
• トラッキングによって改善できた
  • ユーザはより動きがわかるように
• まとめ
  • 検知のプロセスだけではなく、トラッキングについて考えてもいいと思う

その他このトークに関する情報源

• リアルタイム物体検出アプリでよりよいフィードバックを提供する (LT) | try! Swift Tokyo 2017 #tryswiftconf Day1-15 聞き起こし - niwatakoのはてなブログ
• [速報レポート] try! Swift TOKYO 2017 1日目 午後II #tryswiftconf ｜ Developers.IO
• try! Swift 2017 Tokyo に参加してきた - 2. 1日目 - My Favorite Things - Coding or die.

togetter

Providing Better Feedback in Real-time Object Detection Apps #tryswiftconf - Togetterまとめ