Please enable JavaScript.

Coggle requires JavaScript to display documents.

CameraXとMLKit (Androidでカメラを使う (CameraX (CameraXとは (めちゃくちゃ大変なのを解決したのがCamera…

- - - - コールバック地獄
        
        TextureViewの準備完了を待つ必要がある
        
        カメラの準備を待つ必要がある
      - 機種依存問題
        
        サンプル通り作ってるのに、撮影できない機種がある
        
        一回のタップでは撮影できず二回目のタップで撮影できる
        
        カメラ撮影の向き指定が効かない機種がある
        
        Camera2 JPEG_ORIENTATIONの不具合？
        
        そもそもプレビュー表示できない機種がある
        
        Camera2サンプルを信用してはダメ。
        
        アスペクト比計算がバグってる
      - プレビューだすだけでも一苦労
  - - - めちゃくちゃ大変なのを解決したのがCameraX
        
        すべてのデバイスで確実に動作するということ
        
        自動カメラテストに多額の投資をした
        
        rotation, orientation, taking picture
        
        テストラボで体表的な52デバイスでE2Eテストを実施してからライブラリをリリースする。
        
        52デバイスはマーケットの200millionアクティブデバイスを再現している
        
        さらに数百以上のデバイスで安定性・クラッシュのテストをしている
        
        拡張機能
        
        2019年10月Android Dev Summit
        
        従来ファーストパーティネイティブアプリのみだったナイトモードやHDRが、ディベロッパーも使えるようになった。
        
        実際、機種依存問題のあった端末で、CameraXのサンプルを動かしてみたが、どれもなにも手をいれることなく、動いた
        
        その他
        
        Lens Goチームと協力して、CameraXと統合したときにどう機能するかテストをした
        
        Lens Goとは、カメラを被写体に向けた時リアルタイムで分析を行うアプリ
        
        Used across hundreds of devices
        
        プロダクションでCameraXを使い、様々な問題を解決した。
        
        デバイス不整合を心配する必要はない。
        
        簡単に使えるということ
        
        New capabilities
        
        Zoom control
        
        Device rotation
        
        Flash availability
        
        スマホのレンズにフラッシュ機能があるか
        
        And a lot more
        
        Tap to focus
        
        Camera2 APIのように使いづらくないこと。
      - 実装について
        
        基本
        
        基本要素はUseCaseと呼ばれる
        
        一般的なシナリオに沿ってUseCaseを構築した
        
        Preview
        
        いわゆるカメラプレビュー
        
        Image Analysis
        
        バイト配列を取得し、オブジェクト検出やARの機能が有効になります。
        
        Capture
        
        写真撮影
        
        1 more item...
        
        ビデオ録画もできそう
        
        2 more items...
        
        UseCase詳細
        
        Preview
        
        アスペクト比とディスプレイのrotationをセット
        
        Capture
        
        画質を優先するかレイテンシを優先するかというモードがあるのでそれをセットする
        
        キャプチャ時のアスペクト比を設定
        
        回転を設定
    - - https://youtu.be/QYkTXJ2TuiA?t=43
      - https://www.youtube.com/watch?v=49lU1NtYE5g
- - - - ImageAnalysを2つ作って、
        camera = cameraProvider.bindToLifecycle(this as LifecycleOwner, cameraSelector, preview, imageCapture, imageAnalyzer, faceAnalyzer)
        ２つ設定してみたところ
        
        エラー発生
        case binding failed
        java.lang.IllegalArgumentException: No supported surface combination is found for camera device - Id : 0. May be attempting to bind too many use cases.
  - - - 現在エミューレータで動かないや、Samsungでクラッシュするなどのissueがある
        
        https://issuetracker.google.com/issues?q=componentid:618491%20status:open%20videocapture
- - - - 一般的なモバイル利用例に注力
        
        テキスト
        
        顔
        
        ランドマーク
        
        バーコード
        
        ラベル
      - データをライブラリに渡すだけでいろんな種類の情報を提供する
      - デバイス上やクラウドで動作
        
        デバイス上はネットワーク接続なしでもデータ処理が可能
        
        クラウドはGCPを利用したり
      - もしMLKitに欲しい事例をカバーするAPIがない場合でも、独自のTensor flow Liteモデルを使用可能。