USB ウェブカメラとじゃんけん¶

カメラを接続します。 まず USB-C を抜きます。OV5640 モジュールのフレキシブルケーブルを FPC1 に挿し、SW7 が CAM（カメラのピンを IPRO7AI に接続し、カメラの電源をオン）、SW8 が PWR になっていることを確認します。U6 を接続し、最後に USB-C をコンピューターに接続します。

ウェブカメラ構成をビルドします。 SDK のルートから次を実行します。

make -C apps/multimedia/ipro7_uvc_cam DEFCONFIG=defconfig_reef_ov5640

出力は apps/multimedia/ipro7_uvc_cam/build_reef_ov5640/build_out/ipro7_uvc_cam_IPRO7.bin です。DEFCONFIG= を付けずに make だけを実行すると別のボード（IPRO7 EVB）向けにビルドされ、Reef では動作しません。

書き込みます。 SW1（BOOT）を押したまま SW2（RESET）を短く押し、SW1 を離してダウンロードモードに入ってから、IntelProCube のディレクトリから標準の 2 MB テーブルで書き込みます。

./ipro_iot_tool_macos --chipname ipro7 --chip-variant IPRO7AI \
    --port /dev/cu.usbserial-XXXX --baudrate 921600 \
    --pt chips/ipro7/partition/partition_cfg_2M.toml \
    --firmware <SDK>/apps/multimedia/ipro7_uvc_cam/build_reef_ov5640/build_out/ipro7_uvc_cam_IPRO7.bin

./ipro_iot_tool_linux --chipname ipro7 --chip-variant IPRO7AI \
    --port /dev/ttyUSB0 --baudrate 921600 \
    --pt chips/ipro7/partition/partition_cfg_2M.toml \
    --firmware <SDK>/apps/multimedia/ipro7_uvc_cam/build_reef_ov5640/build_out/ipro7_uvc_cam_IPRO7.bin

.\ipro_iot_tool.exe --chipname ipro7 --chip-variant IPRO7AI `
    --port COM5 --baudrate 921600 `
    --pt chips/ipro7/partition/partition_cfg_2M.toml `
    --firmware <SDK>\apps\multimedia\ipro7_uvc_cam\build_reef_ov5640\build_out\ipro7_uvc_cam_IPRO7.bin

出力に [All Success] があることを確認してください（このツールは失敗しても終了コード 0 で終了します）。この 2 つの構成は mfg パーティションを使いません。

コンソールを開いてリセットします。 U6 のポートを 115200 ボーで開き、SW2 を短く押します。コンソールに次のように表示されます。

[SYS] Reset reason: <理由>
[UVC] Starting init task...
[OS] Starting OS Scheduler...
[UVC] Bringing up USB UVC webcam (720p MJPEG)...
[UVC] Streaming pipeline started

コンピューターがカメラを認識していることを確認します。 ボードは USB VID/PID 0x3896/0x0701 の IPRO7 UVC Cam として現れます。

system_profiler SPUSBDataType | grep -A4 "IPRO7 UVC Cam"

lsusb -d 3896:0701

コンピューターで映像を見ます。

• macOS：QuickTime Player を開き、「ファイル」>「新規ムービー収録」を選び、録画ボタンの横のメニューで IPRO7 UVC Cam を選びます。
• Windows：「カメラ」アプリを開き、IPRO7 UVC Cam に切り替えます。

• Linux：

  ffplay -f v4l2 -input_format mjpeg -video_size 640x360 /dev/video0
  

映像には 2 つのサイズがあり、コンピューター上のアプリがどちらかを選びます。1280×720（情報量の多いシーンでは約 15 fps。USB Full-Speed の帯域による制限）と 640×360（30 fps）です。

センサーを調整します（任意）。 コンソールの cam コマンドは、OV5640 のレジスターを直接読み書きでき（レジスターアドレスとデータは 16 進数）、フレームをグリッドに分けた統計も表示できます。

cam rd 300a 2

RD 300a 56 40

300a と 300b には OV5640 のチップ ID（0x56、0x40）が入っています。cam wr <reg> <hexbytes> はレジスターに書き込み、cam grid [cols rows] は各セルの Y、U、V の平均を GRID と GRIDEND の間に表示します。書き込んだ値は、リセット後にデフォルトに戻ります。

じゃんけん構成に切り替えます。 defconfig_reef_rps をビルドし、手順 3 と同じように書き込みます（パスは build_reef_rps にします）。

make -C apps/multimedia/ipro7_uvc_cam DEFCONFIG=defconfig_reef_rps

出力は apps/multimedia/ipro7_uvc_cam/build_reef_rps/build_out/ipro7_uvc_cam_IPRO7.bin です。手の形を認識するモデルはファームウェアにリンクされているため、別途書き込むモデルはありません。

遊びます。 リセット後、コンピューターで IPRO7 UVC Cam を 640×360 で開きます。上部にスコアバー、下部にメッセージバーがあり、中央の枠が NPU の見ている領域で、認識中の手の形がリアルタイムでラベル表示されます。手を枠の中で静止させると、映像に 3、2、1 とカウントダウンが表示され、ボードがあなたの手を取り込み、自分の手をランダムに選んで、両者の手とスコアを表示します。手が枠から出ると、次のラウンドが始まります。

コンソールで rps と入力すると、モデルとゲームの状態が表示されます。

rps

model   : ready, <バイト数> B from <ソース>, loaded in <ミリ秒> ms, <残り> KB heap left
npu     : <フレーム数> frames, 0 errors, <毎秒の推論回数> fps, last <ミリ秒> ms
now     : <現在の手> <信頼度>%  (r <%> p <%> s <%> n <%>)
game    : round <ラウンド数>, you <勝ち数> me <負け数> draw <引き分け数>, conf >= 60%, mirror on