tf_object_detection.py

# この作品はMITライセンスの下で提供されています。
# Copyright (c) 2013-2024 OpenMV LLC. 全著作権所有。
# https://github.com/openmv/openmv/blob/master/LICENSE
#
# TensorFlow Liteオブジェクト検出の例
#
# この例は、内蔵のFOMOモデルを使用して顔を検出します。

import csi
import time
import ml
from ml.postprocessing.edgeimpulse import Fomo
import math
csi0 = csi.CSI()
csi0.reset()  # センサーをリセットして初期化します。
csi0.pixformat(csi.RGB565)  # ピクセルフォーマットをRGB565（またはGRAYSCALE）に設定します
csi0.framesize(csi.QVGA)  # フレームサイズをQVGA（320x240）に設定します
csi0.window((240, 240))  # 240x240のウィンドウを設定。
csi0.snapshot(time=2000)  # カメラの調整を待ちます。

# 内蔵のFOMO顔検出モデルをロード
model = ml.Model("/rom/fomo_face_detection.tflite", postprocess=Fomo(threshold=0.4))
print(model)

# 代わりに、モデルをファイルシステムストレージからロードすることもできます。
# model = ml.Model('<object_detection_modelwork>.tflite', load_to_fb=True)
# labels = [line.rstrip('\n') for line in open("labels.txt")]

colors = [  # 一度に7種類以上のクラスを検出する場合は、色を追加してください。
    (255, 0, 0),
    (0, 255, 0),
    (255, 255, 0),
    (0, 0, 255),
    (255, 0, 255),
    (0, 255, 255),
    (255, 255, 255),
]

clock = time.clock()
while True:
    clock.tick()
    img = csi0.snapshot()

    for i, detection_list in enumerate(model.predict([img])):
        if i == 0:
            continue  # 背景クラス
        if len(detection_list) == 0:
            continue  # このクラスに検出結果がない場合？

        print("********** %s **********" % model.labels[i])
        for (x, y, w, h), score in detection_list:
            center_x = math.floor(x + (w / 2))
            center_y = math.floor(y + (h / 2))
            print(f"x {center_x}\ty {center_y}\tscore {score}")
            img.draw_circle((center_x, center_y, 12), color=colors[i])

    print(clock.fps(), "fps", end="\n")