代码之家  ›  专栏  ›  技术社区  ›  Shreyash Mahajan

如何使用azure自定义视觉服务响应边界框绘制形状

  •  4
  • Shreyash Mahajan  · 技术社区  · 8 年前

    我正在使用azure认知服务 custom vision service 从捕获的图像中检测形状。根据他们的文件,我得到了他们格式的回复。

    但我是一个面临的问题,以绘图形状以上的形象。

    {
        "id": "0fbda4ee-8956-4979-bf57-a252441af98d",
        "project": "9ca4032b-beeb-40ad-9396-1c3fcfd9ba89",
        "iteration": "27c85265-a158-4fc4-b22a-d535dd758d80",
        "created": "2018-06-11T09:34:29.9496528Z",
        "predictions": [
            {
                "probability": 0.0102891214,
                "tagId": "677afcf8-bc4a-493f-b588-707663286125",
                "tagName": "ball",
                "boundingBox": {
                    "left": 0.2889924,
                    "top": 0.0169312358,
                    "width": 0.7007024,
                    "height": 0.8284572
                }
            },
            {
                "probability": 0.012788726,
                "tagId": "ca844f08-b6c0-4d9a-9010-73945d442708",
                "tagName": "cricket ball",
                "boundingBox": {
                    "left": 0.304018974,
                    "top": 0.413163722,
                    "width": 0.299461246,
                    "height": 0.436399817
                }
            },
            {
                "probability": 0.0229086485,
                "tagId": "ca844f08-b6c0-4d9a-9010-73945d442708",
                "tagName": "cricket ball",
                "boundingBox": {
                    "left": 0.2889924,
                    "top": 0.0169312358,
                    "width": 0.7007024,
                    "height": 0.8284572
                }
            },
            {
                "probability": 0.0100123268,
                "tagId": "4672144d-5593-446f-be63-5144a35d0e6e",
                "tagName": "pipe",
                "boundingBox": {
                    "left": 0.711509764,
                    "top": 0.377838552,
                    "width": 0.07217276,
                    "height": 0.113578767
                }
            },
            {
                "probability": 0.0167990718,
                "tagId": "4672144d-5593-446f-be63-5144a35d0e6e",
                "tagName": "pipe",
                "boundingBox": {
                    "left": 0.9821227,
                    "top": 0.9500536,
                    "width": 0.0115685463,
                    "height": 0.033854425
                }
            },
            {
                "probability": 0.923659563,
                "tagId": "4672144d-5593-446f-be63-5144a35d0e6e",
                "tagName": "pipe",
                "boundingBox": {
                    "left": 0.288039029,
                    "top": 0.411838,
                    "width": 0.291451037,
                    "height": 0.4237842
                }
            }
        ]
    }
    

    上面是我在自定义vision api调用中得到的响应。但问题在于boundingbox。它的值总是从0开始的分数。如果我想用它画一个正方形,那就不可能了,因为我不知道用这个值画正方形/矩形的确切逻辑。

    如何使用这些值并使用它绘制矩形/正方形?

    1 回复  |  直到 7 年前
        1
  •  9
  •   Nicolas R    8 年前

    回复/tl;dr

    这些边界框值在图像原始大小的百分比中,因此可以通过将这些值乘以图像宽度(对于左和宽度值)或由图像高度(顶部和高度值)来绘制矩形。

    请记住,位置是从左上角表示的,所以位置0,0就是这个角。

    样品细节

    我有一个小的自定义视觉检测可乐瓶。

    原始图像如下: original image

    我使用自定义视觉门户进行了预测,得到了以下结果-让我们以87.5%的分数关注这个突出显示的结果:

    portal result

    使用API(可用 here ,我还进行了预测操作,得到了(除其他细节外)这个预测:

    {
        "probability": 0.875464261,
        "tagId": "1932c95f-ed4a-4675-bde4-c2457e1389e6",
        "tagName": "CocaLight",
        "boundingBox": {
          "left": 0.453497916,
          "top": 0.0,
          "width": 0.2523211,
          "height": 0.8738168
        }
    }
    

    考虑到我的图像尺寸是 800×652 (所以imagewidth 800,imageheight 652):

    矩形绘制

    左上角位置?

    • X(与左边框的垂直距离)= API x ImageWidth中的左值 =0.453497916 x 800=362
    • Y(与上边框的水平距离)= API x ImageHeight的最大值 =>0.0 x 652=0

    所以我的矩形起始位置是(362,0)。

    尺寸?

    • 矩形宽度= API的宽度x ImageWidth = 201;
    • 矩形高度= 距API x ImageHeight的高度 = 569;

    我们来画吧!

    Draw API Result

    看来是对的!