OpenCV检测模具底部

这就是我所拥有的:一台摄像机拍摄一组骰子。蓝色矩形表示感兴趣的区域,在每个ROI中,我想看看是否有一个骰子放置在那里,以及骰子的哪一侧正在显示(这些骰子只是占位符,我不做任何与地下城掷骰相关的工作!)。

我认为问题很明显:因为我使用的是一个非常广角的相机,我不仅看到了带有卷轴的骰子侧面(这将是相机指向的一侧),而且还看到了右上角和左下角的剑。

我很难思考如何让这个工作。我怎样才能弄清楚我试图识别的哪一边是“正确的”一边?

非常感谢。