如何在Android增强现实中检测物理对象？

Question

我发现了很多方法来检测不同的形状。但是当我正在寻找一个物理对象时，运气很好。从我读的内容来看，我们应该在图像周围有一个黑色边框来制作一个图案文件。如果我遵循这个概念并生成一个模式，那么我的应用程序会在打印输出中检测图像但是在现实世界中，一个物体并不一定有一个黑色的边框。

更新

虽然我接受一个答案，我的问题仍然没有解决。由于检测物理对象仍然没有解决方案。

欢迎任何进一步的研究和链接！

Answer 1

坏消息是，你不能使用AndAR来检测物理对象。 AndAR基于一种基准标记方法，其中标记由两部分组成：固体边界和内部模式。该模式编码一个值，该值可用于解决要在标记上呈现的特定模型，并通过边框可以轻松确定标记与设备的相对方向。显然，这只是平面图像识别。

对3D对象进行对象识别是一个更复杂的问题，我不知道任何提供交钥匙解决方案的Android库，但只需在移动设备上识别一个对象就可行。

一种可能性可能是调查可用的Android AR工具包（Layar，Junaio，Qualcomm AR SDK），它们现在都支持一些图像识别。这可能是通过在各种旋转中拍摄茶壶的图像，并将这些图像用作您希望应用与之匹配的图像，以便您可以使用此解决方案，但请记住，它们仅用于对图像进行平面匹配，而不是真正的3D对象，所以性能可能不是很好。 （好吧，Metaio Mobile SDK Pro可以进行3D识别和跟踪，但它非常昂贵）。

虽然物体识别可能是通过比较相机帧与您希望识别的物体图像（或通过比较来自相机帧的图像特征与预先计算的图像特征等）来完成的，但跟踪是另一回事。如果您想要在3D空间中准确地跟踪3D对象，那么您真的需要拥有或建立它的3D模型，并且为每个帧确定相机图像和3D对象之间的点对应以进行跟踪。真正的无辅助（即没有深度相机）3D跟踪很难。

我希望这给你一些背景，你可以用它来评估你的下一步。

更新： 高通公司的Vuforia SDK允许你跟踪“多目标”，这是用一个固定的空间关系的一组平面跟踪表面的物体。如果你制作了一个“立方体”，你的物体（茶壶）的六面可能有点不同的照片。 结束的https://ar.qualcomm.at/qdevnet/developer_guide/Trackables

2013更新：

我与这些没有经验，但：

Metaio现在提供CAD模型的3D跟踪：https://dev.metaio.com/sdk/tutorials/3d-tracking-based-on-cad-data/

ARLab.com的LINKAR承诺对象匹配。http://www.arlab.com/objecttracking

我会注意到使用单词“匹配” - 我认为这里的用例是你知道你想要覆盖的对象（玩具盒和引擎等）。区分多个3D对象可能完全超出范围。

Answer 2

我最近读到的研究正在做关于使用对象表示分层形的词汇。当然，没有图书馆可供下载，但如果您对一般方法here感兴趣，您可以找到一些论文。你

可能也有兴趣在this纸。它描述了基于一组轮廓来检测对象的算法。

Answer 3

你有没有考虑OpenCV for detecting and tracking object？看看Find Objects with a Webcam教程（C++/Qt）。 OpenCV适用于Android - OpenCV 4 Android。