干货：不需要标注了？看自监督学习框架如何助力目标检测

川长思鸟来 2022-09-15 12:30 9阅读 0赞

**关注并星标**

**从此不迷路**

**计算机视觉研究院**

![ad2c13fb3cdeb88066ec7d29d79773a9.gif][]

![b83d614f3df00f0865c441a1abc513fb.gif][]

![42769e628cf859170adf9187ceba59e4.png][]

公众号ID｜**ComputerVisionGzq**

学习群｜**扫码在主页获取加入方式**

计算机视觉研究院专栏

**作者：Edison\_G**

> 来自自动驾驶公司轻舟智航和约翰霍普金斯大学的学者提出了一个自监督学习框架，可从未标注的激光雷达点云和配对的相机图像中进行点云运动估计，与现有的监督方法相比，该方法具有良好的性能，当进一步进行监督微调时，模型优于 SOTA 方法。

转自机器之心

![7c25489dcc5e234869303887c812eae4.png][]

![d2b03bf25a9d3bd8b5c9b67dbf648107.png][]

![5488121b33781073bc758e478386e2ed.png][]

![902d434dee904ca5b4f9ee9da28c03f3.png][]

论文链接：https://arxiv.org/pdf/2104.08683.pdf

![82ef4d23bb10321b4d6e16ed00ffe013.png][]

![89e6e65965d3efe7cb5edc0e81977fe5.png][]

![47a0ace97f852e60ca213d9d3ca4c220.png][]

*图 1：该研究提出的自监督柱运动学习概览。*

![4efe8a171b533105fd2efe39b6366282.png][]

![6ce20f46747f4cb6f95b790ed4b01b3e.png][]

*图 2：用于点云体柱运动估计的自监督学习框架。*

![5426579df9ae4d7f8f2ae269cce277e3.png][]

![150d5f36c6c49870b54384d1651c2432.png][]

*图 3：概率运动掩膜说明，左：投影点在前向相机图像上的光流（已将自我运动分解）。右：点云的一部分，颜色表示非空体柱的静态概率。*

**实验**

研究人员首先进行了各种组合实验，以评估设计中每个单独组件的贡献。如表 1 所示：

![fef6e141962f1e3a31263899558bbbd9.png][]

*表 1：每个单独组件的贡献，结果包括均值和中位误差。*

![f8bb808026e85aa7e29dc700cc187abd.png][]

![80451d7d8a6e9f295fc09d1a9154f42b.png][]

*表 3：与 SOTA 结果对比。实验分为三个速度组，表中记录了平均误差和中位误差。*

![2c435bb2092c9628fdc494113f3e67df.png][]

![87c6d7f1774f3b83917459bc8f5f2115.png][]

*图 5：点云体柱运动预测对比。第一行显示真值运动场，第二行显示的是该研究全模型的评估结果，而只使用结构一致性的基础模型的预测结果在第三行。每一列都演示了一个场景。*

![6dfc361bfa4a35ccd6c1e152bf788990.png][]

![04333057e7c0f42d5d976bf201a072a3.gif][]

**计算机视觉研究院学习群等你加入！**

**计算机视觉研究院主要涉及深度学习领域，主要致力于人脸检测、人脸识别，多目标检测、目标跟踪、图像分割等研究方向。研究院接下来会不断分享最新的论文算法新框架，我们这次改革不同点就是，我们要着重”****研究****“。之后我们会针对相应领域分享实践过程，让大家真正体会****摆脱理论****的真实场景，培养爱动手编程爱动脑思考的习惯！**

![42e394c06ce075821c9e087a2c9794f7.png][]

**扫码****关注**

**计算机视觉研究院**

公众号ID｜**ComputerVisionGzq**

学习群｜**扫码在主页获取加入方式**

[ad2c13fb3cdeb88066ec7d29d79773a9.gif]: /images/20220828/5df528fcb40744d78126754104ee2fe3.png
[b83d614f3df00f0865c441a1abc513fb.gif]: /images/20220828/58f3a799601a45fab2723e0b8c66bc14.png
[42769e628cf859170adf9187ceba59e4.png]: /images/20220828/0c41bbc127ec42a3ab789c6a42dec343.png
[7c25489dcc5e234869303887c812eae4.png]: /images/20220828/af44c4cba68a43bb9da4dd0e040ece92.png
[d2b03bf25a9d3bd8b5c9b67dbf648107.png]: /images/20220828/e4737f49a51c46b29397af40d975f530.png
[5488121b33781073bc758e478386e2ed.png]: /images/20220828/d4bda17639e2405ebff2433d0a3e37e0.png
[902d434dee904ca5b4f9ee9da28c03f3.png]: /images/20220828/4b1facdca6ae49cdb56f4fb7f869ca20.png
[82ef4d23bb10321b4d6e16ed00ffe013.png]: /images/20220828/b94fa1f487ec4da3b5d13a5a8a7034c2.png
[89e6e65965d3efe7cb5edc0e81977fe5.png]: /images/20220828/1297051614f84de99df809119d4b0ac5.png
[47a0ace97f852e60ca213d9d3ca4c220.png]: /images/20220828/5a877d8bce54463f98e0ad5ddbdc7ba6.png
[4efe8a171b533105fd2efe39b6366282.png]: /images/20220828/631c7a923553456d9f613441afc941dc.png
[6ce20f46747f4cb6f95b790ed4b01b3e.png]: /images/20220828/42ef6c3c01384370b9c252d92a18482b.png
[5426579df9ae4d7f8f2ae269cce277e3.png]: /images/20220828/f2a6c3c5c4014c84824ee50df617da5e.png
[150d5f36c6c49870b54384d1651c2432.png]: /images/20220828/aa84533297f74b019e9fdf78328fbbd5.png
[fef6e141962f1e3a31263899558bbbd9.png]: /images/20220828/429885b269ce4f618f3614d1a36a1873.png
[f8bb808026e85aa7e29dc700cc187abd.png]: /images/20220828/55c21257557e422f810a7ad10152e8c0.png
[80451d7d8a6e9f295fc09d1a9154f42b.png]: /images/20220828/874e0c9180234a78bdb9a42e1e55ae47.png
[2c435bb2092c9628fdc494113f3e67df.png]: /images/20220828/bfb363e65e0b4ecf94abf549744e7d26.png
[87c6d7f1774f3b83917459bc8f5f2115.png]: /images/20220828/dbea89ea9d8d4330bd908ec1ef7701b0.png
[6dfc361bfa4a35ccd6c1e152bf788990.png]: /images/20220828/493e6c20cde04983b520f6b97057245e.png
[04333057e7c0f42d5d976bf201a072a3.gif]: /images/20220828/2fcb5ed6567d45c4a6b8a2f804370c68.png
[42e394c06ce075821c9e087a2c9794f7.png]: /images/20220828/c7e00d4d1750427da86c9a9f57f0402c.png