百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 热门文章 > 正文

听说现在有个AR APP很火,所以我也做了一个

bigegpt 2024-08-09 11:19 2 浏览

雷锋网按:本文作者qqfly,上海交通大学机器人所博士生,本科毕业于清华大学机械工程系,主要研究方向机器视觉与运动规划,会写一些好玩的内容在微信公众号:Nao(ID:qRobotics)。本文由雷锋网独家首发。

过完一个很长的寒假,终于又开学了。

昨天在图书馆刷 RL 教材的时候看到一个有趣的 app,叫做「唐纳德涂鸦」(Android:Donald Draws Executive Doodles;IOS:Trump Executive Order)。

大概功能就是可以将用户自定义的内容(图片、涂鸦、文字等)放在 D.T. 总统的决策书上,并生成动图。

一看到这个 app 我就感到眼前一亮,它综合了今年科技界最火的 AR 技术和政治界(与段子界)最火的 D.T. 总统。

『这个 app 会火!』

正如 app 作者所说的那样:"This app is gonna make the United States of Amemeica GREAT again!"

我之前在AR原理演示一文中曾有涉及过实现 AR 的方法,既然代码都还在,我就随手也做了一个 "qqfly Draws"。

首先,我需要有一段视频素材。于是,我从身后的书架上随手拿起一本「数码微距摄影之美」:

同时,放了一张 A4 纸在书面上,用于标记绘图区域。

然后,在书架前就录了段视频,拍摄的场景大概是这样的:

有了视频素材后,就是识别每帧图像中的绘图区域。

这个可以使用各种方法,我采用的方法是:先人工标记第一帧图像中的绘图区域(四个角点),之后用 Kanade-Lucas-Tomasi(KLT) 算法对这四个角点进行跟踪定位,大概效果如下:

每帧图片中的角点都标记出来了

之后要做的就是计算每两帧之间的单应性矩阵(Homography matrix)

这个利用图像帧两两之间的四个共同点(也即上述标记点)即可算出。

之后,我们只需要将所需要填充的内容转换成图片后,填充如第一幅图,其他图像则对应乘以上述单应性矩阵即可。

大概效果是这样的:

当然,如果每次填充的不是固定图片,而是一系列图片的话,就可以在上面放上动画或视频,大概效果是这样的:

也可以是这样的:

要实现这个功能还是比较简单的,各位小伙伴可以回去自己试试,代码可以参考Coursera上宾大的机器人学系列公开课第四课(Robotics: Perception)。

当然,如果有些小伙伴不会编程的话,我也可以给你提供一个更加简单、更加稳定可靠的方法:

差不多一个意思,请自备ipad

当然,我这个也只是简单玩玩,如果真要把 AR 做好的话,还是得靠做 SLAM 的各位小伙伴们。

其他脑洞大开的动手系列:

《听说现在自动驾驶很火,所以我也做了一个》

《听说现在协作机器人很火,所以我也做了1/7个》

相关推荐

10w qps缓存数据库——Redis(redis缓存调优)

一、Redis数据库介绍:Redis:非关系型缓存数据库nosql:非关系型数据库没有表,没有表与表之间的关系,更不存在外键存储数据的形式为key:values的形式c语言写的服务(监听端口),用来存...

Redis系列专题4--Redis配置参数详解

本文基于windowsX64,3.2.100版本讲解,不同版本默认配置参数不同在Redis中,Redis的根目录中有一个配置文件(redis.conf,windows下为redis.windows....

开源一夏 | 23 张图,4500 字从入门到精通解释 Redis

redis是目前出场率最高的NoSQL数据库,同时也是一个开源的数据结构存储系统,在缓存、数据库、消息处理等场景使用的非常多,本文瑞哥就带着大家用一篇文章入门这个强大的开源数据库——Redis。...

redis的简单与集群搭建(redis建立集群)

Redis是什么?是开源免费用c语言编写的单线程高性能的(key-value形式)内存数据库,基于内存运行并支持持久化的nosql数据库作用主要用来做缓存,单不仅仅是做缓存,比如:redis的计数器生...

推荐几个好用Redis图形化客户端工具

RedisPlushttps://gitee.com/MaxBill/RedisPlusRedisPlus是为Redis可视化管理开发的一款开源免费的桌面客户端软件,支持Windows、Linux...

关于Redis在windows上运行及fork函数问题

Redis在将数据库进行持久化操作时,需要fork一个进程,但是windows并不支持fork,导致在持久化操作期间,Redis必须阻塞所有的客户端直至持久化操作完成。微软的一些工程师花费时间在解决在...

你必须懂的Redis十大应用场景(redis常见应用场景)

Redis作为一款高性能的键值存储数据库,在互联网业务中有着广泛的应用。今天,我们就来详细盘点一下Redis的十大常用业务场景,并附上Golang的示例代码和简图,帮助大家更好地理解和应用Redis。...

极简Redis配置(redis的配置)

一、概述Redis的配置文件位于Redis安装目录下,文件名为redis.conf(Windows名为redis.windows.conf,linux下的是redis.conf)你可以通过C...

什么是redis,怎么启动及如何压测

从今天起咱们一起来学习一下关于“redis监控与调优”的内容。一、Redis介绍Redis是一种高级key-value数据库。它跟memcached类似,不过数据可以持久化,而且支持的数据类型很丰富。...

一款全新Redis UI可视化管理工具,支持WebUI和桌面——P3X Redis UI

介绍P3XRedisUI这是一个非常实用的RedisGUI,提供响应式WebUI访问或作为桌面应用程序使用,桌面端是跨平台的,而且完美支持中文界面。Githubhttps://github....

windows系统的服务器快速部署java项目环境地址

1、mysql:https://dev.mysql.com/downloads/mysql/(msi安装包)2、redis:https://github.com/tporadowski/redis/r...

window11 下 redis 下载与安装(windows安装redis客户端)

#热爱编程是一种怎样的体验#window11下redis下载与安装1)各个版本redis下载(windows)https://github.com/MicrosoftArchive/r...

一款轻量级的Redis客户端工具,贼好用!

使用命令行来操作Redis是一件非常麻烦的事情,我们一般会选用客户端工具来操作Redis。今天给大家分享一款好用的Redis客户端工具TinyRDM,它的界面清新又优雅,希望对大家有所帮助!简介Ti...

一个.NET开发且功能强大的Windows远程控制系统

我们致力于探索、分享和推荐最新的实用技术栈、开源项目、框架和实用工具。每天都有新鲜的开源资讯等待你的发现!项目介绍SiMayRemoteMonitorOS是一个基于Windows的远程控制系统,完...

Redis客户端工具详解(4款主流工具)

大家好,我是mikechen。Redis是大型架构的基石,也是大厂最爱考察内容,今天就给大家重点详解4款Redis工具@mikechen本篇已收于mikechen原创超30万字《阿里架构师进阶专题合集...