AR+全景展现奇妙博物馆 抖音背后的AI技术揭秘
中新网5月18日电 为响应今年国际博物馆日“超级连接的博物馆：新方法、新受众”这一主题，抖音联合中国国家博物馆、南京博物院等七大国家一级博物馆，推出“博物馆抖音创意视频大赛”，通过运用业内领先的手机端人像抠图技术、Slam和3D渲染技术，创造全新的博物馆文化场景，让国宝文物以更加新颖的形式走进年轻用户视野，唤醒更多年轻人对中国文化遗产的关注与热爱。
用户在使用抖音进行视频自拍时，选择“奇妙博物馆”贴纸，即可全景观赏国家博物馆北18号展厅，感受真实的虚拟“逛馆”体验。北18号展厅陈列的展品是新中国成立以来党和国家领导人在外交活动中受赠的礼品，部分展品为首次对外展出，具备较高的文化价值。
据字节跳动AI Lab相关负责人介绍，“奇妙博物馆”贴纸运用了手机端人像抠图技术，该技术在不需要任何用户操作的情况下，可实时将摄像头中的人像部分和背景分割出来，将用户的自拍人像与国博北18号展厅的全景图像进行有机融合，使用户如临国家博物馆展厅现场。
而借助Slam和3D渲染技术，通过摄像头捕获图像和IMU信息，技术人员选取浙江省博物馆馆藏国宝——五代吴越国阿育王塔图像，重建出场景的三维空间结构，并在场景平面上将该文物的三维物体及特效进行渲染。用户在使用AR铜阿育王贴纸功能后，吴越国阿育王塔将和现实场景融为一体，并不断动态旋转，用户可随时随地360°全方位观赏这一惊鸿国宝；同时，文物的大小、角度均可由用户进行自由变换调整，王塔既可以出现在用户的办公桌上，甚至停留在手指尖上，切身感受“将国宝和博物馆带回家”的奇妙体验。
字节跳动AI Lab相关负责人表示，今日头条在上述人像抠图技术以及Slam和3D渲染技术上累计了诸多研发经验和实际应用案例，已成功运用于抖音“尬舞机”、火山小视频萌宠拍照贴纸和火山拍红包等功能。
而这些前沿科技，得益于公司整体在人工智能上的持续投入。技术出海是字节跳动全球化发展的核心战略。人工智能技术是字节跳动在全球市场取得优势地位的关键。不论是综合资讯类的TopBuzz、News Republic，还是短视频类的Tik Tok、Musical.ly、Vigo Video、BuzzVideo，这些字节跳动海外产品的内核，都是基于数据挖掘的人工智能技术。
字节跳动创始人兼CEO张一鸣表示，核心技术是公司背后的硬竞争力，公司非常重视核心技术的应用，一直在加大相应投入。未来公司还将继续深入研究基于硬件视频的编解码或者人工智能识别芯片。字节跳动云集了众多高技术的工程研发人才，每天要处理的海量数据提供了难以计数的训练样本，为AI人工智能技术在短视频领域的持续创新式应用奠定了坚实基础。
“科技创新+内容形式创新”的组合拳模式在助推传统文化方面已初见成效。目前，国家博物馆已通过其抖音官方账号发布“博物馆抖音创意视频大赛”视频，在两天时间内，已收获近50万点赞量。
抖音相关活动负责人表示，以前沿技术为依托，抖音希望能以更多样、更具创新的新方式，让包括国宝文物在内的中国传统文化得以在平台上实现穿透式传播，为其注入全新的活力与魅力。
