，看到什么就复制什么。这是魔法还是孙悟空的神通？两者都不。这就是AR的魔力。如何将项目的图像导入Photoshop？首先你要拍一张照片，然后通过网络或者存储卡把照片传到电脑上，再导入到Photoshop界面。那么，这些过程能否一步完成呢？现在，AR可以做到。在一个叫做ARCut&Paste的工具中，用户只需要在手机上预装这个工具，然后对着目标物体进行拍摄，然后就可以将图片复制粘贴到Photoshop中，有点“动”空间中的物体”。意思是。先来看看效果：盆栽。衣服。书。如上动图所示，无论是盆栽、衣服还是书籍，一看到就可以复制，一键移动到Photoshop中，变成图片素材，这对平面设计师来说是福音。据介绍，该工具切割延迟约2.5秒，粘贴延迟约4秒，可进一步加快流程。此外，作者还宣布下周将发布另一款AI+UX原型机！项目介绍ARCut&Pastetool是一款AR+ML原型（prototype），可以从周围环境中复制固定物体，粘贴到图像编辑软件（Photoshop）中。需要注意的是，此工具仅适用于Adob??ePhotoshop软件，未来可能会支持不同的输出。项目地址：https://github.com/cyrildiagne/ar-cutpaste原型有3个独立的模块，分别是移动APP、本地服务器和对象检测及后台清除服务。首先，用户需要在手机上预装ARCut&Paste。其次，npminstall作为手机端APP与Photoshop的接口，用户需要提前配置好本地服务器。virtualenvvenvsourcevenv/bin/activatepipinstall-rrequirements.txt最后，显着目标检测和背景去除由外部服务执行（使用BASNet技术）。用户需要将下面代码中的123456替换为自己的Photoshop远程连接密码。pythonsrc/main.py\--basnet_service_ip="http://X.X.X.X"\--basnet_service_host="basnet-http.default.example.com"\--photoshop_password123456技术细节该工具使用BASNet(Qinetal,CVPR2019)执行显着物体检测和背景去除。然后，使用OpenCVSIFT找出手机在计算机屏幕上的对齐位置。您只需要一张手机照片和一张屏幕截图，即可获得准确的x、y屏幕坐标系。显着物体检测和背景去除项目作者使用BASNet执行显着物体检测和背景去除。BASNet出自CVPR2019一篇关于边界显着性检测的论文《BASNet: Boundary-Aware Salient Object Detection》。它的主要创新在于损失函数的设计，采用了交叉熵损失、结构相似性损失和IoU损失的混合损失，使得网络更加关注边界质量而不是仅仅关注区域精度前。它可以在单个GPU上以25fps的速度运行，并在六个公共数据集上取得SOTA结果。BASNet的架构如下图所示：为了方便，项目作者做了一个BASNetHTTP服务包装器。GitHub地址：https://github.com/cyrildiagne/basnet-http定位SIFT（Scale-invariantfeaturetransform，尺度不变特征变换）是一种关键点检测算法，SIFT算法检测到的关键点通常是对光线、视角等的变化非常稳健，受视线遮挡的影响更小。SIFT算法的另一个优点是计算速度非常快，基本可以满足实时运算。SIFT算法示例。图片来源：维基百科URL：https://en.wikipedia.org/wiki/Scale-invariant_feature_transform该工具使用OpenCVSIFT计算出手机在计算机屏幕上的对齐位置。项目作者将其封装成一个python小包，参见：GitHub地址：https://github.com/cyrildiagne/screenpoint作者简介CyrilDiagne，该工具的发明者，目前居住在法国巴黎，集艺术家、设计师于一体,和节目结合成员的三个职业身份，他是名副其实的斜杠中年。2008年从巴黎LesGobelins视频学校毕业后，CyrilDiagne与其他五位同学一起创立了艺术机构LAB212。他还是巴黎Google文化研究实验室的驻场艺术家，以及瑞士洛桑艺术与设计大学的媒体和交互设计总监。十多年来，CyrilDiagne一直执着于将新颖的数字技术与艺术设计相结合，创造出精彩的交互体验。同时，他也相信这种结合将使计算机技术更加人性化。例如，他开发了一款面部涂鸦工具，可以借助Tensorflow.js、FaceMesh和Three.js，利用AR在网页浏览器上进行涂鸦。还有一个chrome扩展，可以为Instagram个人资料图片添加3D效果。效果类似于Facebook的3D照片功能，让2D照片呈现多个视角。如果你对此类艺术或技术设计感兴趣，可以在CyrilDiagne的GitHub主页上找到更多有趣的作品。个人主页：https://github.com/cyrildiagne
