当前位置: 首页 > 科技观察

曾在字节实习的小程序员,教你一步提取动漫台词!比PS更清晰

时间:2023-03-22 16:03:27 科技观察

本文经AI新媒体量子比特(公众号ID:QbitAI)授权转载,转载请联系出处。每当看到喜欢的动漫,想要画线稿、改色等等,你会怎么做?你会用PS吗?是不是有点麻烦?结果还是一团糟?GitHub上有个小姐姐做了一个动漫台词提取器,一行代码就搞定了!效果是这样的:又是这样的:很干净很清晰!如何一步提取动漫素描这个名为Anime2Sketch的“快速且优秀”的素描提取器可用于插图、动漫艺术和漫画。使用Python语言开发,使用前确保满足以下条件:Python3(推荐Anaconda)CPUorNVIDIAGPU+CUDACuDNNPillow,PyTorch首先执行以下两步:安装需要的软件包:pipinstall-rrequirements.txtfrom从GoogleDrive下载预训练的权重文件,然后把它放到weights/文件夹下就可以测试了!使用下面一行代码:python3test.py--dataroot你的输入目录--load_size512--output_dir你的输出目录其中参数load_size:由于内存限制,程序需要在处理之前调整输入图像的大小。默认情况下,它被调整为512x512。这么方便,怎么实现呢?(一个小小的遗憾是目前只能在linux或者macOS上运行。)基于一个论文实现,作者介绍这个画线提取程序是基于论文《用于草图到照片合成的对抗性开放领域自适应算法》的。这也是她在字节跳动公司实习时写的一篇论文,是她实习成果的一部分。正如论文中提到的,为了从照片中合成缺失的手绘草图,他们提出了一个从草图到照片以及从照片到草图的联合学习框架。并进一步提出了一种简单而有效的开放域采样和优化策略。他们的方法利用学习到的草图到照片和照片到草图的域内数据映射,这些数据可以传输到开放域类。最后,他们将本文的研究成果应用到动画线稿的提取中,制作了这样一个程序。有网友看到后兴奋不已:可以用来给自己的宝宝制作《精灵宝可梦》和《刺陀螺》的彩页!有人想知道这在技术上与使用Photoshop有何不同?也有网友解释说因为Photoshop只检测边缘,所以会有“伪影”,这个明显更干净!不过也有网友指出,最终图片输出的质量还可以提高,比如使用PNG格式。(原来是JPEG)还有人跑题了,疯狂安利了样图里的动漫海贼战争(VinlandSaga)!作者介绍向小鱼(右图),@Mukosame。普渡大学博士在读,电气与计算机工程,清华大学毕业。博士水平的研究侧重于图像和视频增强、人脸对齐和识别的深度学习。今年,我将作为研究科学家加入FacebookRealityLabs的On-DeviceAI团队。有兴趣的同学点击链接试试:https://github.com/Mukosame/Anime2Sketch