日本独立开发者佐藤曾因阿斯伯格综合症辍学,后来自学AI开发了AIGahaku项目(AI画师),轰动了日本和美国10天内覆盖数百万用户。此外,她还做了另一个有趣的项目PixelMe,可以将输入的图片一键转换成像素画。还在用PS把图片转成像素画?日本独立开发者佐藤尼特自学人工智能技术,开发了网站PixelMe,可以将人像照片一键转换成像素画,生成的图像还可以导入到最近很火的游戏《动物森友会》中。不仅如此,这个网站还有宠物模式,主人的照片也可以变成像素画。PixelMe官网:https://pixel-me.tokyo/en/先来看看效果:PixelMe的图片过渡效果。左上是输入图像,右上是128x128像素的生成结果,第二行分别是64x64、48x48和32x32像素的生成结果。我们可以看到人像照片在处理过程中被裁剪了,只保留了头部部分。转换后的图像有4种像素,分别为128x128、64x64、48x48和32x32,用户可以自行选择。另外,转换结果的背景色默认为无色,用户可以自定义背景色。转换后的128x128像素图,背景颜色设置为天蓝色。接下来就来试试宠物模式吧,是时候让猫主子出来了!效果还不错,丑主好像更丑……好像连像素化都要看颜值。看完效果,我们再来看看PixelMe背后的技术细节。PixelMe像素图转换背后的原理Pixel-me使用pix2pix模型生成8位风格的肖像。pix2pix是一种基于GAN架构的风格迁移模型,来自论文《Image-to-Image Translation with Conditional Adversarial NetWorks》,作者包括朱俊彦等人。Pix2pix使用成对的图像数据,学习如何从一个图像转换为另一个图像,并生成可以伪造的图像。使用pix2pix转换不同风格和用途的图像。PixelMe和pix2pix的区别在于它使用像素化图像进行模型训练,然后让模型输出像素图。关于作者这些有趣项目的作者没有接受过人工智能方面的培训。佐藤十年前从东京的一所学校辍学,去了护士学校,并接受了面包师的培训。在佐藤发现自己可能因为阿斯伯格综合症而无法很好地适应工作环境后,他决定尝试另一个全新的领域:人工智能。佐藤两年前开始研究人工智能。虽然他在大学期间只上了一些基础编程课,但佐藤仍然想学习Python和JavaScript,以便使用最新的AI技术创建有趣的项目并与社区分享。除了上面介绍的PixelMe,佐藤还在今年3月发布了其自主研发的项目AIGahaku(AI画师)。该项目将用户上传到网站的人像照片转换成古典绘画风格的画作。AIGahakuURL:https://ai-art.tokyo/en#/还是以刚才的男性照片为例,AIGahaku生成的油画如下图:AIGahaku的生成效果。左图是输入,右图是输出的古典风格人像。此外,该项目还支持滤镜的使用,用户可以点击不同的滤镜来改变生成的画作的风格。该网站还使用基于pix2pix的ML模型进行图像风格转换,它将上传的照片作为输入并生成逼真的复古肖像。该网站在推特上被分享后,先是在日本引起轰动,继而在美国和其他国家引起轰动。全世界每天约有100万用户使用AIGahaku。看来佐藤做到了。
