用AI把好朋友的照片转换为铅笔素描 —— 【模型识别2020之U2Net】

2023-12-21 22:32

本文主要是介绍用AI把好朋友的照片转换为铅笔素描 —— 【模型识别2020之U2Net】,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

❤️【深度学习入门项目】❤️ 之 【风格迁移】 初识

🚀 本文 墨理学AI 带你了解如何 用AI把好朋友的照片转换为铅笔素描


❤️ 【带你了解】❤️


  • ❤️ 人脸 ===》素描【 human portrait drawing】
  • 💙 图像 ===》突出物体检测 【Salient Object Detection】

文章目录

    • 🚀我的好朋友大概就是这样呐
    • 🔔基础信息
    • 🎄环境搭建
    • 🎄项目结构如下
    • 🎄项目测试步骤(官方教程)
    • 🎄项目测试(个人记录)
    • 💬总结
    • 🎉可运行代码 + 数据
    • 📢 2021-1-11 素描数据集补充
    • 🚀🚀文末专栏推荐部分🚀🚀


🚀我的好朋友大概就是这样呐


❤️ 爱了 爱了💙

1-3
1-4

1-5

2-1

2-2
2-3


🔔基础信息


  • U2-Net: Going Deeper with Nested U-Structure for Salient Object Detection
  • https://arxiv.org/abs/2005.09007
  • https://github.com/NathanUA/U-2-Net

本博文,测试该代码的人像 - 素描 转换(风格迁移),记录环境搭建和效果测试;


🎄环境搭建


官方的库版本需求要求如下:

Python 3.6
numpy 1.15.2
scikit-image 0.14.0
python-opencv PIL 5.2.0
PyTorch 0.4.0
torchvision 0.2.1
glob

我自己的 Conda 环境搭建过程如下(安装torch==1.1.0 可用):

  • 服务器:ubuntu1~18.04
  • Quadro RTX 5000 16G
  • CUDA版本 V10.0.130
conda create -n nice python=3.6.9conda activate nicepip install torch==1.1.0pip install torchvision==0.3.0
或者(建议使用 conda 来安装)
conda install pytorch==1.1.0 torchvision==0.3.0 cudatoolkit=10.0 -c pytorchpip install pillow==5.2.0pip install opencv-pythonpip install scipy
pip install thop

🎄项目结构如下


0


🎄项目测试步骤(官方教程)


1-1


🎄项目测试(个人记录)


一: 人像素描

python u2net_portrait_test.py
  • 该命令是瑞整个图像进行,素描
  • 生成效果如下:

3-1

二: 人脸素描

python u2net_portrait_demo.py 
  • 会检测 图像中人脸位置,只对人脸进行素描

3-2

三: 测试命令

python u2net_portrait_composite.py -s 20 -a 0.5
  • -s indicates the sigma of gaussian function for blurring the orignal image and -a denotes the alpha weights of the orignal image when fusing them【理解起来就是变的更好看】

  • ❤️ 藏着掖着,不存在的, 好吧 ❤️

3-3

  • ❤️ 雨露均沾,大叔跑不了 ❤️

  • ❤️ 原图越高清, 转换效果越惊艳 ❤️

3-4

GPU内存占用:

  • 测试运行:GPU单卡最高占用 5073MiB

💬总结


  • 该论文本身是一篇关于 salient object detection(突出物检测) 的文章;
  • 不曾想有大佬 把它 用于 human portrait drawing(人物肖像素描)
  • 取得不错响应,成为一个如此有趣的项目,不明觉厉…

【突出物检测】的运行效果如下


不同于图像分割,【突出物检测】只检测图像中 最可爱的 你

4-0

4-1


🎉可运行代码 + 数据


考虑到一些小伙伴 官方代码 和 模型下载有困难,博主这里把此次博文对应代码上传到网盘,里面包含本次测试使用的代码和下载的预训练模型;


有需要的小伙伴,搜索关注博主同名公号:墨理学AI ,公号后台,回复 20200101 即可获取 云盘下载链接:

20200101

📢 2021-1-11 素描数据集补充


来自 https://github.com/yiranran/APDrawingGAN 的 人脸照片和对应艺术肖像画数据集 下载链接:

  • https://cg.cs.tsinghua.edu.cn/people/~Yongjin/APDrawingDB.zip

🚀🚀文末专栏推荐部分🚀🚀


  • 🎄如果感觉文章看完了不过瘾,还想更进一步,那么可以来我的其他 专栏 看一下哦~
  • ❤️ 图像风格转换 —— 代码环境搭建 实战教程【关注即可阅】!
  • 💜 图像修复-代码环境搭建-知识总结 实战教程 【据说还行】
  • 💙 超分重建-代码环境搭建-知识总结 解秘如何让图像变得清晰【老少皆宜】
  • 💛 YOLO专栏,只有实战,不讲道理 图像分类【建议收藏】!
  • 🎄 个人整理的Cuda系列 Linux安装教程【适合小白进阶】
  • 💜 ubuntu18给当前用户安装cuda11.2 图文教程 | 配置cuDNN8.1 |
  • 💜 Linux服务器下给当前用户安装自己的CUDA10.0
  • 💜 Linux下cuda10.0安装Pytorch和Torchvision
  • 💜 Linux 可以安装多个版本的Cuda 吗 | 给我一台新的服务器,我会怎么安排 Cuda
  • 💜 查看CUDA和cuDNN的版本号

9-6


这篇关于用AI把好朋友的照片转换为铅笔素描 —— 【模型识别2020之U2Net】的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/521709

相关文章

使用Python批量将.ncm格式的音频文件转换为.mp3格式的实战详解

《使用Python批量将.ncm格式的音频文件转换为.mp3格式的实战详解》本文详细介绍了如何使用Python通过ncmdump工具批量将.ncm音频转换为.mp3的步骤,包括安装、配置ffmpeg环... 目录1. 前言2. 安装 ncmdump3. 实现 .ncm 转 .mp34. 执行过程5. 执行结

Java实现将HTML文件与字符串转换为图片

《Java实现将HTML文件与字符串转换为图片》在Java开发中,我们经常会遇到将HTML内容转换为图片的需求,本文小编就来和大家详细讲讲如何使用FreeSpire.DocforJava库来实现这一功... 目录前言核心实现:html 转图片完整代码场景 1:转换本地 HTML 文件为图片场景 2:转换 H

Python中Json和其他类型相互转换的实现示例

《Python中Json和其他类型相互转换的实现示例》本文介绍了在Python中使用json模块实现json数据与dict、object之间的高效转换,包括loads(),load(),dumps()... 项目中经常会用到json格式转为object对象、dict字典格式等。在此做个记录,方便后续用到该方

Java+AI驱动实现PDF文件数据提取与解析

《Java+AI驱动实现PDF文件数据提取与解析》本文将和大家分享一套基于AI的体检报告智能评估方案,详细介绍从PDF上传、内容提取到AI分析、数据存储的全流程自动化实现方法,感兴趣的可以了解下... 目录一、核心流程:从上传到评估的完整链路二、第一步:解析 PDF,提取体检报告内容1. 引入依赖2. 封装

使用Java读取本地文件并转换为MultipartFile对象的方法

《使用Java读取本地文件并转换为MultipartFile对象的方法》在许多JavaWeb应用中,我们经常会遇到将本地文件上传至服务器或其他系统的需求,在这种场景下,MultipartFile对象非... 目录1. 基本需求2. 自定义 MultipartFile 类3. 实现代码4. 代码解析5. 自定

Python进行JSON和Excel文件转换处理指南

《Python进行JSON和Excel文件转换处理指南》在数据交换与系统集成中,JSON与Excel是两种极为常见的数据格式,本文将介绍如何使用Python实现将JSON转换为格式化的Excel文件,... 目录将 jsON 导入为格式化 Excel将 Excel 导出为结构化 JSON处理嵌套 JSON:

Spring AI使用tool Calling和MCP的示例详解

《SpringAI使用toolCalling和MCP的示例详解》SpringAI1.0.0.M6引入ToolCalling与MCP协议,提升AI与工具交互的扩展性与标准化,支持信息检索、行动执行等... 目录深入探索 Spring AI聊天接口示例Function CallingMCPSTDIOSSE结束语

Kotlin Map映射转换问题小结

《KotlinMap映射转换问题小结》文章介绍了Kotlin集合转换的多种方法,包括map(一对一转换)、mapIndexed(带索引)、mapNotNull(过滤null)、mapKeys/map... 目录Kotlin 集合转换:map、mapIndexed、mapNotNull、mapKeys、map

三频BE12000国补到手2549元! ROG 魔盒Pro WIFI7电竞AI路由器上架

《三频BE12000国补到手2549元!ROG魔盒ProWIFI7电竞AI路由器上架》近日,华硕带来了ROG魔盒ProWIFI7电竞AI路由器(ROGSTRIXGR7Pro),目前新... 华硕推出了ROG 魔盒Pro WIFI7电竞AI路由器(ROG STRIX GR7 Phttp://www.cppcn

关于集合与数组转换实现方法

《关于集合与数组转换实现方法》:本文主要介绍关于集合与数组转换实现方法,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1、Arrays.asList()1.1、方法作用1.2、内部实现1.3、修改元素的影响1.4、注意事项2、list.toArray()2.1、方