【开源】天猫店整店商品图片采集工具:屠刀(包含题图、颜色图、内容图,适用于服装类,按货号保存商品图片)...

本文主要是介绍【开源】天猫店整店商品图片采集工具:屠刀(包含题图、颜色图、内容图,适用于服装类,按货号保存商品图片)...,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

废话少说,先上程序运行时的图片

 

开源地址:

https://github.com/xland/TuDao

 

编译好的版本下载地址:

https://github.com/xland/TuDao/blob/master/%E5%8F%91%E5%B8%83%E5%8C%85/%E5%B1%A0%E5%88%80.zip?raw=true

 

说明:

天猫店整店商品图片采集工具(包含题图、颜色图、内容图,适用于服装类,按货号保存商品图片),目前只测试了一个店铺,可能会存在一些问题,收费负责解决问题。

 

关键代码

下载图片的关键代码:

        static void getPic(string url,string name){ServicePointManager.ServerCertificateValidationCallback = ValidateServerCertificate;HttpWebRequest request = WebRequest.Create(url) as HttpWebRequest;request.UseDefaultCredentials = true;HttpWebResponse response = request.GetResponse() as HttpWebResponse;Stream stream = response.GetResponseStream();var fileStream = new FileStream(name, FileMode.Create, FileAccess.Write);stream.CopyTo(fileStream);fileStream.Dispose();stream.Close();}

 

获取HTML的关键代码:

        static string getHtml(string url){ServicePointManager.ServerCertificateValidationCallback = ValidateServerCertificate;HttpWebRequest request = WebRequest.Create(url) as HttpWebRequest;request.UseDefaultCredentials = true;HttpWebResponse response = request.GetResponse() as HttpWebResponse;Stream stream = response.GetResponseStream();StreamReader reader = new StreamReader(stream, Encoding.Default);string html = reader.ReadToEnd();stream.Close();return html;}

请注意里面有一句UseDefaultCredentials,因为天猫整站都是https的,所以这一句还是挺有用的

 

下面是程序的业务逻辑代码:

            Console.ForegroundColor = ConsoleColor.Green;Console.WriteLine("本程序分三步完成采集工作(每完成一部需要重启程序):");Console.WriteLine("第1步:根据商户商品列表页面地址,采集商品编号");Console.WriteLine("第2步:根据商品编号,采集商品图片地址");Console.WriteLine("第3步:根据图片地址,下载图片");Console.WriteLine("请问您现在需要执行第几步操作:(请输入1、2或3然后按任意键开始)");var key = Console.ReadLine();if(key == "1"){Console.WriteLine("请先输入目标商户的商品列表页面地址:");baseListUrl = Console.ReadLine();getId();Console.WriteLine("第1步操作执行完毕,按任意键退出程序");}else if(key == "2"){Console.WriteLine("开始执行第2步操作:");prepareData();Console.WriteLine("第2步操作执行完毕,按任意键退出程序");}else if(key == "3"){Console.WriteLine("开始执行第3步操作:");downloadPic();Console.WriteLine("第3步操作执行完毕,按任意键退出程序");}Console.ReadKey();

 

其他的代码请到GITHUB上去看吧,喜欢的请帮忙点个推荐,或者给我一颗GITHUB的星星!多谢!

转载于:https://www.cnblogs.com/liulun/p/4863159.html

这篇关于【开源】天猫店整店商品图片采集工具:屠刀(包含题图、颜色图、内容图,适用于服装类,按货号保存商品图片)...的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/473972

相关文章

python版本切换工具pyenv的安装及用法

《python版本切换工具pyenv的安装及用法》Pyenv是管理Python版本的最佳工具之一,特别适合开发者和需要切换多个Python版本的用户,:本文主要介绍python版本切换工具pyen... 目录Pyenv 是什么?安装 Pyenv(MACOS)使用 Homebrew:配置 shell(zsh

Java使用Spire.Doc for Java实现Word自动化插入图片

《Java使用Spire.DocforJava实现Word自动化插入图片》在日常工作中,Word文档是不可或缺的工具,而图片作为信息传达的重要载体,其在文档中的插入与布局显得尤为关键,下面我们就来... 目录1. Spire.Doc for Java库介绍与安装2. 使用特定的环绕方式插入图片3. 在指定位

Python+wxPython开发一个文件属性比对工具

《Python+wxPython开发一个文件属性比对工具》在日常的文件管理工作中,我们经常会遇到同一个文件存在多个版本,或者需要验证备份文件与源文件是否一致,下面我们就来看看如何使用wxPython模... 目录引言项目背景与需求应用场景核心需求运行结果技术选型程序设计界面布局核心功能模块关键代码解析文件大

使用C#导出Excel数据并保存多种格式的完整示例

《使用C#导出Excel数据并保存多种格式的完整示例》在现代企业信息化管理中,Excel已经成为最常用的数据存储和分析工具,从员工信息表、销售数据报表到财务分析表,几乎所有部门都离不开Excel,本文... 目录引言1. 安装 Spire.XLS2. 创建工作簿和填充数据3. 保存为不同格式4. 效果展示5

Python多任务爬虫实现爬取图片和GDP数据

《Python多任务爬虫实现爬取图片和GDP数据》本文主要介绍了基于FastAPI开发Web站点的方法,包括搭建Web服务器、处理图片资源、实现多任务爬虫和数据可视化,同时,还简要介绍了Python爬... 目录一. 基于FastAPI之Web站点开发1. 基于FastAPI搭建Web服务器2. Web服务

利用Python将PDF文件转换为PNG图片的代码示例

《利用Python将PDF文件转换为PNG图片的代码示例》在日常工作和开发中,我们经常需要处理各种文档格式,PDF作为一种通用且跨平台的文档格式,被广泛应用于合同、报告、电子书等场景,然而,有时我们需... 目录引言为什么选择 python 进行 PDF 转 PNG?Spire.PDF for Python

Python实现Word文档自动化的操作大全(批量生成、模板填充与内容修改)

《Python实现Word文档自动化的操作大全(批量生成、模板填充与内容修改)》在职场中,Word文档是公认的好伙伴,但你有没有被它折磨过?批量生成合同、制作报告以及发放证书/通知等等,这些重复、低效... 目录重复性文档制作,手动填充模板,效率低下还易错1.python-docx入门:Word文档的“瑞士

基于Python开发Windows自动更新控制工具

《基于Python开发Windows自动更新控制工具》在当今数字化时代,操作系统更新已成为计算机维护的重要组成部分,本文介绍一款基于Python和PyQt5的Windows自动更新控制工具,有需要的可... 目录设计原理与技术实现系统架构概述数学建模工具界面完整代码实现技术深度分析多层级控制理论服务层控制注

uni-app小程序项目中实现前端图片压缩实现方式(附详细代码)

《uni-app小程序项目中实现前端图片压缩实现方式(附详细代码)》在uni-app开发中,文件上传和图片处理是很常见的需求,但也经常会遇到各种问题,下面:本文主要介绍uni-app小程序项目中实... 目录方式一:使用<canvas>实现图片压缩(推荐,兼容性好)示例代码(小程序平台):方式二:使用uni

Python进行word模板内容替换的实现示例

《Python进行word模板内容替换的实现示例》本文介绍了使用Python自动化处理Word模板文档的常用方法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友... 目录技术背景与需求场景核心工具库介绍1.获取你的word模板内容2.正常文本内容的替换3.表格内容的