京东数据采集教程

Fly 2025-09-23 08:38:21 199浏览 493字数

运行环境windows系统

浏览器:谷歌浏览器

 

运行前确保电脑已经装了谷歌浏览器,如果没有安装,请先安装最新版谷歌浏览器。

谷歌浏览器最新版地址:https://www.google.cn/intl/zh-CN/chrome/

 

 

一、双击打开这个应用

 

如果界面出现这个,代表运行成功了

 

 

二、进入程序网址

然后再浏览器中打开网址

 

三、登陆京东

第一次使用的时候,程序会打开谷歌浏览器,需要登陆自己的账户

 

四、数据查询

登陆成功后,程序就自动运行进行数据采集了

 

五、最大获取页说明

京东最大页数是100,如果想获取所有的数据,就直接输入100。如果这个产品最大页数没有100,程序会自动获取到他的真实最大页数后结束。

六、查询被监控

在查询过程中,由于频繁获取数据,账户可能会被监控,而出现验证码,这个适合就需要手动过验证。过验证后,程序会自动继续程序,如果进行失败,需要关闭程序,重新执行。

 

七、程序重启

1. 关闭黑框框,然后重新打开 app.exe程序。

2. 查询网址刷新一下

 

八、缓存说明

商品查询后,会有10分钟缓存,如果想再次获取最新数据,请删除app.exe文件目录下面的,my_cache 文件夹,或者直接点击【清除缓存】按钮

九、其他说明

网络好的情况下京东如果选择【进入内页】【获取公司名称】,那么30条数据需要花费1.3分钟,也就是一条数据大概2.6秒左右。

 

不选择【进入内页】,只选择【获取公司名称】,系统将从缓存中获取公司名称。

 

如果不进入内页,那么10300条数据,只需要12左右。推荐使用下方的【获取京东商家数据】,通过公共缓存数据来匹配【公司名称】。

最后修改:2025-09-23 15:16:04

非特殊说明,本博所有文章均为博主原创。