下面以一款手机为例,详细介绍python批量爬取京东评论。
找到评论区域
按F12进入浏览器的调试窗户(我用的是谷歌浏览器)
点击network,选择all,接下来点击评论第二页,选择js,可以找到加载评论的链接(正常应该选择all,一点点找,我之前已经找到过链接,直接在js处找了),评论的链接通常含有comment单词,也可以在调试器中搜索找到。
刚刚完成的一个京东自动订单脚本, 以后还要加入其它京东自动的脚本
项目地址: https://github.com/mm333444/aox_jd_auto_script
# 京东自动完成脚本
目前只完成京东订单自动评价, 评价时会自动上传商品图片
## 一、安装
### 1. 程序依赖
1. python3.5+
### 2. 安装配置
1. 安装pipenv
2. 安装模块
```
pipenv install
```
## 二、使用
```
python manage.py comment
```
如果没有登录或者登录已失效, 会弹出京东的登录窗口, 登录成功后, 点击x关闭窗口即可
## 三、评论内容扩展
可以打开comment.txt文件, 每行一个评论内容, 在评价时会自动随机选取一条进行评价
, 如果有比较好的评论, 希望可以提交给我, 我添加到项目中
## 四、 联系方式
QQ: 2387813033
QQ群: 252799167
如果有用, 麻烦动动小手, 点个star, 非常感谢
json不是一种格式吗,能当爬虫用?你访问的url既然是空白的,那就说明不是这个url,注意找找究竟是哪个url,能访问并且显示想要的内容才是对的。最后就是如果能访问,爬虫却抓取不下来,就得考虑是不是被检测到爬虫了,需要修改请求头部等信息隐藏自身。