python批量爬取京东手机评论信息及星级

Python015

python批量爬取京东手机评论信息及星级,第1张

爬取京东评论信息:评论信息是动态加载的,所以在商品详情页不能直接爬取评论。

下面以一款手机为例,详细介绍python批量爬取京东评论。

找到评论区域

按F12进入浏览器的调试窗户(我用的是谷歌浏览器)

点击network,选择all,接下来点击评论第二页,选择js,可以找到加载评论的链接(正常应该选择all,一点点找,我之前已经找到过链接,直接在js处找了),评论的链接通常含有comment单词,也可以在调试器中搜索找到。

刚刚完成的一个京东自动订单脚本, 以后还要加入其它京东自动的脚本

项目地址: https://github.com/mm333444/aox_jd_auto_script

# 京东自动完成脚本

目前只完成京东订单自动评价, 评价时会自动上传商品图片

## 一、安装

### 1. 程序依赖

1. python3.5+

### 2. 安装配置

1. 安装pipenv

2. 安装模块

```

pipenv install

```

## 二、使用

```

python manage.py comment

```

如果没有登录或者登录已失效, 会弹出京东的登录窗口, 登录成功后, 点击x关闭窗口即可

## 三、评论内容扩展

可以打开comment.txt文件, 每行一个评论内容, 在评价时会自动随机选取一条进行评价

, 如果有比较好的评论, 希望可以提交给我, 我添加到项目中

## 四、 联系方式

QQ: 2387813033

QQ群: 252799167

如果有用, 麻烦动动小手, 点个star, 非常感谢

json不是一种格式吗,能当爬虫用?你访问的url既然是空白的,那就说明不是这个url,注意找找究竟是哪个url,能访问并且显示想要的内容才是对的。最后就是如果能访问,爬虫却抓取不下来,就得考虑是不是被检测到爬虫了,需要修改请求头部等信息隐藏自身。