drimwai的博客

手把手教你做app爬虫(一、环境的搭建)

## 前言:这个post,博主会分享一些关于app爬虫的内容。爬虫的步骤一般为抓包(获取规则)和爬取(根据规则,自动获取对应信息)。这个post先分享环境的搭建,下一个post博主会带来一个实例。

 

## 注意事项:众所周知,爬虫是一项敏感的技术。所以,在学习之前我们必须知道哪些行为是违法的。这里博主总结了四点不能干

### 1. 不能爬取用户信息

### 2. 不能爬取非公开的隐藏信息

### 3. 不能直接商用爬取的信息

### 4. 不能干扰app或者网站的正常运行

 

## 参考链接:

### https://blog.csdn.net/lk7688535/article/details/87721146

 

## 搭建环境:

### 1. 操作系统: Windows 8.1

### 2. 抓包工具:fiddler

### 3. 安卓手机模拟器:夜神模拟器6.2.7.0(有版本要求)

### 4. 实例app:盈球大师

** 所有用到的软件都可以在下面下载哦

 

## 搭建步骤:

### 1. 配置fiddler

#### 1.1. 打开flidder软件,通过如下步骤重置证书:

菜单栏 -> Tools -> Options -> HTTPS -> Actions -> Reset All Certificates

#### 1.2. 通过如下步骤设置fiddler监听的端口号并允许远程连接:

菜单栏 -> Tools -> Options -> Connections -> 修改Fiddler listens on port8012,并勾选Allow remote computers connect

 

### 2. 配置夜神模拟器

#### 2.1. 打开夜神模拟器,通过如下步骤设置模拟器的网络连接:

点击设置图标 -> 点击WLAN -> 鼠标左键长按 WiredSSID -> 点击修改网络-> 点击显示高级选项 -> 代理选择手动,代理服务器主机名填写为当前电脑的IPV4的地址,代理服务器端口写为8012(和fillderfiddler listens on port对应),如下图所示:

image001.png

#### 2.2. 在模拟器的浏览器中访问http://ipv4.fiddler:8012/ 并点击FiddlerRoot certificate来安装证书,如图所示。

image002.png

### 3. 实例展示

image003.png

drimwai的博客
drimwai的博客
使用条款和私隐条款。版权所有,保留一切权利。
Copyright by drimwai Liang (2018-2020). All Right Reserved.