scrapy_redis是什么 Scrapy_redis ： Redis-based components for Scrapy. Github地址：https://github.com/rmax/scrapy-redis 为什么要

scrapy项目实现流程 创建一个scrapy项目:scrapy startproject mySpider 生成一个爬虫:scrapy genspider itcast "itcast.cn 提取数据:完善spider，使用xpath

为什么要学习scrapy 通过前面的学习，我们已经能够解决90%的爬虫问题了，那么scrapy是为了解决剩下的10%的问题么，不是，scrap

什么是selenium Selenium是一个Web的自动化测试工具，最初是为网站自动化测试而开发的，Selenium 可以直接运行在浏览器上，

常见的反爬手段和解决思路 明确反反爬的主要思路 反反爬的主要思路就是：尽可能的去模拟浏览器，浏览器在如何操作，代码中就如何去实现。浏览器先请求了

什么是数据提取 简单的来说，数据提取就是从响应中获取我们想要的数据的过程 爬虫中数据的分类 结构化数据：json，xml等 处理方式：直接转化为py

requests的作用 作用：发送网络请求，返回响应数据 中文文档 ： http://docs.python-requests.org/zh_CN/latest/index.html 为什么学requests而不是urllib requests的底层实现就是u

什么是爬虫 网络爬虫（又被称为网页蜘蛛，网络机器人）就是模拟客户端发送网络请求，接收请求响应，一种按照一定的规则，自动地抓取互联网信息的程序。

FTP服务器测试 FTP是什么？ FTP是英语File Transfer Protocol的首字母缩写，汉语意思为文件传输协议。 FTP有什么用？ 可以根据FTP服务

接口自动化脚本 为什么要设计自动化脚本？ 后台程序更新/发布新版之前需要验证下之前的功能是否能用 自动化脚本设计原则 每个测试用例都是独立的 测试用例