01–selenium之页面嵌套页面iframe,导致无法捕捉到标签或者元素

本文内容:

1、嵌套页面iframe的切换

一、报错的提示

找不到要标签元素,
这个是由于你控制的driver对象是外面的窗口,
并未进入到iframe的嵌套页面,导致找不到元素

二、解决办法—-十分简单,切换进iframe页面即可,找到标签或元素

1、定位iframe

1.[……]

继续阅读

day087&day088 scrapy项目创建及操作流程、两个简单小案例

本节内容:

1、scrapy框架介绍及相关命令的使用
2、scrapy的各个文件作用介绍及具体的操作流程
3、代理池的使用

一、scrapy框架介绍及相关命令的使用

1、scrapy介绍

Scrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架,非常出名,非常强悍。
所谓的框架就[......]

继续阅读

day083爬虫介绍,requests模块、response属性

本节内容:

1、爬虫简介
2、requests模块(相关用法及response属性)

一、爬虫简介

什么是爬虫?
本质是一个自动化程序,一个模拟浏览器向某一个服务器发送请求获取响应资源的过程.

注意:
爬虫也是存在风险的,某些网站的爬取,会涉及到违法行为的,谨慎爬取。

1、爬虫的基本流[……]

继续阅读