标签: selenium

使用Selenium实现HTML转PDF

在之前,州的先生为了在觅道文档中实现 markdown 转 pdf 的功能,考察和调研的市面上的一些通行解决方案,详见https://zmister.com/archives/1607.html。 在那之后,觅道稳定选择了 Chromium + pyppeteer 的方案作为 HTML 转换 PDF...

分类目录: 编程

标签: htmlpdfselenium

演示 | 突破淘宝滑块验证,Selenium直接登陆淘宝

前言 众所周知,阿里系的反爬虫技术一直都是业内一流的,随着反爬虫手段的不断加强,淘宝的登录从Selenium操纵webdriver直接登录,到Selenium模拟滑块验证码轨迹完成滑块验证,再到如今的只要是Selenium操纵的webdriver打开的浏览器,滑块验证都不会通过。 仿佛就像黑客世界的...

分类目录: 数据采集

标签: selenium反爬爬虫

快速掌握Python Selenium Web自动化:)四、使用Selenium在网页上进行操作

在上一篇中,我们介绍了如何使用Selenium在页面中查找定位页面元素。在定位到页面元素之后,我们能够做些什么呢?本篇我们就将来简单了解一下。 4.1 模拟键盘键入 4.1.1 输入文本 在定位到元素之后,我们一般会做什么?如果定位的是input输入框,那么我们可能需要在其中输入一些值。想要实现这个...

快速掌握Python Selenium Web自动化:三)在Selenium中定位查找网页元素的诸类方法

使用Selenium进行自动化操作,首先要做的就是通过webdriver的get()方法打开一个URL链接。 在打开链接,完成页面加载之后,就可以通过Selenium提供的接口,在页面上进行各种操作了,下面我们来了解一下如何在查找元素。 3.1 查找和定位网页元素 在上一篇的示例中,我们就演示了如何...

快速掌握Python Selenium Web自动化:二)Selenium操纵浏览器的最基本用例

简单的使用Selenium 如何完成了上一篇的学习内容,安装好了Python下的Selenium模块,同时下载了合适的浏览器驱动程序,那么我们就可以在Python中使用Selenium了。 先来看这样一个例子: # coding:utf-8 ''' @author:州的先生 @site:zmiste...

快速掌握Python Selenium Web自动化:1、搭建Selenium环境

1.1、Selenium是什么 Selenium是什么,相信从事自动化测试的同学或者有过Python爬虫经历的同学都会有了解。 Selenium是一个Web自动化测试软件, 正如Selenium官网所言:Selenium主要是为了测试目的而进行自动化的Web应用程序,但是当然并不限于此,一些基于We...

利用Python进行Web渗透测试(九):添加渗透测试探测器结果截图

本篇将会涉及: Selenium与PhantomJS 为渗透测试探测器添加截图功能 测试新功能 在前面文章中,我们使用Python编写了一个渗透测试探测器,从fuzz数据库中获取字典信息,利用requests模块请求拼接组装的URL,从而获得URL的响应内容,并借助termcolor模块将整理后的信...

通过修改User-Agent标识将PhantomJS伪装成Chrome浏览器

在写爬虫的过程中,出于系统环境或是效率的问题,我们经常使用PhantomJS作为Selenium操纵的浏览器webdriver,而不是直接使用Chrome或FireFox的webdriver,尽管后者更加直观。 PhantomJS的优点虽然很多,但是缺点却也不少,有一个不能称之为缺点的缺点就是,Ph...

Python爬虫入门实战七:使用Selenium--以抓取QQ空间好友说说为例

前面我们接触到的,都是使用requests+BeautifulSoup组合对静态网页进行请求和数据解析,若是JS生成的内容,也介绍了通过寻找API借口来获取数据。 但是有的时候,网页数据由JS生成,API借口又死活找不着或者是API借口地址随机变换,时间不等人。那就只能使用Selenium了。 一、...