使用Selenium模拟登录网站和常见问题

遇到一个网站，登录验证过程复杂，使用Firefox、Chrome登录均不行，必须使用IE。在编写爬虫过程中，使用requests等工具均没有成功，水平太差。最后，选择使用Selenium配合IE模拟登录，成功获取到页面。总结如下： # -*- coding: utf-8 -*

Python Selenium 和 PhantomJS 简介

Selenium is a poweful web scraping tool developed originally for website testing.Selenium works by automating browsers to load the website,

Simple One:适用cookie 不会变化的情形 import requestsparams = {'username': 'Ryan',\ 'password': 'password'}r = requests.post("http