python动态渲染页面爬取Selenium的具体使用（二）

python动态渲染页面爬取Selenium的具体使用（二）

上文我们讲了六个方面，下面我们继续介绍Selenium的使用方法。在上面的实例中，一些交互动作嗾使针对某个节点执行的。比如，对于输入框，我们就调用它的输入文字和清空文字方法；对于按钮，就调用它的点击方法。其实，还有一些另外的操作可以使用，具体下面讲解。

7.动作链

动作链就是一些没有特定执行对象，这些动作作用需要用另一种方式来执行，比如：鼠标拖拽、键盘按键等。我们现在要实现一个节点的拖拽操作，将某一个节点从一处拖拽到另外一边，可以这样实现：

from selenium import webdriver
from selenium.webdriver import ActionChainsbrowser = webdriver.Chrome()
url = '.php?filename=jqueryui-api-droppable'
(url)
browser.switch_to.frame('iframeResult')
source = browser.find_element_by_css_selector('#draggable')
target = browser.find_element_by_css_selector('#droppable')
actions = ActionChains(browser)
actions.drag_and_drop(source,target)
actions.perform()

首先打开网页中的一个拖拽实例，然后依次选中要拖拽的节点和拖拽的目标节点，接着声明ActionsChains对象并将其赋值actions变量，然后通过调用actions变量的drag_and_drop()方法，在调用perform()方法执行动作，此时就完成了拖拽的操作，具体如下图。

大家可以代码自己演示一下，更多的动作链可以参考官方文档：.html#module-selenium.webdrivermon.action_chains

8.执行JavaScript操作

对于某些操作，SeleniumAPI并没有提供。比如，下拉进度条，它可以直接模拟运行JavaScript，此时使用execute_script()方法即可实现，代码如下：

from selenium import webdriverbrowser = webdriver.Chrome()
('')
ute_script('window.scrollTo(0,document.body.scrollHeight)')
ute_script('alert("To Buttom")')

这里就利用execute_script()方法将进度条下拉到最底部，然后弹出alert提示框。有了这个方法，基本上API没有提供的所有功能都可以用执行JavaScript的方式来实现了。

9.获取节点信息

前面说过，通过page_source属性可以获取网页的源代码，接着就可以使用解析库（如正则表达式、Beautiful Soup、pyquery等）来提取信息了。

不过，既然Selenium已经提供了选择节点的方法，返回的是WebElement类型，那么它也有相关的方法和属性直接提取节点信息，如属性、文本等。这样的话，我们就可以不用通过解析源代码来提取信息了，非常方便。

接下来，就看看通过怎样的方式来获取节点信息吧。

1）获取属性

我们可以使用get_attribute()方法来获取节点的属性，但是其前提是先选中这个节点，示例如下：

from selenium import webdriver
from selenium.webdriver import ActionChainsbrowser = webdriver.Chrome()
url = ''
(url)
button = browser.find_element_by_xpath('//*[@id="special"]/div[2]/div/div[1]/div[4]/button')
print(button)
_attribute('class'))

运行之后，程序便会驱动浏览器打开知乎页面，然后获取知乎的登录按钮button节点，最后打印出它的class。运行的结果如下：

<webelement.WebElement (session="54af8eb8e88f1b82e8c095ed45f12238", element="e2fbb66d-145f-44fb-bfd6-ad21db829910")>
Button ExploreHomePage-specialsLoginButton

通过get_attribute()方法，然后传入想要获取的属性名，就可以得到它的值了。

2）获取文本值

每个WebElement节点都有text属性，直接调用这个属性就可以得到节点内部的文本信息，这相当于Beautiful Soup的get_text()方法，pyquery的text()方法，具体事例如下：

from selenium inport wendriverbrowser = webdri