码迷,mamicode.com
首页 > 编程语言 > 详细

python 利用爬虫获取页面上下拉框里的所有国家

时间:2018-02-15 18:11:37      阅读:333      评论:0      收藏:0      [点我收藏+]

标签:element   col   body   文件   from   find   google   pre   div   

前段时间,领导说列一下某页面上的所有国家信息,话说这个国家下拉框里的国家有两三百个,是第三方模块导入的,手动从页面拷贝,不切实际,于是想着用爬虫去获取这个国家信息,并保存到文件里。

下面是具体的代码,写的也是比较简单,利用Selenium操作页面,获取下拉国家列表的信息,并保存到文件里

from selenium import webdriver
import xlwt
driver = webdriver.Chrome(C:\Program Files (x86)\Google\Chrome\Application\chromedriver.exe)
driver.get(https://xxx.xx.com/contact)
countries = driver.find_element_by_id(country)#获取country dropdownlist
options_list = countries.find_elements_by_tag_name(option)
options = []
for option in options_list: #获取country dropdownlist里所有的数据
    options.append(option.text)
with open(country_list.txt,w+, encoding=utf-8) as f:
    for i in options:
        if i != Select your country:
            f.write(i+\n)
driver.quit()

 

python 利用爬虫获取页面上下拉框里的所有国家

标签:element   col   body   文件   from   find   google   pre   div   

原文地址:https://www.cnblogs.com/nancyzhu/p/8449668.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!