当前位置:首页 > python > 正文内容

用python写个selenium爬虫

zhangsir3年前 (2023-03-29)python316

下面是一个使用Python和Selenium的基本爬虫示例。这个爬虫将打开谷歌浏览器并访问一个指定的网站,然后提取特定元素的信息并打印出来。


首先,您需要安装Selenium和ChromeDriver。您可以使用以下命令安装它们:

pip install selenium

接下来,您需要下载适用于您的Chrome浏览器版本的ChromeDriver。您可以在此处下载:http://chromedriver.chromium.org/downloads


下载完成后,将ChromeDriver.exe文件放在您的工作目录下或添加到系统PATH中。


下面是代码示例:


from selenium import webdriver
from selenium.webdriver.common.by import By

# 初始化ChromeDriver
driver = webdriver.Chrome()

# 打开要爬取的网站
driver.get("https://www.example.com")

# 找到特定元素并提取信息
element = driver.find_element(By.XPATH, "//h1")
print(element.text)

# 关闭浏览器
driver.quit()

这个示例将打开谷歌浏览器并访问https://www.example.com。然后,它将查找网站上的第一个`<h1>`元素并将其文本打印到控制台中。最后,它将关闭浏览器。


您可以根据自己的需要修改这个示例。例如,您可以使用不同的浏览器,找到不同的元素或在找到元素后执行其他操作。


zhangsir版权a1防采集https://mianka.xyz

扫描二维码推送至手机访问。

版权声明:本文由zhangsir or zhangmaam发布,如需转载请注明出处。

本文链接:https://www.mianka.xyz/post/153.html

分享给朋友:

“用python写个selenium爬虫” 的相关文章

权大师商标查询api

''' data:2022-10-15 autor:zhangsir 权大师商标查询api ''' import requests import json import time import h...

python 爬虫 报错:UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0x8b in position”解决方案

发现报错“UnicodeDecodeError: 'utf-8' codec can't decode byte 0x8b in position 1:invalid start byte”,方法一:根据报错提示,错误原因有一条是这样的:“'Accept-Encodi...

python 实现彩色图转素描图

python可以把彩色图片转化为铅笔素描草图,对人像、景色都有很好的效果。而且只需几行代码就可以一键生成,适合批量操作,非常的快捷。需要的第三方库:Opencv - 计算机视觉工具,可以实现多元化的图像视频处理,有Python接口""" Photo ...

python 将json数据转成csv文件

从JSON数据转化CSV文件下面的这个Python脚本能够将JSON数据转化到CSV文件的表格当中去,我们输入的是带有.json后缀的文件,输出的是.csv后缀的表格文件,代码如下import json def converter(input_file, output...

python 多线程与多进程的代码实例

一.两者区别多进程和多线程的主要区别是:线程是进程的子集(部分),一个进程可能由多个线程组成。多进程的数据是分开的、共享复杂,需要用IPC;但同步简单。多线程共享进程数据,共享简单;但同步复杂。(1)多进程进程是程序在计算机上的一次执行活动,即正在运行中的应用程序,通常称为进程。当你运行一个程序,你...

python—pymysql的增删改查操作实例展示

Python使用pymysql连接数据库1.导包import pymysql2.连接数据库connection = pymysql.connect(     host='',  # ...