python

关注公众号 jb51net

关闭
首页 > 脚本专栏 > python > Python获取网页内容并校对

Python自动化获取网页输入框内容并进行文本校对

作者:小庄-Python办公

Python 不仅可以抓取网页上的静态文本,完全有能力抓取动态输入框中的内容,下面我们就来看看Python如何自动化获取网页输入框内容并进行文本校对吧

 Python 不仅可以抓取网页上的静态文本,完全有能力抓取动态输入框(Input fields)中的内容,并将其与数据库、Excel 文件或网页上的其他文本段落进行自动化比对。

这一过程在自动化测试(QA)数据爬虫以及表单验证场景中非常常见。对于初学者来说,理解这一过程的核心在于明白网页结构的差异:普通文本通常存储在标签之间,而输入框的内容通常存储在属性(Attribute)中。

本文将以最适合初学者的工具 Selenium 为例,手把手教你如何实现这一功能。

1. 核心概念与准备工作

在开始编写代码之前,我们需要理解两个基础概念,并配置好 Python 环境。

1.1 核心区别:.text与.value

这是初学者最容易掉入的陷阱:

1.2 环境准备

我们需要安装 Python 的浏览器自动化库 Selenium,以及自动管理浏览器驱动的工具 webdriver-manager

打开你的终端(Terminal 或 CMD),运行以下命令:

pip install selenium webdriver-manager

2. 实战步骤:从抓取到校对

我们将模拟一个场景:网页上有一个输入框(用户已填入姓名),网页下方有一段标准文本,我们需要核对输入框里的名字是否与标准文本一致。

第一步:初始化浏览器

首先,我们需要通过 Python 启动一个浏览器窗口。

from selenium import webdriver
from selenium.webdriver.chrome.service import Service
from webdriver_manager.chrome import ChromeDriverManager
from selenium.webdriver.common.by import By
import time

# 自动下载并配置 Chrome 驱动
service = Service(ChromeDriverManager().install())
driver = webdriver.Chrome(service=service)

# 打开目标网页(此处以一个示例 HTML 文件或网站为例)
# 在实际操作中,请替换为你需要操作的 URL
driver.get("https://www.example.com") 

# 强制等待几秒,确保网页加载完成(生产环境建议使用显式等待,见下文)
time.sleep(2)

第二步:定位并抓取“输入框”内容

假设网页上有一个输入框,其 HTML 代码如下:<input id="username_input" type="text" value="张三">

我们需要抓取这个 value 中的“张三”。

# 1. 定位输入框元素 (假设 ID 为 username_input)
input_element = driver.find_element(By.ID, "username_input")

# 2. 关键点:使用 get_attribute('value') 获取输入框内的文字
# 注意:不能使用 .text,否则会返回空字符串
input_content = input_element.get_attribute("value")

print(f"抓取到的输入框内容: {input_content}")

第三步:定位并抓取“参考文本”

假设网页下方有一个标准答案区域:<div id="standard_name">张三</div>

# 1. 定位参考文本元素
text_element = driver.find_element(By.ID, "standard_name")

# 2. 对于普通标签,直接使用 .text 获取可见文本
reference_content = text_element.text

print(f"抓取到的参考文本: {reference_content}")

第四步:执行校对逻辑(Python 字符串比对)

现在两个数据都已经在 Python 变量中了,我们可以使用标准的 Python 逻辑进行比对。

# 去除可能存在的首尾空格,提高比对准确率
clean_input = input_content.strip()
clean_ref = reference_content.strip()

print("-" * 30)
print("开始校对...")

if clean_input == clean_ref:
    print("✅ 校对成功:输入框内容与参考文本完全一致。")
else:
    print("❌ 校对失败!")
    print(f"差异详情 -> 输入框: [{clean_input}] vs 参考文本: [{clean_ref}]")

3. 进阶技巧:模糊匹配与差异高亮

在现实世界中,文本可能只有细微差别(比如多了一个句号)。如果不需要由“完全一致”,可以使用 Python 内置的 difflib 库来计算相似度。

import difflib

# 计算相似度 (0.0 到 1.0)
similarity = difflib.SequenceMatcher(None, clean_input, clean_ref).ratio()

print(f"文本相似度: {similarity * 100:.2f}%")

if similarity > 0.9: # 设定阈值,例如 90% 以上算通过
    print("⚠️ 内容基本一致(允许细微差异)。")

4. 常见陷阱与解决方案

作为初学者,在执行上述代码时可能会遇到以下问题:

4.1 抓取到的输入框内容为空

原因:你可能使用了 element.text 而不是 element.get_attribute('value')

特例:如果是 <textarea>这里是内容</textarea> 标签,有时可以使用 .text,但为了保险起见,建议统一使用.get_attribute('value')

4.2 元素找不到 (NoSuchElementException)

原因:代码运行速度太快,网页还没加载完输入框,代码就尝试去抓取了。

解决:不要只用 time.sleep()。使用 Selenium 的 显式等待 (WebDriverWait)

from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

# 等待最多 10 秒,直到元素出现
input_element = WebDriverWait(driver, 10).until(
    EC.presence_of_element_located((By.ID, "username_input"))
)

4.3 输入框在 iframe 里

现象:你能看到元素,但 Selenium 怎么都找不到。

解决:网页可能嵌套了 iframe。你需要先切换进去:
driver.switch_to.frame("frame_id"),操作完后再切回来 driver.switch_to.default_content()

5. 总结

使用 Python 校对网页输入框内容不仅可行,而且是自动化领域的一项基础技能。

完整的逻辑回顾:

只要掌握了 .text.get_attribute('value') 的区别,你就已经跨过了这个任务最大的门槛。现在,尝试编写你的第一个自动校对脚本吧!

到此这篇关于Python自动化获取网页输入框内容并进行文本校对的文章就介绍到这了,更多相关Python获取网页内容并校对内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

您可能感兴趣的文章:
阅读全文