Python 自动化表单填写详解

Selenium是一个功能强大的浏览器自动化工具，支持多种浏览器（如Chrome、Firefox、Edge等）。它可以模拟用户操作，如点击按钮、填写表单、处理JavaScript动态内容等。Playwright是一个现代化的浏览器自动化工具，支持Chromium、Firefox和WebKit浏览器。它比Selenium更高效，API也更丰富。requests是一个HTTP库，用于发送HTTP请求。

老胖闲聊

1517人浏览 · 2025-03-23 09:00:00

老胖闲聊 · 2025-03-23 09:00:00 发布

销	量	过	万
TEEIS德国护膝夏天用薄款优惠券	冠生园百花蜂蜜428g 挤压瓶纯蜂蜜	巨奇严选鞋子除臭剂360ml	多芬身体磨砂膏280g
健70%-75%酒精消毒棉片湿巾1418cm 80片/袋3袋大包清洁食品用消毒优惠券	AIMORNY52朵红玫瑰永生香皂花同城配送非鲜花七夕情人节生日礼物送女友热卖	妙洁棉柔抹布10片装厨房洗碗布家用神器去油污强力吸水巾	宝宝馋了婴幼儿酸奶无添加白砂糖85g*10袋儿童常温奶宝宝辅食饮品
素养生活有机红花生400g 生花生米东北四粒红花生凉拌杂粮粗粮真空包装	UG NX 12.0中文版从入门到精通ug nx建模曲面钣金装配工程图有限元分析机械设计数控加工编程 autocad教程cad教材自学版完全自学宝典	乐品乐茶茶叶绿茶特级毛尖2025新茶明前春茶嫩芽散装自己喝京东自营	松鲜鲜松茸鲜调味料125g【0添加松茸提鲜】代替盐鸡精味精煲汤炒菜调味优惠券
本迪大号加厚洗脸盆2只装36cm洗脸盆洗菜盆洗脚盆学生塑料盆泡脚盆	公牛（BULL）开关插座 G12系列十孔插座86型插座面板 G12Z423 白色	周十五益生菌蜂蜜露孕妇开塞蜜露待产包用产后哺乳期儿童蜂蜜栓礼品36支	小鹿蓝蓝婴幼儿肉蔬多维蝴蝶面600g含30小袋婴儿辅食果蔬营养面超值装优惠券

让AI成为我们的得力助手：《用Cursor玩转AI辅助编程——不写代码也能做软件开发》

在Python中，自动化表单填写可以通过多种库和工具实现。本文将详细介绍常用的自动化表单处理工具，并对它们进行横向比较，可根据需求选择合适的工具。

1. Selenium

简介

Selenium 是一个功能强大的浏览器自动化工具，支持多种浏览器（如Chrome、Firefox、Edge等）。它可以模拟用户操作，如点击按钮、填写表单、处理JavaScript动态内容等。

适用场景

需要与页面进行复杂交互（如点击按钮、选择下拉菜单）。
需要处理JavaScript动态加载的内容。
需要跨浏览器测试。

示例代码

from selenium import webdriver
from selenium.webdriver.common.by import By
import time

# 启动浏览器
driver = webdriver.Chrome(executable_path='path/to/chromedriver')

# 打开表单页面
driver.get('https://example.com/form')

# 填写表单
driver.find_element(By.NAME, 'username').send_keys('John Doe')
driver.find_element(By.NAME, 'email').send_keys('johndoe@example.com')
driver.find_element(By.NAME, 'password').send_keys('securepassword123')

# 提交表单
driver.find_element(By.XPATH, '//button[@type="submit"]').click()

# 关闭浏览器
time.sleep(5)
driver.quit()

优点

支持多种浏览器。
功能强大，可以处理复杂的交互和动态内容。

缺点

需要安装浏览器驱动。
执行速度较慢。

2. Playwright

简介

Playwright 是一个现代化的浏览器自动化工具，支持Chromium、Firefox和WebKit浏览器。它比Selenium更高效，API也更丰富。

适用场景

需要处理复杂的JavaScript动态内容。
需要跨浏览器测试。
需要高效的自动化操作。

示例代码

from playwright.sync_api import sync_playwright

with sync_playwright() as p:
    # 启动浏览器
    browser = p.chromium.launch(headless=False)
    page = browser.new_page()

    # 打开表单页面
    page.goto('https://example.com/form')

    # 填写表单
    page.fill('input[name="username"]', 'John Doe')
    page.fill('input[name="email"]', 'johndoe@example.com')
    page.fill('input[name="password"]', 'securepassword123')
    page.click('input[type="submit"]')

    # 关闭浏览器
    browser.close()

优点

支持多种浏览器。
执行速度快，API丰富。
可以处理复杂的交互和动态内容。

缺点

需要安装浏览器驱动。
学习曲线略高。

3. Requests + BeautifulSoup

简介

requests 是一个HTTP库，用于发送HTTP请求。BeautifulSoup 是一个HTML解析库，用于提取网页中的数据。结合两者可以实现简单的表单提交。

适用场景

静态网页（没有JavaScript动态加载内容）。
表单提交是通过HTTP POST/GET请求完成的。

示例代码

import requests
from bs4 import BeautifulSoup

# 获取表单页面
session = requests.Session()
response = session.get('https://example.com/form')
soup = BeautifulSoup(response.text, 'html.parser')

# 提取CSRF令牌
csrf_token = soup.find('input', {'name': 'csrf_token'})['value']

# 构造表单数据
form_data = {
    'username': 'John Doe',
    'email': 'johndoe@example.com',
    'password': 'securepassword123',
    'csrf_token': csrf_token
}

# 提交表单
response = session.post('https://example.com/submit', data=form_data)

# 检查提交结果
if response.status_code == 200:
    print('表单提交成功！')
else:
    print('表单提交失败！')

优点

轻量级，不需要启动浏览器。
适合处理简单的表单提交。

缺点

无法处理JavaScript动态内容。
无法模拟复杂的用户交互。

4. MechanicalSoup

简介

MechanicalSoup 是一个基于requests和BeautifulSoup的库，专门用于自动化表单提交。它比纯requests更简单易用。

适用场景

简单的表单提交任务。
不需要处理JavaScript动态内容。

示例代码

import mechanicalsoup

# 创建浏览器对象
browser = mechanicalsoup.Browser()

# 打开表单页面
page = browser.get('https://example.com/form')
form = page.soup.select_one('form')

# 填写表单
form.select_one('input[name="username"]')['value'] = 'John Doe'
form.select_one('input[name="email"]')['value'] = 'johndoe@example.com'
form.select_one('input[name="password"]')['value'] = 'securepassword123'

# 提交表单
response = browser.submit(form, page.url)

# 检查提交结果
if response.status_code == 200:
    print('表单提交成功！')
else:
    print('表单提交失败！')

优点

简单易用，适合快速实现表单提交。
不需要启动浏览器。

缺点

无法处理JavaScript动态内容。
功能相对有限。

5. Pyppeteer

简介

Pyppeteer 是一个Python版的Puppeteer，用于控制无头浏览器（Headless Chrome）。它类似于Playwright，但更专注于Chromium浏览器。

适用场景

需要处理复杂的JavaScript动态内容。
需要无头浏览器支持。

示例代码

import asyncio
from pyppeteer import launch

async def fill_form():
    # 启动浏览器
    browser = await launch(headless=False)
    page = await browser.newPage()

    # 打开表单页面
    await page.goto('https://example.com/form')

    # 填写表单
    await page.type('input[name="username"]', 'John Doe')
    await page.type('input[name="email"]', 'johndoe@example.com')
    await page.type('input[name="password"]', 'securepassword123')
    await page.click('input[type="submit"]')

    # 关闭浏览器
    await browser.close()

# 运行异步任务
asyncio.get_event_loop().run_until_complete(fill_form())

优点

支持无头浏览器。
可以处理复杂的交互和动态内容。

缺点

需要异步编程。
仅支持Chromium浏览器。

6. RoboBrowser

简介

RoboBrowser 是一个简单的库，结合了requests和BeautifulSoup，适合快速实现表单提交。

适用场景

简单的表单提交任务。
不需要处理JavaScript动态内容。

示例代码

from robobrowser import RoboBrowser

# 创建浏览器对象
browser = RoboBrowser()

# 打开表单页面
browser.open('https://example.com/form')

# 获取表单
form = browser.get_form()

# 填写表单
form['username'].value = 'John Doe'
form['email'].value = 'johndoe@example.com'
form['password'].value = 'securepassword123'

# 提交表单
browser.submit_form(form)

# 检查提交结果
if browser.response.status_code == 200:
    print('表单提交成功！')
else:
    print('表单提交失败！')

优点

简单易用。
不需要启动浏览器。

缺点

无法处理JavaScript动态内容。
功能有限。

横向比较

工具	是否需要浏览器	是否支持JavaScript	是否支持多浏览器	学习曲线	适用场景
Selenium	是	是	是	中等	复杂交互、跨浏览器测试
Playwright	是	是	是	中等	复杂交互、高效自动化
Requests + BS4	否	否	否	低	简单表单提交
MechanicalSoup	否	否	否	低	简单表单提交
Pyppeteer	是	是	否（仅Chromium）	中等	复杂交互、无头浏览器支持
RoboBrowser	否	否	否	低	简单表单提交