批量提取 - 连续页面 URL

生成连续编号的 URL 列表进行批量提取。

---

何时使用？

• URL 包含页码参数

• URL 包含连续 ID

• 需要访问多个连续页面

---

URL 模式

页码参数

https://example.com/list?page=1
https://example.com/list?page=2
https://example.com/list?page=3

路径包含编号

https://example.com/product/1
https://example.com/product/2
https://example.com/product/3

复杂参数

https://example.com/search?q=phone&page=1
https://example.com/search?q=phone&page=2

---

使用方法

1

识别 URL 模式

找出 URL 中变化的部分。

例如：https://example.com/page/{num}

2

生成 URL 列表

方法 1：使用 Excel

=CONCATENATE("https://example.com/page/", ROW())

向下拖动公式生成多个 URL。

方法 2：使用在线工具

搜索 "URL generator" 找到在线工具。

方法 3：使用代码

base = "https://example.com/page/"
urls = [f"{base}{i}" for i in range(1, 101)]

3

复制 URL 列表

复制生成的所有 URL。

4

创建群组提取

1

打开数据面板

2

点击 [新建群组]

3

粘贴 URL 列表

4

设置提取选项

5

开始提取

---

实用示例

分页列表

第1页: https://site.com/list?page=1
第2页: https://site.com/list?page=2
...
第50页: https://site.com/list?page=50

商品 ID

商品1: https://site.com/item/1001
商品2: https://site.com/item/1002
...
商品100: https://site.com/item/1100

日期序列

1月: https://site.com/report/2024-01
2月: https://site.com/report/2024-02
...
12月: https://site.com/report/2024-12

---

注意事项

• 确认所有 URL 都存在

• 某些编号可能跳过

• 使用快速失败避免浪费

• 设置合理的延迟

---

相关功能

• 群组提取

• 快速失败

• 批量生成和下载