プロキシ自動再試行

プロキシ自動再試行とは?

大量のデータを収集する際、ネットワークブロッキング、タイムアウト、IP制限により、一部のリクエストが失敗することがあります。

プロキシ自動再試行は、これらの失敗状況で成功率を向上させるEnterpriseプラン専用機能です。この機能は、リクエストが失敗するたびに自動的に別のプロキシIPに切り替え、接続の安定性を維持しながら収集を続けます


使い方

1

スクリーンショットを使用して抽出失敗の原因を特定

グループ抽出、自動クリック、自動スクロール、テンプレート、スケジュールタスクなどのサーバー実行抽出タスクで、ウェブサイトのブロッキングにより収集が失敗した場合、プロキシ自動再試行機能を使用してタスクの成功率を向上させることができます。

2

タスクの設定ページに移動

タスクの設定ページに入ります。

3

プライベートプロキシセクションで再試行(プロキシ)ボタンをクリック

設定ページの**[プライベートプロキシ]セクションで、[再試行(プロキシ)]**オプションをチェックして機能を有効にします。

4

詳細オプションを設定

各プロキシ自動再試行オプションは次のとおりです:

A. プロキシプールを選択

1

すべてのプライベートプロキシ

登録されたすべてのプライベートプロキシから利用可能なIPを順次使用して再試行します。

2

同じ国のすべてのプライベートプロキシ

選択したプロキシと同じ国のプロキシのみを使用します。

3

同じプロバイダーのすべてのプライベートプロキシ

選択したプロキシと同じプロバイダーのプロキシのみを使用します。

B. リクエスト間隔を選択

リクエスト間隔は自由に設定できます。ただし、間隔が短すぎると、以前に試行したプロキシサーバーの作業が完了する前に次のリクエストが重複する可能性があるため、ウェブページのデータ量に基づいて適切な作業間隔を維持することをお勧めします。

5

選択した設定を保存

設定が完了したら、設定ページ下部の**[保存]**ボタンをクリックします。

6

タスクを再抽出

設定を保存した後、タスクリストの**[再抽出]**アイコンをクリックして、設定したプロキシ自動再試行ルールを適用して収集を再開します。

7

再抽出処理結果を確認

抽出が完了したら、グループ結果ページで各リクエストの処理結果を確認できます。テーブルのretry列に表示される番号は、プロキシ自動再試行プロセスを記録します。

表示形式は成功試行 / プール内のプロキシ数です。例えば、6 / 15と表示される場合、15個のプロキシサーバーのうち6番目のプロキシで抽出が成功したことを意味します。

この値により、何回のプロキシ切り替えが試行されたか、特定のリクエストがブロッキングに対してどれだけ敏感だったかを直感的に理解できます。

最終更新

役に立ちましたか?