Webharvy  proxy integration

WebHarvy プロキシ 統合

WebHarvyは何ですか?

WebHarvy は、Web サイトからテキスト、HTML、画像、URL、電子メールを簡単に抽出し、抽出したコンテンツをさまざまな形式で保存できるウェブスクレイピングツールです。大規模なスクレイピングを実行している場合、Bright Dataが提供するプロキシサービスのいずれかを使用することで、成功率を高め、同じターゲットにより多くの同時リクエストを送ることができます。

Bright Dataプロキシを使用したWebHarvyのセットアップ方法

  • WebHarvy Web Scraperをダウンロードしてインストールします
  • 「Webharvy」 → 「ホーム」タブ → 「設定」 → 「プロキシ設定」の順に進みます
Accessing "Proxy Settings" on Webharvy
  • Bright Dataのプロキシネットワークにサインアップします
  • Bright Dataダッシュボードに移動します
  • Bright Dataプロキシネットワークとの統合セクションで、クローラーまたはボットの使用オプションを選択します
Selecting "With a crawler or a bot" on the integration with Bright Data's Proxy Network
  • 「API例」ページでは、以下の詳細が表示されます:
    • プロキシアドレス、ポート番号、ユーザー名、パスワード
The details you'll need that are under
  • WebHarvyプロキシの設定に戻り、Bright Dataの詳細を WebHarvyプロキシの設定に貼り付けます。
  • +ボタンをクリックします
  • 適用をクリックします
Where to paste the details from Bright Data

: Webharvyはマイニング時にのみプロキシサーバーを使用します。
Webharvyの構成ブラウザはこのプロキシサーバーを使用しないため、構成ブラウザ内でIPアドレスを確認しても、コンピュータの元のIPのままです。
構成ブラウザでプロキシサーバーを使用するには、Windowsでプロキシアドレスを直接設定する必要があります。

プロキシサーバーを無効にするには、Webharvy → 「ホーム」メニュー → 「設定」 → 「プロキシ設定」タブで、プロキシサーバー経由のネットワーク接続を有効にするチェックボックスをオフにするだけです。

あるいは、独自のデータ収集ツールを使用して、プロセスをより迅速かつ簡単にすることもできます。

始める準備はできましたか?

あらゆるニーズに対応するプロキシタイプ

レジデンシャルプロキシ

  • 7,200万を超えるIP
  • 195カ国で利用可能
  • ローテーションに対応する最大級のリアルピアIPネットワーク
  • 洗練されたウェブサイトすべてにアクセスしてクローリング

データセンタープロキシ

  • 1,600万を超えるIP
  • 98カ国で利用可能
  • 共有および専用のIPプールを利用可能
  • 複雑でないウェブサイトへ迅速にアクセス

ISPプロキシ

  • 60万を超えるIP
  • 35カ国で利用可能
  • IPローテーションのない本物のスタティックレジデンシャルIP
  • 複数アカウントへのログインに最適

モバイルプロキシ

  • 700万を超えるIP
  • 195カ国で利用可能
  • 世界最大のリアルピア3G/4G IPネットワーク
  • モバイル広告の検証とモバイルサイトのクローリング

業界No.1のカスタマーエクスペリエンス

どんなニーズにも対応

毎日新機能をリリース

年中無休グローバルサポート

必要な時にサポートします

完全な透明性

リアルタイムのネットワークパフォーマンス ダッシュボード

専任のアカウント
マネージャー

パフォーマンスを最適化する

ニーズに合わせたご提案

お客様のデータ収集目標を満たします

プロキシとデータ収集の分野における業界トップ

Category leader in proxies

毎日650TBの公共データが収集されている

Number of ISP proxies

毎日新機能をリリース

Serving 7/10 universities

世界有数の大学10校のうち7校にサービスを提供

Trust pilot ratings

4.6/5トラストパイロット評価

WebHarvy用のプロキシを取得する