面接・求人・転職!Dodaから求人情報をスクレイピングする
Dodaとは? Dodaはパーソルキャリア株式会社が運営している転職支援サービスです。日本国内外の企業の求人情報を提供し、求職者が自身のキャリアに合った仕事を見つけるためのサポートを行っています。Dodaのサービスには、求人情報の提供だけでなく、転職エージェントサービス、キャリアカウンセリング、イベントやセミナーの開催などが含まれます。 スクレイピングツールの概要 ScrapeStorm とは、強い機能を持つ、プログラミングが必要なく、使いやすい人工知能 Webスクレイピングツール です。違う基盤のユーザーに二つの スクレイピング モードを提供し、1-Clickで99%のWebスクレイピングを満たします。 ScrapeStorm により、大量のWebデータを素早く正確的に取得できます。手動で データ抽出 が直面するさまざまな問題を完全に解決し、 情報取得 のコストを削減し、作業効率を向上させます。 抽出されたデータをご覧ください。 1.タスクを新規作成する (1)URLをコピーする 今回はシステムエンジニア(Web・オープン系・パッケージ開発)の転職・求人情報一覧ページをスクレイピングする方法を紹介します。まず、URLをコピーしてください。 (2)スマートモードタスクを新規作成する ScrapeStormのホームページ画面にスマートモードタスクを新規作成します。また、持っているタスクをインポートすることもできます。 詳細には下記のチュートリアルをご参照ください。 スマートモードタスクの新規作成方法 2.タスクを構成する (1)自動識別 ScrapeStormは自動的にリスト要素とページボタンを識別できます。偶に識別できないの場合、xpathを利用してください。下記のチュートリアルも参照してください。 ページ分けの設定方法 今回のxpathは下記のようにご覧ください。 /html/body//section[@id='shStart']/div[56]/div/ul/li[17]/a copy (2)詳細ページに行く ソフトウェアの「詳細ページに行く」機能を利用し、待遇福利、休日休暇、勤務時間などの情報を抽出します。 (3)事前操作 事前操作機能を利用して、求人詳細ページを展開できます。 (4)フィールドの追加と編集 「フィールドを追加」ボタン...