ノーコードでWebページをスクレイプできるChrome拡張「AnyPicker」

2019/10/09 09:53

◆ AnyPicker
https://anypicker.ryang-studio.com/

紹介

「AnyPicker」は、ノーコードでWebページをスクレイプできるChrome拡張ツールです。

Chrome拡張機能をインストール後、スクレイプするWebサイトを開くとこのようなサイドバーが出現します。

STEPは全部で5つあり、その1つ目がこちら。今回は初めての登録なので「New recipe」を選択します。

続いてSTEP2、ここで実際にスクレイプするコンポーネントを登録していきます。

取得対象にカーソルを合わせてクリックすると

フィールドとバリューが取得できます。

同じ要領で、ピックアップ全部のタイトルを選択しました。

なお、フィールド値は自由に設定可能。後にアウトプットデータのKey値になるので、取得しやすい英単語が好ましいでしょう。

続いてSTEP3は、リンク元を取得&サジェストしてくれる機能。ECサイトのように別カテゴリで同じ構造になっているリンク元を全部取得する時に役立ちます。

「LINK LIST SUGGESTION」をクリックするとページグループごとにリンク元を取得してくれます。

STEP4では、ページャーのnextリンクを指定することで、全ページに渡って同じ箇所のデータをスクレイピングしてくれます。

最終STEPは、今まで定義した条件を元に実際にデータを取得します。なお「SAVE RECIPE」で取得定義情報を保存しておくこともできます。

「BUILD TASK」を実行して

完了するとリストとCSVを出力してくれます。

スクレイプにあたりコードが要らなかったり、ページャー全ての情報を取得できたりとかなりパワフルに活用できるツールではないでしょうか。

◆ AnyPicker
https://anypicker.ryang-studio.com/

新着ピック  






















新着ニュース

[こんな時どうする]CloudFrontのログが出力されない時の確認と対応事例 | DevelopersIO

Global AcceleratorのDNS名を利用したエイリアス設定を試してみた | DevelopersIO

“IoTファーストクラスシート”登場 乗客の眠りを検知しCAに報告 機内食で起こされず快適な旅

AWS Systems Managerのファイル情報の連携 | DevelopersIO

Lookerベスト・プラクティスまとめ #looker | DevelopersIO

トヨタのコンセプトカーLQは車載AIによって人間と友達になる | TechCrunch Japan

シャープ、AIoT活用しスマートライフのプラットフォーマーに−−2つの子会社設立

Googleの新スマホPixel 4がBest Buyの予約ページに一時出現 | TechCrunch Japan

Googleの新スマホPixel 4がBest Buy...

TechCrunch Japan / 9時間前


ANAが“分身ロボット”開発 遠隔操作でショッピングや観光 20年実用化

初心者向け『チュートリアル: Amazon EC2 インスタンスの状態の変化をログに記録する』をやってみた | DevelopersIO

Lookerベスト・プラクティス:埋め込み分析におけるセキュリティ #looker | DevelopersIO

Lookerベスト・プラクティス:Lookerをセキュアに保つ方法 #looker | DevelopersIO

Lookerベスト・プラクティス:Lookerパフォーマンス概要 #looker | DevelopersIO

AIで消防士の安全を守るスタートアップ「Prometeo」がIBMのCall for Codeチャレンジで優勝 | TechCrunch Japan

IACがMatch Groupのスピンオフの概要を発表 | TechCrunch Japan

量子機械学習のRahkoがシードラウンドで約1億8000万円調達 | TechCrunch Japan

ソフトバンクがWeWorkの経営権取得へ | TechCrunch Japan

AWS Educateに登録してスターターアカウントからAWSサービスを使ってみた | DevelopersIO

Auth0第一歩 ~複数のAWSアカウントにSAML認証でシングルサインオン~ | DevelopersIO

Nerves Training at Sapporo ハンズオンに参加してきました #サッポロビーム | DevelopersIO

Nerves Training at Sapporo ...

DevelopersIO / 1日前


もっと見る
記事をPICKする
ログイン
会員登録
Register
記事をPICKする

会員登録すると、もっと便利に利用できます。