note

初心者でもわかる！XPathの世界に踏み出そう

Webスクレイピングやテスト自動化の場面でよく登場する「XPath」。しかし、その見た目がちょっとややこしくて、敬遠してしまう方も多いのではないでしょうか？この記事では、技術に不安のある初心者でもスムーズに理解できるよう、XPathの基本から実用例 ...
GitHub

Docker × Ruby × Selenium Web スクレイピングサンプル

かにみそ協会サイトのコラム記事を収集するWebスクレイピングシステムのサンプルコードです。Docker環境で簡単にセットアップ可能で、実際に動作する完全な構成を提供します。 XPath は HTML の要素、属性値などを指定するための言語で、Google Chrome で表示さ ...
GitHub

A Scraper to download images and video files from IG using Selenium: personal exercise to ...

3 types of scrapers: (1) per IG user page (not advisable, too many requests, risking getting IP blocked) (2) per Photo page (more advisable, not so many requests, although if entering a lot of pages ...
窓の杜

閲覧ページの選択部分を指し示す“XPath”を取得できるChrome拡張 ...

「XPath Helper」は、閲覧ページで“XPath”のクエリを評価したり、選択部分を取得するための“XPath”クエリを生成できる「Google Chrome」用の拡張機能。編集部にてWindows 10上の「Google Chrome」v46.0.2490.80で動作を確認した。“Chrome ウェブストア”から無償で ...