SeleniumとはWebブラウザを自動操縦するためのライブラリだ。もともとブラウザを使って自動テストを行うためのライブラリだが、今ではWeb巡回(クローリング)からデータ抽出(スクレイピング)までいろいろな自動処理に使われている。 Seleniumで可能なのは次の ...

ここから、自分の使っているChromeと同じバージョン用のドライバーをダウンロードして解凍。任意の場所に置いておく。 ※Chromeブラウザ側がちょいちょい自動アプデしちゃうので注意。安定稼働させたい場合は自動アプデを切っておく。（ただし手動でアプ ...

PythonとSeleniumを使ってブラウザ操作を自動化していると、特定のページを「再読み込み（リロード）」したい場面が出てきますよね。例えば、最新の情報を取得するために定期的にページを更新したり、何らかの操作後に画面の状態をリセットしたり、と ...

Web scraping has been used to extract data from websites almost from the time the World Wide Web was born. In the early days, scraping was mainly done on static pages – those with known elements, tags ...