PythonでWebスクレイピング
参考にした動画
-
ライブラリ
よく使う関数・機能を簡単にまとめたもの -
モジュール
関数やクラスなどを一つのPythonファイルにまとめたもの
PythonでのWebスクレイピングでよく使うライブラリ
- Selenium
ブラウザ操作を自動化できる(値をコピー、クリック、入力ボックスに値を入れる) - BeautifulSoup
HTMLを読み取る(ページのタイトルやURLを取得)
インポート
- jupyter labでselenium, time, pandasのインポートをする
from selenium import webdriver
import time
import pandas as pd
Pandas
Excelやcsv操作、グラフ化、データの集計や加工を行うライブラリ
- jupyter labでBeautifulSoup, urllibのインポート
from bs4 import BeautifulSoup
import urllib.request as req
urllib
URLを扱うPythonのライブラリ
Author And Source
この問題について(PythonでWebスクレイピング), 我々は、より多くの情報をここで見つけました https://zenn.dev/canary17/articles/e0855f622b3d90著者帰属：元の著者の情報は、元のURLに含まれています。著作権は原作者に属する。
Collection and Share based on the CC protocol