Pythonネットワーク爬虫類--BeautifulSoupライブラリの基本要素
2969 ワード
requests
requestsライブラリはこの文章を見ることができますhttp://blog.csdn.net/shanzhizi/article/details/50903748最近嵩天先生のPythonネット爬虫類の授業を勉強して、記録します.
bs4
1.BeautifulSoupライブラリ、beautifulsoup 4またはbs 4とも呼ばれます.主にBeautifulSoupクラスを使用します.
2.BeautifulSoupライブラリ解析器
3.BeautifulSoupクラスの基本要素
4.テストコード(めちゃくちゃ)
requestsライブラリはこの文章を見ることができますhttp://blog.csdn.net/shanzhizi/article/details/50903748最近嵩天先生のPythonネット爬虫類の授業を勉強して、記録します.
bs4
1.BeautifulSoupライブラリ、beautifulsoup 4またはbs 4とも呼ばれます.主にBeautifulSoupクラスを使用します.
from bs4 import BeautifulSoup
import bs4
2.BeautifulSoupライブラリ解析器
3.BeautifulSoupクラスの基本要素
4.テストコード(めちゃくちゃ)
import requests
from bs4 import BeautifulSoup
r = requests.get('http://python123.io/ws/demo.html',timeout = 30)
r.raise_for_status()
r.encoding = r.apparent_encoding
# print(r.text)
demo = r.text
soup = BeautifulSoup(demo,"html.parser")
print(soup.title)
tag = soup.a
print(tag)
print(soup.a.parent.name) # name
print(soup.a.parent.parent.name)
print(tag.attrs) # , ,href class id
print(tag.attrs['class'])
print(tag.attrs['href'])
print(type(tag)) # a bs4
print(tag.string)
print(soup.p.string)
print(type(soup.p.string)) #bs4.element.NavigableString ,p