Pythonネットワーク爬虫類--BeautifulSoupライブラリの基本要素


requests
requestsライブラリはこの文章を見ることができますhttp://blog.csdn.net/shanzhizi/article/details/50903748最近嵩天先生のPythonネット爬虫類の授業を勉強して、記録します.
bs4
1.BeautifulSoupライブラリ、beautifulsoup 4またはbs 4とも呼ばれます.主にBeautifulSoupクラスを使用します.
from bs4 import BeautifulSoup
import bs4

2.BeautifulSoupライブラリ解析器
Python网络爬虫--BeautifulSoup库的基本元素_第1张图片
3.BeautifulSoupクラスの基本要素
Python网络爬虫--BeautifulSoup库的基本元素_第2张图片
Python网络爬虫--BeautifulSoup库的基本元素_第3张图片
4.テストコード(めちゃくちゃ)
import requests
from bs4 import BeautifulSoup

r = requests.get('http://python123.io/ws/demo.html',timeout = 30)
r.raise_for_status()
r.encoding = r.apparent_encoding
# print(r.text)
demo = r.text
soup = BeautifulSoup(demo,"html.parser")
print(soup.title)
tag = soup.a
print(tag)
print(soup.a.parent.name) #  name       
print(soup.a.parent.parent.name)
print(tag.attrs) #     ,       ,href class id
print(tag.attrs['class'])
print(tag.attrs['href'])
print(type(tag))  # a      bs4      
print(tag.string)
print(soup.p.string)
print(type(soup.p.string))  #bs4.element.NavigableString  ,p