现新建一本地网站，用python抓取网站中的元素，参下图：
Snip20171007_2.png
我们用beautifulsoup来完成这项工作，新建一个
.py文件，代码如下：
from bs4 import BeautifulSoup
path = './1_2_homework_required/index.html' #这里使用了相对路径,只要你本地有这个文件就能打开
with open(path, 'r') as wb_data: # 使用with open打开本地文件
soup = BeautifulSoup(wb_data, 'lxml') # 解析网页内容
# print(wb_data)
titles = Soup.select('body > div > div > div.col-md-9 > div > div > div > div.caption > h4 > a') # 复制每个元素的css selector 路径即可
images = Soup.select('body > div > div > div.col-md-9 > div > div > div > img')
reviews = Soup.select('body > div > div > div.col-md-9 > div > div > div > div.ratings > p.pull-right')
prices = Soup.select('body > div > div > div.col-md-9 > div > div > div > div.caption > h4.pull-right')
stars = Soup.select('body > div > div > div.col-md-9 > div > div > div > div.ratings > p:nth-of-type(2)')
# 为了从父节点开始取,此处保留:nth-of-type(2),观察网页,多取几个星星的selector,就发现规律了
# print(titles,images,rates,prices,stars,sep='\n--------\n') # 打印每个元素,其中sep='\n--------\n'是为了在不同元素之间添加分割线
for title, image, review, price, star in zip(titles, images, reviews, prices, stars): # 使用for循环,把每个元素装到字典中
data = {
'title': title.get_text(), # 使用get_text()方法取出文本
'image': image.get('src'), # 使用get 方法取出带有src的图片链接
'review': review.get_text(),
'price': price.get_text(),
'star': len(star.find_all("span", class_='glyphicon glyphicon-star'))
# 观察发现,每一个星星会有一次<span class="glyphicon glyphicon-star"></span>,所以我们统计有多少次,就知道有多少个星星了;
# 使用find_all 统计有几处是★的样式,第一个参数定位标签名,第二个参数定位css 样式,具体可以参考BeautifulSoup 文档示例http://www.crummy.com/software/BeautifulSoup/bs4/doc.zh/#find-all;
# 由于find_all()返回的结果是列表,我们再使用len()方法去计算列表中的元素个数,也就是星星的数量
}
print(data)
在编写代码中出现很多错误，比如把 ：写成 . ,错一点就会报错，或者无任何提示，但结果不正确。
总体上，python对于格式的要求比ruby严格的多。
这里还遇到一个报错，报错内容：
/usr/local/Cellar/python3/3.6.2/Frameworks/Python.framework/Versions/3.6/bin/python3.6 /Users/jkxuan/Desktop/1_2answer_of_homework/xiaozhu.py
Traceback (most recent call last):
File "/Users/jkxuan/Desktop/1_2answer_of_homework/xiaozhu.py", line 2, in <module>
import requests
ModuleNotFoundError: No module named 'requests'
Process finished with exit code 1
原来是忘记安装了。安装命令如下：pip install requests,结果报错，无法安装。换了一种方式： sudo pip3 install requests 安装成功 ! （必须是pip3，因为是python3版本！sudo表示用root身份运行，所以要输入密码）
