# -*- coding: UTF-8 -*-
import bs4
import sys
reload(sys)
sys.setdefaultencoding("utf-8")
import requests
from bs4 import BeautifulSoup
import json
url="https://www.renrendai.com/loan#page-1"
def gethtml(url):
try:
r=requests.get(url)
r.raise_for_status()
return r.text
except:
print "连接失败"
def parsehtml(html):
soup=BeautifulSoup(html,"html.parser")
a=soup(id="loan-list-rsp")
mess=[]
for i in a: #type(i)=<class 'bs4.element.Tag'>
b=str(i.string)
htmllist=json.loads(b)["data"]["loans"]
for j in htmllist:
mess.append([j["loanId"],j["title"],j["amount"],j["interest"],j["months"],j["startTime"]])
return mess
def showinfo(num,mess):
tplt="{:^10}\t{:^10}\t{:^10}\t{:^10}\t{:^10}\t{:^10}"
print (tplt.format("订单标的","借款标题","金额","利息","期限","募资时间")) #括号不能遗漏，否则在下一步循环报错
for i in range(num):
cc=mess[i]
print tplt.format(cc[0],cc[1],cc[2],cc[3],cc[4],cc[5])
def main():
html=gethtml(url)
mess=parsehtml(html)
showinfo(20,mess)
main()
爬取人人贷网站
最后编辑于 ：
©著作权归作者所有,转载或内容合作请联系作者
- 文/潘晓璐 我一进店门，熙熙楼的掌柜王于贵愁眉苦脸地迎上来，“玉大人，你说我怎么就摊上这事。” “怎么了？”我有些...
- 文/花漫 我一把揭开白布。 她就那样静静地躺着，像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上，一...
- 文/苍兰香墨 我猛地睁开眼，长吁一口气：“原来是场噩梦啊……” “哼！你这毒妇竟也来了？” 一声冷哼从身侧响起，我...
推荐阅读更多精彩内容
- 考过会计从业资格考试的人都知道，会计和出纳是不可以兼任的，有实际经验的会计人都知道，会计由很多都是从出纳开始做起的...
