最近在学习爬虫时经常要复制浏览器的headers和表单数据到Python进行操作，但是复制过来的IE的数据格式是对用制表符（'\t'）进行分隔，...
投稿
收录了6篇文章 · 110人关注
-
Python网络爬虫数据格式学习（转换headers、表单和urlencode数据为字典格式）
-
人生苦短，我用Python--一起来爬知乎娘上次爬了教务处的成绩，接下来想去爬一爬知乎娘，好像大家都很喜欢爬知乎娘，GitHub上貌似已经有人把获取各种知乎数据的操作封装好了：zhihu-...
-
python爬虫：urllib包
在学习《Web Scraping with Python》,发现第32页下面这段代码报错。这段代码的意思是将某个页面全部爬下来。 经查询，在py...
-
AttributeError: 'unicode' object has no attribute 'xpath'
刚写代码报错：AttributeError: 'unicode' object has no attribute 'xpath' 场景是这样的：...
-
利用Python进行数据分析(2) 尝试处理一份JSON数据并生成条形图一、JSON 数据准备 首先准备一份 JSON 数据，这份数据共有 3560 条数据，每条内容结构如下： 本示例主要是以 tz（timezone...
-
谈谈爬虫-模拟登录思路
个人博客： 斯科特安的时间 最近在做的sideproject，需要网络上的文章数据。于是顺便学习了下爬虫技术，也算是有些心得体会。写下来分享给刚...
专题公告
使用htmlparser、Xpath、scrapy进行网页解析
{var%20f='http://v.t.sina.com.cn/share/share.php?appkey=1881139527',u=z||d.location,p=['&url=',e(u),'&title=',e(t||d.title),'&source=',e(r),'&sourceUrl=',e(l),'&content=',c||'gb2312','&pic=',e(p||'')].join('');function%20a(){if(!window.open([f,p].join(''),'mb',['toolbar=0,status=0,resizable=1,width=440,height=430,left=',(s.width-440)/2,',top=',(s.height-430)/2].join('')))u.href=[f,p].join('');};if(/Firefox/.test(navigator.userAgent))setTimeout(a,0);else%20a();})(screen,document,encodeURIComponent,'','','https://upload.jianshu.io/collections/images/270156/520250f045002c8693a6a76d7b7c37c2.png', '推荐专题《python爬虫》（ 分享自 @简书 ）','http://39.103.169.235/c/4bd9d1c392a2?utm_campaign=maleskine&utm_content=collection&utm_medium=reader_share&utm_source=weibo','页面编码gb2312|utf-8默认gb2312'));){kind=link}