python学习:阶段性小结

三篇python学习手账:
1、从爬虫开始学习python,能爬到某房产网站房价信息,了解requests模块基本用法,包括get请求,自定义请求头(常见的包括User-Agent、Referer、Cookie),主要是用来伪装浏览器,绕过反爬虫机制,然后用beautifulsoup模块来把get过来的html结构化并提取目标数据,最后用pandas来吧数据保存到excel中;
2、python爬虫基础必备知识之HTML标签,第一篇文章内涉的beautifulsoup需要对html有一定的了解,所以有了这篇分享(原本不在计划中),html标签是个成对出现的,有开始,有结束,可以嵌套,甚至是无限极嵌套,标签有属性,有属性值,属性和属性值并非单一,属性是用来给html编号、定位、调节样式等作用,这样展示给用户看到的才是丰富多彩且能互动的网页,而到beautifulsoup中将会用来定位目标数据。
3、BeautifullySoup模块的基本用法,主要用到她的css选择器,select方法,她能通过标签、标签路径、属性、标签+属性、标签路径+属性等参数来查询目标数据,除了select外还有find、find_all方法,这俩个的区别主要是找第一个元素和找所有元素,用法和select基本一致,唯一不同的是传参的时候是分开写,尤其是class属性的时候要写成‘class_’,实战中可以慢慢体会。

在学习python写爬虫的过程中,尤其初学者,更尤其是完全没有编程经历的,还是要先把学习的目的和路径搞清楚了:

一、学习python的目的是啥?
一定要清楚的是,学习python是用来做什么的?业务需要?职业选择?有目的才能有针对性的来指定学习策略和方向,效率才会高!
不管目的是啥,最好是先定一个短期的小目标,刚开始可以简单一些,不要一开始就把自己给搞懵了,从一个能爬到数据的爬虫做起,也别一开始就去爬那种反爬机制很强的网站(小白阶段就别挑选那种很厉害的对手啦)。
二、新手上路,趁手的武器要有
1、能写python的工具有很多,pycharm还可以,没啥特别配置,一路回车安装完就可以了,百度一下好多;
2、一个学习记录和训练的工具,我用的是jupyter notebook,这个环节还是蛮重要的,别看说python写代码很方便,方便之处在于代码补全和自动缩进,而这也恰恰会阻碍新手的学习效果,代码还是自己敲进去的好;
3、最好有一本手抄或者书,关于python基础语法和基本函数应用的,可以随时翻看,别说电脑手机方便,谁用谁知道。
三、开始尝试各种小项目中去实践和深入学习
这个地方也要结合相应的目的来做,比如你当前正在做什么事,是否可以用python来提升效率,哪怕是个很简单的复制粘贴
四、一定一定要做总结
不管是学习还是实践,结束之后一定要及时总结,哪怕不能做到及时,当日总结也要有,这样才能在实践过程中得心应手

好了,先记录这么多
之后会继续沿着爬虫来学习相关的模块,比如异常处理、数据库操作、可视化、多线程、计划任务等等,一步一个脚印。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 218,284评论 6 506
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,115评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,614评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,671评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,699评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,562评论 1 305
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,309评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,223评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,668评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,859评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,981评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,705评论 5 347
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,310评论 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,904评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,023评论 1 270
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,146评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,933评论 2 355

推荐阅读更多精彩内容

  • 一、负面的信念 我想成为一个超级演说家,却认为我的年龄太大,会阻碍我的成功。 如果我一直认为我因为年龄大不能实现我...
    张艺凡58阅读 178评论 0 0
  • 上个星期去一所211大学专业见习,去留学生课堂听课。听了好多课堂,有一个课堂记忆深刻,因为那个课堂的氛围最轻松,最...
    子简healer阅读 213评论 0 1
  • 期盼了已久的雨 终于出现在天气预报里 也在我完成蔬菜种子播种后如期而至 它事先给了提示,先来了几滴 慢慢随之加剧 ...
    付朝兰阅读 264评论 0 10
  • 漫步于校园,微风拂过面颊,飘零的樱花落在我的碎花长裙上,融为一体,而后又悄然脱离,与大地亲密接吻。 “梦梦,梦梦,...
    夜阑月落阅读 601评论 0 3
  • 一个人死了,他就真的消失了! 生命是强大的,我们从出生时的几斤,到成年时的几百斤,再到装进棺材时的那区...
    AYN阅读 235评论 0 0