2018-05-11 D4 第2章

第1章最后的好多库装不上,应该是Windows不支持,用Linux或者Mac可以

第2章

基本知识: HTTP原理, 网页的基础知识, 爬虫的基本原理, Cookies的基本原理。

2.1 HTTP基本原理

2.1.1 URI和URL

Uniform Resource Identifier统一资源标识符

Universal Resource Locator统一资源定位符

Universal Resource Name统一资源名称

2.1.2 超文本

hypertext

2.1.3 HTTP和HTTPS

Hyper Text Transfer Protocol 超文本传输协议

Hyper Text Transfer Protocol over Secure Socket Layer 在HTTP下加入SSL层,简称为HTTPS

2.1.4 HTTP 请求过程

2.15 请求

请求方法(Request Method)

请求网址(Request URL)

请求头(Request Headers)

请求体(Request Body)

请求的方法 GET和POST

get会包含在URL中,长度有限制

post会通过表单上传,不会出现在URL中,长度没限制,提交账号密码,还有上传文件比较大的时候



其他请求方法

方法                                                  描述

GET                  请求页面,并返回页面内容

HEAD               类似于GET请求,只不过返回的相应中没有具体的内容,用于获取抱头

POST               大多数用于提交表单或者上传文件,数据包含在请求体中

PUT                 从客户端向服务器传送的数据取代指定文档中的内容

DELETE         请求服务器删除指定的页面

CONNECT     把服务器当作跳板,让服务器替代客户端访问其他页面

OPTIONS     允许客户端查看服务器的性能

TRACE       回显服务器收到的请求,主要用于测试或诊断

2. 请求的网址

3. 请求头

Accept:请求报头域, 

Accept-Language:

Accept-Encoding:

Host:

Cookies:

Referer:

User-Agent:

Content-Type: 也叫互联网媒体类型或者MIME类型。

4. 请求体

请求体一般承载的内容是POST请求中的表单数据,而对于GET请求,请求体则为空

2.1.6 响应

响应可以分为三部分:响应状态码(Response Status Code)  响应头(Response Headers)和响应体(Response Body)

1 响应状态码

2 响应头

Date

Last-Modified

Content-Type

Set-Cookie

Expires:

3 响应体

响应的正文都在响应体里面。

2.2 网页的基础

2.2.1 网页的组成

网页三大部分----HTML, CSS 和JavaScript。 把网页比作一个人的话,HTML相当于骨架,JavaScript相当于肌肉,CSS相当于皮肤。

1.HTML

HTML是用来描述网页的一种语言,其全称叫做Hyper Text Markup Language,即超文本标记语言。网页包括文字,按钮,图片和视频等各种复杂的元素。

2.CSS

    Cascading Style Sheets,层叠样式表

3.JavaScript

简称JS,是一种脚本语言,产生了实时,动态,交互的网页功能。

HTML定义了网页的内容和结构,CSS描述了网页的布局,JavaScript定义了网页的行为

2.2.2 网页的结构

各种标签

2.2.3 节点树及节点间的关系

在HTML中,所有的标签定义的内容都是节点,它们构成了一个HTML DOM树。

2.2.4 选择器

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 213,014评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,796评论 3 386
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,484评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,830评论 1 285
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,946评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,114评论 1 292
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,182评论 3 412
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,927评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,369评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,678评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,832评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,533评论 4 335
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,166评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,885评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,128评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,659评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,738评论 2 351

推荐阅读更多精彩内容