博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
Web请求过程
阅读量:5234 次
发布时间:2019-06-14

本文共 3678 字,大约阅读时间需要 12 分钟。

B/S架构

最常见的架构方式。

优点:

1.客户端使用统一(此处的统一主要指实现原理统一)的浏览器,不需要特殊的网络配置。

2.服务端基于统一的HTTP协议。基于此协议的服务器有很多,如Tomcat,Nginx,JBoss。这些服务器可以直接拿来用。

请求发生的完整过程

HTTP最大的特点就是无状态的短连接的通信方式,通常情况下一次请求就完成了一次数据交互,通常也对应一次业务逻辑。然后这次通信就断开了。

采用这种方式是为了能够同时服务更多的用户,防止由于一个用户独占连接而造成阻塞的现象。

下面主要介绍用户在浏览器输入网址之后发生的整个完整过程。

1.用户输入URL,也就是网址。如www.google.com。

2.DNS域名服务器会将其转换成IP地址。

3.用户端根据IP地址向服务器发起请求。

4.服务器端可能会有负载均衡设备来平均分配所有的用户请求。在请求到达服务器后,会经过一些复杂的业务逻辑来处理用户请求。请求的数据可能在三个地方:

分布式缓存系统,文件系统或者数据库中。从其中取出数据返回给浏览器。

5.数据返回后,浏览器解析数据发现还有一些静态的资源(CSS,JS或者图片),然后再次发起请求。这些静态资源很有可能是在CDN上,如果在的话CDN服务器会再次处理用户的请求。

6.最终在浏览器端看到完整的网页。

以上就是大致的请求数据的过程。

不管架构如何变化,有三个原则是始终不变的:

1)互联网上的所有资源都要用一个URL表示。

2)必须基于HTTP与服务端交互。

3)数据展示必须在浏览器中进行。

如何发起请求

发起请求实质上就是建立一个Socket连接,但是这是一个特殊的Socket连接。

浏览器在建立Socket之前,必须根据地址栏里输入的URL的域名DNS解析出IP地址,在根据这个IP地址和默认的80端口与远程服务器建立Socket链接,然后浏览器根据这个URL组装成一个get类型的HTTP请求头,通过outPutStream.write 发送到目标服务器,服务器等待inputString.read返回数据,最后断开这个连接

端口号:80

所以完全可以自己模拟浏览器发起一个HTTP请求。专门有个处理HTTP请求的开源工具包,叫HttpClient。

在linux中通过curl+URL可以简单地发起一个HTTP请求。如:curl "www.google.com"

请求的解析

HTTP请求的最重要的部分就是HTTP的头部。

HTTP请求头:

Accept-Charset    用于指定客户端接受的字符集Accept-Encoding   可接受的内容编码Accept-Language   自然语言 比如zh-cnHost              指定被请求资源的Internet主机和端口号User-Agent        客户端将它的操作系统、浏览器和其他属性告诉服务器Connection        当前连接是否保持。

 

HTTP响应头:

Server            使用的服务器名称Content-type      指明发送给接受者的实体正文的媒体类型,如Content_Type:text/html;charset = GBKContent-Encoding: 告诉浏览器服务端采用的压缩编码Content-Language: 描述了资源所用的自然语言Content-Length  : 指明实体正文的长度Keep-Alive      : 保持连接的时间

 

常见的状态吗:

200 客户端请求成功 302 临时跳转,跳转的地址通过Location 400 客户端请求语法有错误,不能被服务器识别 404 请求资源不存在403 服务器收到请求,但是拒绝提供服务500 服务端发生不可预期的错误

 

浏览器的缓存设置

在浏览器端Ctrl+F5可以重新发起请求而不使用缓存数据。发出报文的请求头里面相关字段告诉服务器,不要缓存要最新的数据。

这两个字段是:Pragma:no-cache Cache-Control:no-cache

public:所有内容都将被缓存,在响应头中设置private:内容只缓存到私有缓存中,在响应头中设置no-cache:所有内容都不会被缓存,在请求头和响应头中设置no-store:所有内容都不会被缓存到缓存或Internet临时文件中,在响应头中设置must-revalidation/proxy-revalidation:如果缓存的内容失效,请求必须发送到服务器/代理以重新验证,在请求头中设置max-age=xxx:缓存的内容将在XXX秒后失效,只在HTTP1.1可用,在请求头中设置

Cache-Control和Expires同时出现时,Cache-Control会覆盖其他字段

Expires:一般后面跟一个日期时间,超过这个时间设置之后,缓存内容将失效,也就是浏览器在发出请求之前检查这个页面的这个字段,看页面是否过期了,过期了就重新向浏览器发起服务

Last-Modified:一般表示服务器上资源最后修改时间,根据这个修改时间可以判断当前请求的资源是否是最新的,如果是最新的,服务器就返回304状态码告知浏览器

Etag:服务器给每个页面分配一个唯一的编号,然后区分编号判断页面内容是否是最新的

DNS域名解析过程

1.用户输入URL,浏览器检查自身有没有缓存该域名的IP地址。

2.如果没有,浏览器检查操作系统缓存中是否有这个DNS解析结果。

3.如果缓存中还没有,则操作系统会把这个域名发送给LDNS(Local DNS)即本地域名服务器。

4.如果LDNS中还没有,则只能去Root Server域名服务器中请求解析了。这样的情况比较罕见,因为全球只有13台左右这样的服务器。

5.根域名服务器会返回一个本地域名服务器所查域的主域名服务器(gTLD Server)地址。gTLD是国际顶级域名服务器地址,如.com、.cn、.org,全球只有13台

6.LDNS向gTLD发送请求。

7.gTLD接受此请求,返回一个此域名对应的Name Server域名服务器的地址。这个Name Server通常就是你注册的域名服务器。

8.Name Server返回该域名对应的IP和TTL值,然后Local DNS Server会缓存这个对应关系,缓存时间由TTL控制。

9.解析结果返回用户。用户根据TTL值缓存在本地系统缓存此对应关系。

TTL是域名解析的生命周期,TTL值全称是“生存时间(Time To Live)”,简单的说它表示DNS记录在DNS服务器上的缓存时间。

清除缓存域名

Local DNS的缓存由TTL来控制,很难人工介入。但是本地机器的缓存可以用以下命令来清除:

Windows: ipconfig /flushdnsLinux:   /etc/init.d/nscd restart

几种域名的解析方式

域名解析记录主要分为:A 记录、MX记录、CNAME 记录、NS记录和 TXT记录

A记录:A 代表的是Address,用来指定域名对应的IP地址。域名可以多对一但是不能一对多。

MX记录:Mail Exchange,就是讲某个域名下的邮件服务器指向自己的Mail Server。

CNAME记录:别名解析。将一个域名设置一个或者多个别名。

NS记录:为某个域名指定DNS解析服务器。

TXT记录:为某个主机名或者域名设置文字说明。

CDN

工作机制

CDN即内容分发网络。通过现有的Internet中增加一层新的网络架构,将网站的内容发布到最接近用户的网络边缘,使用户可以就近取得所需要的内容,提高用户网站的响应速度。

负载均衡

对工作任务进行平衡、分摊到多个操作单元上去,共同完成任务。

三种架构:

1.链路负载均衡

由DNS解析来完成负载均衡,用户直接访问目标服务器,而不需要经过其他的代理服务器,通常访问速度会更快。

缺点:一旦某台服务器挂掉,由于用户本地和Local DNS都有DNS缓存,缓存没有及时更新,则造成用户无法访问这个域名。

2.集群负载均衡

硬件负载均衡:由一台专门的硬件设备负责转发请求,太贵一般公司用不起,但是性能很好(一分钱一分货啊)

软件负载均衡:由多台代理服务器组成。网络延时较长。

3.操作系统负载均衡

利用操作系统级别的软中断或者硬件中断来完成。

动态加速

在CDN的DNS解析过程中,通过动态链路探测来寻找回源最好的一条路径,然后通过DNS调度将所有请求调度到选定这条路径上回源,从而加速用户访问的效率。

回源:有用户访问某一个URL的时候,如果被解析到的那个CDN节点没有缓存响应的内容,或者是缓存已经到期,就会回源站去获取。如果没有人访问,那么CDN节点不会主动去源站拿的。

转载于:https://www.cnblogs.com/prayers/p/9080012.html

你可能感兴趣的文章
动态规划 | 背包问题 1068
查看>>
探究TCP
查看>>
mark标签:
查看>>
Foundation 之 NSFileManager
查看>>
LeetCode--Merge Intervals
查看>>
【黑金原创教程】【FPGA那些事儿-驱动篇I 】实验二十一:SDRAM模块④ — 页读写 β...
查看>>
ajax参数详解
查看>>
一次多源数据库主从不同步的情况
查看>>
利用gcc的__attribute__编译属性section子项构建初始化函数表
查看>>
VSTO 函数InStrRev
查看>>
统计在线人数
查看>>
laravel5.4生成验证码
查看>>
第二天 how can I 坚持
查看>>
第二百二十九天 how can I 坚持
查看>>
开源网络抓包与分析框架学习-Packetbeat篇
查看>>
记不住的常用快捷键
查看>>
用结构体实现链表操作
查看>>
Java Agent初探——动态修改代码
查看>>
触摸事件
查看>>
hadoop 相关
查看>>