开篇:每当我们将开发好的ASP.NET网站部署到IIS服务器中,在浏览器正常浏览页面时,可曾想过Web服务器是怎么工作的,其原理是什么?“纸上得来终觉浅,绝知此事要躬行”,于是我们自己模拟一个简单的Web服务器来体会一下。
一、请求-处理-响应模型
1.1 基本过程介绍
每一个HTTP请求都会经历三个步凑:请求-处理-响应:每当我们在浏览器中输入一个URL时都会被封装为一个HTTP请求报文发送到Web服务器,而Web服务器则接收并解析HTTP请求报文,然后针对请求进行处理(返回指定的HTML页面、CSS样式表、JS脚本文件亦或是加载动态页面生成HTML并返回)。最后将要返回的内容转为输出流并封装为HTTP响应报文发送回浏览器。
当然,浏览器接收到响应报文后会加载HTML、CSS与JS并显示在页面中,最后成为我们看到的最终效果。
1.2 通信过程介绍
Web服务器本质上来说就是一个Socket服务端,在不停地接受着客户端的请求,然后针对每一个客户端的请求进行处理,处理完毕就即时关闭连接。而我们的浏览器则是一个Socket客户端,通过TCP协议向服务端发送HTTP请求报文。
About:Socket非常类似于电话插座,以一个电话网为例:电话的通话双方相当于相互通信的2个程序,电话号码就是IP地址。任何用户在通话之前,首先要占有一部电话机,相当于申请一个Socket;同时要知道对方的号码,相当于对方有一个固定的Socket。然后向对方拨号呼叫,相当于发出连接请求。对方假如在场并空闲,拿起电话话筒,双方就可以正式通话,相当于连接成功。双方通话的过程,是一方向电话机发出信号和对方从电话机接收信号的过程,相当于向Socket发送数据和从Socket接收数据。通话结束后,一方挂起电话机相当于关闭socket,撤消连接。
1.3 HTTP协议基础
Internet的基本协议是TCP/IP协议(传输控制协议和网际协议),目前广泛使用的 FTP、HTTP(超文本传输协议)、Archie Gopher都是建立在TCP/IP上面的应用层协议,不同的协议对应不同的应用。而HTTP协议是Web应用所使用的主要协议。
HTTP协议是基于请求响应模式的。客户端向服务器发送一个请求,请求头包含请求的方法、 URI、协议版本、以及包含请求修饰符、客户端信息和内容的类似MIME的消息结果。服务器则以一个状态行作为响应,相应的内容包括消息协议的版本、成功或者错误编码加上包含服务器信息、实体元信息以及可能的实体内容。
HTTP是无状态协议,依赖于瞬间或者近乎瞬间的请求处理。请求信息被立即发送,理想的情况是 没有延时的进行处理,不过,延时还是客观存在的。HTTP有一种内置的机制,在消息的传递时间上由一定的灵活性:超时机制。一个超时就是客户机等待请求 消息的返回信息的最长时间。
(1)HTTP请求报文示例
(2)HTTP响应报文示例
TIP:关于HTTP协议的详细介绍,可以浏览一下小坦克大神的这篇:HTTP协议详解
二、关键设计思路
2.1 要实现的功能
(1)处理用户的静态文件请求:主要是指html/css/js文件的请求;
(2)处理用户的动态文件请求:这里只处理ASP.NET请求,即ashx与aspx文件的请求;
2.2 要封装的类
(1)HttpRequest、HttpResponse与HttpContext类
根据我们对ASP.NET请求处理机制的分析,我们知道在HttpRuntime的ProcessRequest方法中构造了一个HttpContext对象。在HttpContext的构造函数中,根据HttpWorkerRequest对象创建了HttpContext对象,这是一个重要的Http上下文对象,两个重要类型的字段也随之被初始化:HttpRequest对象和HttpResponse对象。因此,我们在设计时也可以设计一个HttpContext类将HttpRequest和HttpResponse两个实例进行封装。
TIP:有关ASP.NET请求处理机制的分析,可以浏览我的另外一篇文章:ASP.NET请求处理机制探索之二-核心
(2)IHttpHandler接口与实现IHttpHandler接口的HttpApplication类
针对每个Http请求都有一个抽象的HttpApplication对象来进行处理,而为了考虑扩展性(可以是ashx,也可以是aspx),封装了一个IHttpHandler接口,让不同的处理对象实现这个接口即可。IHttpHandler接口很简单,就声明了一个ProcessRequest方法,每个实现的类只需要实现这个方法即可。
2.3 总体设计流程
三、关键代码实现
3.1 开启Socket服务监听浏览器端的HTTP请求
private void btnStart_Click(object sender, EventArgs e)
{
// 创建Socket->绑定IP与端口->设置监听队列的长度->开启监听连接
socketWatch = new Socket(AddressFamily.InterNetwork, SocketType.Stream, ProtocolType.Tcp);
socketWatch.Bind(new IPEndPoint(IPAddress.Parse(txtIPAddress.Text), int.Parse(txtPort.Text)));
socketWatch.Listen();
// 创建Thread->后台执行
threadWatch = new Thread(ListenClientConnect);
threadWatch.IsBackground = true;
threadWatch.Start(socketWatch); isEndService = false;
txtIPAddress.ReadOnly = true;
txtPort.ReadOnly = true;
btnStart.Enabled = false; ShowMessage("~_~消息:【您已成功启动Web服务!】");
} private void ListenClientConnect(object obj)
{
Socket socketListen = obj as Socket; while (!isEndService)
{
Socket proxSocket = socketListen.Accept();
byte[] data = new byte[ * * ];
int length = proxSocket.Receive(data, , data.Length, SocketFlags.None);
// Step1:接收HTTP请求
string requestText = Encoding.Default.GetString(data, , length);
HttpContext context = new HttpContext(requestText);
// Step2:处理HTTP请求
HttpApplication application = new HttpApplication();
application.ProcessRequest(context);
ShowMessage(string.Format("{0} {1} from {2}", context.Request.HttpMethod, context.Request.Url, proxSocket.RemoteEndPoint.ToString()));
// Step3:响应HTTP请求
proxSocket.Send(context.Response.GetResponseHeader());
proxSocket.Send(context.Response.Body);
// Step4:即时关闭Socket连接
proxSocket.Shutdown(SocketShutdown.Both);
proxSocket.Close();
}
}
在监听线程中,通过HttpApplication类对象调用其ProcessRequest方法进行具体的处理。最重要的,处理完毕后立即通过Socket发送响应信息,并及时关闭Socket连接。
3.2 设计HttpConext类封装HttpRequest与HttpResponse
(1)HttpContext
public class HttpContext
{
public HttpRequest Request { get; set; }
public HttpResponse Response { get; set; } public HttpContext(string requestText)
{
Request = new HttpRequest(requestText);
Response = new HttpResponse();
}
}
(2)HttpRequest
public class HttpRequest
{
public HttpRequest(string requestText)
{
string[] lines = requestText.Replace("\r\n", "\r").Split('\r');
string[] requestLines = lines[].Split(' ');
// 获取HTTP请求方式、请求的URL地址、HTTP协议版本
HttpMethod = requestLines[];
Url = requestLines[];
HttpVersion = requestLines[];
}
// 请求方式:GET or POST?
public string HttpMethod { get; set; }
// 请求URL
public string Url { get; set; }
// Http协议版本
public string HttpVersion { get; set; }
// 请求头
public Dictionary<string, string> HeaderDictionary { get; set; }
// 请求体
public Dictionary<string, string> BodyDictionary { get; set; }
}
(3)HttpResponse
public class HttpResponse
{
// 响应状态码
public string StateCode { get; set; }
// 响应状态描述
public string StateDescription { get; set; }
// 响应内容类型
public string ContentType { get; set; }
//响应报文的正文内容
public byte[] Body { get; set; } // 生成响应头信息
public byte[] GetResponseHeader()
{
string strRequestHeader = string.Format(@"HTTP/1.1 {0} {1}
Content-Type: {2}
Accept-Ranges: bytes
Server: Microsoft-IIS/7.5
X-Powered-By: ASP.NET
Date: {3}
Content-Length: {4} ", StateCode, StateDescription, ContentType, string.Format("{0:R}", DateTime.Now), Body.Length); return Encoding.UTF8.GetBytes(strRequestHeader);
}
}
这里需要注意的是在HttpResponse类中,为了生成响应头信息,需要格式化一个固定格式的信息,并且在最后保留两个CRLF(即换行符)作为头部结束标志,可以看看下面的格式说明:
3.3 设计IHttpHandler接口
public interface IHttpHandler
{
void ProcessRequest(HttpContext context);
}
仿照ASP.NET内部实现,我们也设计一个IHttpHandler接口,只定义了一个方法:ProcessRequest;
3.4 设计实现IHttpHandler接口的HttpApplication类
public class HttpApplication : IHttpHandler
{
// 对请求上下文进行处理
public void ProcessRequest(HttpContext context)
{
// 1.获取网站根路径
string bastPath = AppDomain.CurrentDomain.BaseDirectory;
string fileName = Path.Combine(bastPath+"\\MyWebSite", context.Request.Url.TrimStart('/'));
string fileExtension = Path.GetExtension(context.Request.Url);
// 2.处理动态文件请求
if(fileExtension.Equals(".aspx") || fileExtension.Equals(".ashx"))
{
string className = Path.GetFileNameWithoutExtension(context.Request.Url);
IHttpHandler handler = Assembly.Load("MyWebServer").CreateInstance("MyWebServer.Page." + className) as IHttpHandler;
handler.ProcessRequest(context); return;
}
// 3.处理静态文件请求
if (!File.Exists(fileName))
{
context.Response.StateCode = "";
context.Response.StateDescription = "Not Found";
context.Response.ContentType = "text/html";
string notExistHtml = Path.Combine(bastPath, @"MyWebSite\notfound.html");
context.Response.Body = File.ReadAllBytes(notExistHtml);
}
else
{
context.Response.StateCode = "";
context.Response.StateDescription = "OK";
context.Response.ContentType = GetContenType(Path.GetExtension(context.Request.Url));
context.Response.Body = File.ReadAllBytes(fileName);
}
} // 根据文件扩展名获取内容类型
public string GetContenType(string fileExtension)
{
string type = "text/html; charset=UTF-8";
switch (fileExtension)
{
case ".aspx":
case ".html":
case ".htm":
type = "text/html; charset=UTF-8";
break;
case ".png":
type = "image/png";
break;
case ".gif":
type = "image/gif";
break;
case ".jpg":
case ".jpeg":
type = "image/jpeg";
break;
case ".css":
type = "text/css";
break;
case ".js":
type = "application/x-javascript";
break;
default:
type = "text/plain; charset=gbk";
break;
}
return type;
}
}
这里,我们封装一个抽象的HttpApplication类,它实现了IHttpHandler接口,对一般的请求做一个通用的处理操作。如果是静态文件请求,则直接读取文件并生成响应流,如果是动态文件请求,则通过反射方式生成对应的Page对象实例,将HttpContext对象传入其ProcessRequest方法中进行处理,最后的响应内容都封装到了HttpConext中的HttpResponse对象的Body属性中。
3.5 设计实现IHttpHandler接口的模拟Page类
public class DemoPage : IHttpHandler
{
public void ProcessRequest(HttpContext context)
{
StringBuilder sbText = new StringBuilder();
sbText.Append("<html>");
sbText.Append("<head><meta http-equiv='Content-Type' content='text/html; charset=utf-8'/><title>DemoPage</title></head>");
sbText.Append("<body style='margin:10px auto;text-align:center;'>");
sbText.Append("<h1>用户信息列表</h1>");
sbText.Append("<table align='center' cellpadding='1' cellspacing='1'><thead><tr><td>ID</td><td>用户名</td></tr></thead>");
sbText.Append("<tbody>");
sbText.Append(GetDataList());
sbText.Append("</tbody></table>");
sbText.Append(string.Format("<h3>更新时间:{0}</h3>", DateTime.Now.ToString()));
sbText.Append("</body>");
sbText.Append("</html>"); context.Response.Body = Encoding.UTF8.GetBytes(sbText.ToString());
context.Response.StateCode = "";
context.Response.ContentType = "text/html";
context.Response.StateDescription = "OK";
} private string GetDataList()
{
StringBuilder sbData = new StringBuilder();
string strConn = System.Configuration.ConfigurationManager.ConnectionStrings["MyConn"].ToString();
using (SqlConnection conn = new SqlConnection(strConn))
{
conn.Open();
using (SqlCommand cmd = conn.CreateCommand())
{
cmd.CommandText = "SELECT * FROM UserInfo";
using(SqlDataAdapter adapter = new SqlDataAdapter(cmd))
{
DataTable dt = new DataTable();
adapter.Fill(dt); if(dt != null)
{
foreach (DataRow row in dt.Rows)
{
sbData.Append("<tr>");
sbData.Append(string.Format("<td>{0}</td>",row["ID"].ToString()));
sbData.Append(string.Format("<td>{0}</td>", row["UserName"].ToString()));
sbData.Append("</tr>");
}
}
}
}
} return sbData.ToString();
}
}
这里我们模拟一个Page页面类,它也实现了IHttpHandler接口,在ProcessRequest方法通过ADO.NET访问了数据库并读取数据作为输出内容。这里,我们主要是通过分析ASP.NET WebForm中的aspx对象,它虽然直接继承的类是Page类,但是Page类却是实现了IHttpHandler接口的。在具体的处理方法中,都是通过调用这个接口的ProcessRequest方法进行处理的。
四、个人开发小结
4.1 开发效果展示
(1)开启监听服务
(2)请求静态页面
(3)请求动态页面
4.2 开发实战总结
本次模拟的一个超级简单的Web服务器软件,实现了静态文件和动态文件(通过模拟aspx页面对象)的处理和响应。但是,还有很多的功能并未实现,因为一个真正的Web服务器需要考虑的东西很多很多,例如:多线程的处理优化、高效的IO模型等。不过,对于一个最基本的Web服务器所需要了解的最基本的原理:Socket的监听和连接、基于TCP协议的HTTP协议、动态文件类的反射与调用等,模拟开发本次的DEMO的过程是可以达到的。
附件下载
MyWebServer v1.0:http://pan.baidu.com/s/1mgtC1HA