关于http代理服务器源码的信息

本文目录一览：

• 1、什么是http代理服务器
• 2、dotnet 实现对http访问的请求及应答，最好能自定义端口号，不用webservice
• 3、C++实现http简易代理服务器
• 4、如何开发自己的httpserver-nanohttpd源码解读
• 5、如何编写一个简单的HTTP代理服务器，最好提供VB源码
• 6、想用java编写个代理服务器，求具体一些思路，详细一些，谢谢

什么是http代理服务器

我们可以将巨大的互联网比作成一张网络蜘蛛网，而网络爬虫便是在蜘蛛网上爬行的蜘蛛，把网的节点描述成为网页，我们将每日任务需求借助客户端电脑发出命令，而ip便是被执行的角色，ip带着每日任务借助因特网抵达终端服务器寻找客户端交代的每日任务，一个一个节点便是一个一个网页，如此蜘蛛借助一个节点之后，就可以沿着几点连线继续爬行抵达下个节点。也就说借助一个网页继续抓取。

爬虫首要便是要抓取终端服务器的网页，也就是抓取到网页的源代码，源代码包中抓取到实用的信息，就将实用的源代码获取，提取每日任务中所需的信息。

ip将抓取到实用的信息回到到客户端存储，随后再返回去，不断频繁的访问获得信息直到完成任务。因此ip便是负责带着每日任务寻找有价值的信息，随后将抓取到的有价值的信息数据负责带回(传输)到客户端，直到完成任务。

dotnet 实现对http访问的请求及应答，最好能自定义端口号，不用webservice

HTTP协议我想任何IT人士都耳熟能详了，大家都能说出个所以然来。但是如果我问你HTTP协议的请求方法有哪些？POST与GET的差异？GET或POST传送数据量的大小有限制吗？HTTP响应的状态有哪些？以及在C#中你如何使用？如果你不能清楚地回答其中的大部分问题，那么这篇文章就是为你准备的！大纲如下：

1、HTTP概述

1.1、HTTP协议的客户端与服务器的交互

1.2、HTTP消息

1.3、HTTP请求的方法

1.4、HTTP响应的代码

2、抓包分析

3、POST与GET的差异

4、以一个实例说明C#中如何使用POST、GET等操作

4.1、HttpWebRequest

4.2、HttpWebResponse

4.3、编写WinForm程序打开博客园首页（附源码）

1、HTTP概述

为了唤醒你对HTTP协议的记忆或使你能够对HTTP协议有所了解，首先简单一下HTTP协议。超文本传输协议（HTTP，HyperText Transfer Protocol）是互联网上应用最为广泛的一种网络协议。所有的WWW文件都必须遵守这个标准。设计HTTP最初的目的是为了提供一种发布和接收HTML页面的方法。

HTTP的发展是万维网协会（World Wide Web Consortium）和Internet工作小组（Internet Engineering Task Force）合作的结果，（他们）最终发布了一系列的RFC，其中最著名的就是RFC 2616。RFC 2616定义了HTTP协议中一个现今被广泛使用的版本——HTTP 1.1。

1.1、HTTP协议的客户端与服务器的交互

HTTP是一个客户端和服务器端请求和应答的标准（TCP）。客户端是终端用户，服务器端是网站。通过使用Web浏览器、网络爬虫或者其它的工具，客户端发起一个到服务器上指定端口（默认端口为80）的HTTP请求。（我们称这个客户端）调用户代理（user agent）。应答的服务器上存储着（一些）资源，比如HTML文件和图像。（我们称）这个应答服务器为源服务器（origin server）。在用户代理和源服务器中间可能存在多个中间层，比如代理，网关，或者隧道（tunnel）。尽管TCP/IP协议是互联网上最流行的应用，HTTP协议并没有规定必须使用它和（基于）它支持的层。事实上，HTTP可以在任何其他互联网协议上，或者在其他网络上实现。HTTP只假定（其下层协议提供）可靠的传输，任何能够提供这种保证的协议都可以被其使用。

通常，由HTTP客户端发起一个请求，建立一个到服务器指定端口（默认是80端口）的TCP连接。HTTP服务器则在那个端口监听客户端发送过来的请求。一旦收到请求，服务器（向客户端）发回一个状态行，比如"HTTP/1.1 200 OK"，和（响应的）消息，消息的消息体可能是请求的文件、错误消息、或者其它一些信息。

HTTP使用TCP而不是UDP的原因在于（打开一个）一个网页必须传送很多数据，而TCP协议提供传输控制，按顺序组织数据，和错误纠正。通过HTTP或者HTTPS协议请求的资源由统一资源标识符（Uniform Resource Identifiers，或者，更准确一些，URI）来标识。

客户端与服务器端的结构与交互过程可以表示为下面2张图：

图1、Web客户端-服务器端结构（其中web服务器的超文本链接，即通过网站上的一个链接跳转到了其他服务器上）

图2、Web客户端与服务器端的交互

1.2、HTTP消息

客户端与服务器之间的交互用到了两种类型的消息：请求（Request）和响应（Response）。

HTTP请求的格式为：

  图3、HTTP请求的格式

HTTP响应的格式为：

图4、HTTP响应的格式

从上面可以看出HTTP的请求和响应消息的首部均包含可变数量的字段，用一个空行（blank line）将所有首部字段（header）与消息主体（body）分隔开来。一个首部字段由字段名和随后的冒号、一个空格和字段值组成，字段名不区分大小写。

报文头可分为三类：一类应用于请求，一类应用于响应，还有一类描述主体。有一些报文头（例如：Date）既可用于请求又可用于响应。描述主体的报文头可以出现在POST请求和所有响应报文中。HTTP的首部字段如下图所示：

图5、HTTP首部字段

1.3、HTTP请求的方法

HTTP/1.1协议中共定义了八种方法（有时也叫“动作”）来表明Request-URI指定的资源的不同操作方式：

OPTIONS 

返回服务器针对特定资源所支持的HTTP请求方法。也可以利用向Web服务器发送'*'的请求来测试服务器的功能性。

HEAD 

向服务器索要与GET请求相一致的响应，只不过响应体将不会被返回。这一方法可以在不必传输整个响应内容的情况下，就可以获取包含在响应消息头中的元信息。

GET 

向特定的资源发出请求。注意：GET方法不应当被用于产生“副作用”的操作中，例如在Web Application中。其中一个原因是GET可能会被网络蜘蛛等随意访问。

POST 

向指定资源提交数据进行处理请求（例如提交表单或者上传文件）。数据被包含在请求体中。POST请求可能会导致新的资源的建立和/或已有资源的修改。

PUT 

向指定资源位置上传其最新内容。

DELETE 

请求服务器删除Request-URI所标识的资源。

TRACE 

回显服务器收到的请求，主要用于测试或诊断。

CONNECT 

HTTP/1.1协议中预留给能够将连接改为管道方式的代理服务器。

方法名称是区分大小写的。当某个请求所针对的资源不支持对应的请求方法的时候，服务器应当返回状态码405（Method Not Allowed）；当服务器不认识或者不支持对应的请求方法的时候，应当返回状态码501（Not Implemented）。

HTTP服务器至少应该实现GET和HEAD方法，其他方法都是可选的。此外，除了上述方法，特定的HTTP服务器还能够扩展自定义的方法。

安全方法

开发者应当意识到他们的软件代表了用户在因特网上进行交互，并且应当告知用户，他们正在进行的操作可能对他们自身或者其他人有未曾预料的重要影响。

特别地，对于GET和HEAD方法而言，除了进行获取资源信息外，这些请求不应当再有任何其他意义。也就是说，这些方法应当被认为是“安全的”，即所谓安全的意味着该操作用于获取信息而非修改信息。客户端应当使用其他“非安全”方法，例如POST、PUT及DELETE来以特殊的方式（通常是按钮而不是超链接）使得客户能够意识到可能要负的责任（例如一个按钮带来的资金交易）或者被告知正在请求的操作可能是不安全的（例如某个文件将被上传或删除）。

但是，不能想当然地认为服务器不会在处理某个GET请求时不会产生任何副作用。事实上，很多动态资源会把这作为其特性。这里重要的区别在于用户并没有请求这一副作用，因此不应由用户为这些副作用承担责任。

幂等方法

假如在不考虑诸如错误或者过期等问题的情况下，若干次请求的副作用与单次请求相同或者根本没有副作用，那么这些请求方法就能够被视作“幂等”的。GET，HEAD，PUT和DELETE方法都有这样的幂等属性，同样由于根据协议，OPTIONS，TRACE都不应有副作用，因此也理所当然也是幂等的。

假如某个由若干个请求做成的请求串行产生的结果在重复执行这个请求串行或者其中任何一个或多个请求后仍没有发生变化，则这个请求串行便是“幂等” 的。但是，可能出现若干个请求做成的请求串行是“非幂等”的，即使这个请求串行中所有执行的请求方法都是幂等的。例如，这个请求串行的结果依赖于某个会在下次执行这个串行的过程中被修改的变量。

1.4、HTTP响应的代码

 服务器程序响应的第一行叫状态行。状态行以HTTP版本号开始，后面跟着3位数字表示响应代码，最后是易读的响应短语。根据第一位可以把响应分成5类：

图6、HTTP响应代码

2、抓包分析

现在我们对HTTP基本上算是了解了，下面我用wireshark抓取打开博客园首页时，我的电脑与博客园服务器的交互过程的HTTP数据包。做好准备工作，关闭一些可能干扰我们抓取打开博客园的相关程序。如下图，我们在浏览器中输入并确定时，首先抓到如下包：

  图7、打开博客园抓取的包

从图中可以看出，我们在浏览器中输入并确定时是向服务器发送了一个HTTP请求消息：GET  /  HTTP/1.1。根据1.2中介绍的HTTP消息的格式，我们知道GET对应request、/对应request-line、HTTP/1.1对应版本号。除了请求行之外，发送了一些首部字段，如：Accept、Accept-Language、User-Agent、Accept-Encoding、Host、Connection等。而且可以看出他们的格式就是：首部字段名: 字段值，注意冒号后面有个空格。

接下来我们看一下GET  /  HTTP/1.1请求的响应消息是怎样的：

图8、GET  /  HTTP/1.1请求的响应消息

响应消息的状态行是：HTTP/1.1  200  OK，其中HTTP/1.1对应版本号、200对应response-code、OK对应response-phrase。除了状态行，还返回了一些首部字段，如：Cache-Control、Content-Type、Content-Encoding、Expires、Last-Modified、Vary、Server等等。（通过上图我们可以看出，博客用的是IIS7.0）

上面抓的是GET的数据包，现在我来看一个POST的数据包——打开博客园首页过程中获取左边的分类信息就是通过POST请求返回的。

图9、POST数据包

我们可以看到，POST /ws/PublicUserService.asmx/GetLoginInfo HTTP/1.1。除了把GET换成了POST之外，其它信息差不多。下面我们放大看下发送的首部字段：

图10、POST /ws/PublicUserService.asmx/GetLoginInfo HTTP/1.1的首部字段

NOTE：本节涉及的一些首部字段我就不在这里解释了。我想，到了这里大家对HTTP的认识应该更深入了一步。

3、POST与GET的差异

1.3中介绍了8种方法，其中GET与POST最基本和常用了。表单提交中get和post方式的区别归纳如下几点：

GET是从服务器上获取数据，POST是向服务器传送数据。

GET是把参数数据队列加到提交表单的ACTION属性所指的URL中，值和表单内各个字段一一对应，在URL中可以看到。POST是通过HTTP POST机制，将表单内各个字段与其内容放置在HTML HEADER内一起传送到ACTION属性所指的URL地址。用户看不到这个过程。

对于GET方式，服务器端用Request.QueryString获取变量的值，对于POST方式，服务器端用Request.Form获取提交的数据。

GET传送的数据量较小，不能大于2KB（这主要是因为受URL长度限制）。POST传送的数据量较大，一般被默认为不受限制。但理论上，限制取决于服务器的处理能力。

GET安全性较低，POST安全性较高。因为GET在传输过程，数据被放在请求的URL中，而如今现有的很多服务器、代理服务器或者用户代理都会将请求URL记录到日志文件中，然后放在某个地方，这样就可能会有一些隐私的信息被第三方看到。另外，用户也可以在浏览器上直接看到提交的数据，一些系统内部消息将会一同显示在用户面前。POST的所有操作对用户来说都是不可见的。

在FORM提交的时候，如果不指定Method，则默认为GET请求（.net默认是POST），Form中提交的数据将会附加在url之后，以?分开与url分开。字母数字字符原样发送，但空格转换为“+”号，其它符号转换为%XX,其中XX为该符号以16进制表示的ASCII（或ISO Latin-1）值。GET请求请提交的数据放置在HTTP请求协议头中，而POST提交的数据则放在实体数据中；GET方式提交的数据最多只能有2048字节，而POST则没有此限制。POST传递的参数在doc里，也就http协议所传递的文本，接受时再解析参数部分。获得参数。一般用POST比较好。POST提交数据是隐式的，GET是通过在url里面传递的，用来传递一些不需要保密的数据，GET是通过在URL里传递参数，POST不是。

说明：关于“POST与GET的差异”查考了网上前辈的资料，由于找不出源头，到处都是转帖，这里就不贴出相关网址了，baidu或Google下就知道了。

4、以一个实例说明C#中如何使用POST、GET等操作

在介绍实例之前，我们要先介绍一下HttpWebRequest和HttpWebResponse，在C#中就是用这两个类实现客户端向服务器端发送HTTP消息、客户端接受服务器端的HTTP响应。

4.1、HttpWebRequest

在设计实现实例之前我们首先要介绍一下HttpWebRequest这个类——提供WebRequest 类的HTTP 特定的实现，HttpWebRequest类对WebRequest中定义的属性和方法提供支持，也对使用户能够直接与使用 HTTP 的服务器交互的附加属性和方法提供支持。

不要使用HttpWebRequest 构造函数。使用System.Net.WebRequest.Create 方法初始化新的HttpWebRequest对象。如果统一资源标识符 (URI) 的方案是 http:// 或 https://，则 Create返回HttpWebRequest对象。

HTTP消息的首部字段（headers），在HttpWebRequest中表示为公开的属性。下表列出了由属性或方法设置或由系统设置的 HTTP 标头。

如果本地计算机配置指定使用代理，或者如果请求指定代理，则使用代理发送请求。如果未指定代理，则请求发送到服务器。

HttpWebRequest类主要包括如下方法，用于与HTTP服务器交互：

Abort： 取消对 Internet 资源的请求。

AddRange： 向请求添加范围标头。

BeginGetRequestStream：开始对用来写入数据的 Stream 对象的异步请求。

BeginGetResponse：开始对Internet 资源的异步请求。

Create：初始化新的 WebRequest。（从WebRequest 继承。）

CreateDefault：为指定的 URI 方案初始化新的 WebRequest 实例。（从WebRequest 继承。）

CreateObjRef：创建一个对象，该对象包含生成用于与远程对象进行通信的代理所需的全部相关信息。 （从MarshalByRefObject 继承。）

EndGetRequestStream：结束对用于写入数据的 Stream 对象的异步请求。

EndGetResponse：结束对 Internet 资源的异步请求。

GetRequestStream：获取用于写入请求数据的 Stream 对象。

GetResponse：返回来自 Internet 资源的响应。

GetSystemWebProxy：返回当前模拟用户的 Internet Explorer 设置中配置的代理。（从 WebRequest继承。）

InitializeLifetimeService：获取控制此实例的生存期策略的生存期服务对象。 （从 MarshalByRefObject继承。）

RegisterPrefix：为指定的URI 注册WebRequest 子代。（从WebRequest 继承。）

4.2、HttpWebResponse

在设计实现实例之前我们还要介绍一下HttpWebRequest这个类——提供WebResponse 类的HTTP 特定的实现。此类包含对WebResponse类中的属性和方法的 HTTP 特定用法的支持。HttpWebResponse类用于生成发送HTTP请求和接收HTTP响应的HTTP独立客户端应用程序。

注意

不要混淆 HttpWebResponse 和 HttpResponse 类；后者用于 asp.NET 应用程序，而且它的方法和属性是通过 ASP.NET 的内部 Response 对象公开的。

决不要直接创建HttpWebResponse类的实例。而应当使用通过调用 HttpWebRequest.GetResponse 所返回的实例。您必须调用 Stream.Close 方法或 HttpWebResponse.Close 方法来关闭响应并将连接释放出来供重用。不必同时调用 Stream.Close 和 HttpWebResponse.Close，但这样做不会导致错误。

从 Internet 资源返回的公共标头信息公开为该类的属性。有关完整的列表，请参见下表。可以从 Headers 属性以名称/值对的形式读取其他标头。下表显示可以通过HttpWebResponse类的属性使用的公共 HTTP 标头。

通过调用GetResponseStream方法，以Stream的形式返回来自 Internet 资源的响应的内容。

HttpWebRequest类主要包括如下方法与HTTP服务器交互：（与HttpWebRequest类相比，方法较少）

CreateObjRef：创建一个对象，该对象包含生成用于与远程对象进行通信的代理所需的全部相关信息。（从MarshalByRefObject 继承。）

GetLifetimeService：检索控制此实例的生存期策略的当前生存期服务对象。（从MarshalByRefObject继承。）

GetResponseHeader：获取与响应一起返回的标头的内容。

GetResponseStream：获取流，该流用于读取来自服务器的响应的体。

InitializeLifetimeService：获取控制此实例的生存期策略的生存期服务对象。（从 MarshalByRefObject继承。）

4.3、编写WinForm程序打开博客园首页（附源码）

通过前面两小节的介绍，我们对HttpWebRequest类和HttpWebRequest类有所了解，现在我们就应用它们来编写一个小程序来实践。程序界面大概如下：

功能也比较简单，就是通过点击“在WebBrowser中显示”按钮就在下方的 WebBrowser控件中显示博客园首页，通过点击查看“html源码”按钮就弹出一个对话框显示博客园首页的html源码。

首先我们介绍如何实现——通过点击查看“html源码”按钮就弹出一个对话框显示博客园首页的html源码。核心代码如下：

private string GetCnBlogs() 

        { 

            string html = String.Empty;             

            HttpWebRequest cnbogs = (HttpWebRequest)System.Net.WebRequest.Create(txtURL.Text.ToString()); 

            cnbogs.Accept = "image/jpeg, application/x-ms-application, image/gif, application/xaml+xml, image/pjpeg, application/x-ms-xbap, application/x-shockwave-flash, application/vnd.ms-excel, application/vnd.ms-powerpoint, application/msword, application/QVOD, application/QVOD, */*"; 

            cnbogs.UserAgent = "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 6.1; Trident/4.0; SLCC2; .NET CLR 2.0.50727; .NET CLR 3.5.30729; .NET CLR 3.0.30729; MALN; CIBA; InfoPath.2; .NET4.0C; .NET4.0E; Media Center PC 6.0; Tablet PC 2.0; AskTB5.6)"; 

            cnbogs.Method = "GET"; 

            HttpWebResponse cnblogsRespone = (HttpWebResponse)cnbogs.GetResponse(); 

            if (cnblogsRespone != nullcnblogsRespone.StatusCode==HttpStatusCode.OK) 

            { 

                using(StreamReader sr = new StreamReader(cnblogsRespone.GetResponseStream()))   

                { 

                    html = sr.ReadToEnd(); 

                } 

            } 

            return html; 

        } 

        private void btnGetHtml_Click(object sender, EventArgs e) 

        { 

            MessageBox.Show(GetCnBlogs());             

        } 

通过点击查看“html源码”按钮就弹出一个对话框显示博客园首页的html源码

其实这个过程更我们通过在浏览器中输入博客园网站打开效果是一样的，只不过在这里我们是通过HttpWebRequest类和HttpWebRequest类的对象来实现的。

然而，通过点击“在WebBrowser中显示”按钮就在下方的 WebBrowser控件中显示博客园首页的功能类似，只不过是在WebBrowser控件中显示且我这里把一些常用的HTTP相关的操作封装到一个命名空间Helper中，便于以后使用，本质跟上面的是一样的。点击下载整个项目的源码。

我这个源码还是比较简陋，只是简单地实现了使用HttpWebRequest类和HttpWebRequest类与HTTP服务器交互，更完善的功能期待你去完成。

补充说明：关于url的长度限制问题，IE的url最长可以传 2083 字符（半角），而GET最多只能到2048字符。但是RFC 2616，Hypertext Transfer Protocol -- HTTP/1.1，并没有对url的最大长度做限制。 

本文来自网学()，转载请注明出处：

C++实现http简易代理服务器

我正在做与你同样的工作，我选择了mongoose,一款开源的http服务器。

这是它的网站，可以下载源码，并且协议非常自由。

有不明白之处可以联系我。我正在基于mongoose进行开发。

=========================================

源码在这里可以下载到，

我也只是一个c程序员，不太会网络编程。但用mongoose的确非常简单，因为就是c++写的，你应该看起来不费劲。

如何开发自己的httpserver-nanohttpd源码解读

现在作为一个开发人员，http server相关的内容已经是无论如何都要了解的知识了。用curl发一个请求，配置一下apache，部署一个web server对我们来说都不是很难，但要想搞清楚这些背后都发生了什么技术细节还真不是很简单的。所以新的系列将是分享我学习Http Server的过程。

NanoHttpd是Github上的一个开源项目，号称只用一个java文件就能创建一个http server，我将通过分析NanoHttpd的源码解析如何开发自己的HttpServer。Github 地址：

在开始前首先简单说明HttpServer的基本要素：

1.能接受HttpRequest并返回HttpResponse

2.满足一个Server的基本特征，能够长时间运行

关于Http协议一般HttpServer都会声明支持Http协议的哪些特性，nanohttpd作为一个轻量级的httpserver只实现了最简单、最常用的功能，不过我们依然可以从中学习很多。

首先看下NanoHttpd类的start函数

[java] view plaincopy

public void start() throws IOException {

myServerSocket = new ServerSocket();

myServerSocket.bind((hostname != null) ? new InetSocketAddress(hostname, myPort) : new InetSocketAddress(myPort));

myThread = new Thread(new Runnable() {

@Override

public void run() {

do {

try {

final Socket finalAccept = myServerSocket.accept();

registerConnection(finalAccept);

finalAccept.setSoTimeout(SOCKET_READ_TIMEOUT);

final InputStream inputStream = finalAccept.getInputStream();

asyncRunner.exec(new Runnable() {

@Override

public void run() {

OutputStream outputStream = null;

try {

outputStream = finalAccept.getOutputStream();

TempFileManager tempFileManager = tempFileManagerFactory.create();

HTTPSession session = new HTTPSession(tempFileManager, inputStream, outputStream, finalAccept.getInetAddress());

while (!finalAccept.isClosed()) {

session.execute();

}

} catch (Exception e) {

// When the socket is closed by the client, we throw our own SocketException

// to break the "keep alive" loop above.

if (!(e instanceof SocketException "NanoHttpd Shutdown".equals(e.getMessage()))) {

e.printStackTrace();

}

} finally {

safeClose(outputStream);

safeClose(inputStream);

safeClose(finalAccept);

unRegisterConnection(finalAccept);

}

}

});

} catch (IOException e) {

}

} while (!myServerSocket.isClosed());

}

});

myThread.setDaemon(true);

myThread.setName("NanoHttpd Main Listener");

myThread.start();

}

1.创建ServerSocket，bind制定端口

2.创建主线程，主线程负责和client建立连接

3.建立连接后会生成一个runnable对象放入asyncRunner中，asyncRunner.exec会创建一个线程来处理新生成的连接。

4.新线程首先创建了一个HttpSession，然后while(true)的执行httpSession.exec。

这里介绍下HttpSession的概念，HttpSession是java里Session概念的实现，简单来说一个Session就是一次httpClient-httpServer的连接，当连接close后session就结束了，如果没结束则session会一直存在。这点从这里的代码也能看到：如果socket不close或者exec没有抛出异常（异常有可能是client段断开连接）session会一直执行exec方法。

一个HttpSession中存储了一次网络连接中server应该保存的信息，比如：URI，METHOD，PARAMS，HEADERS，COOKIES等。

5.这里accept一个client的socket就创建一个独立线程的server模型是ThreadServer模型，特点是一个connection就会创建一个thread，是比较简单、常见的socket server实现。缺点是在同时处理大量连接时线程切换需要消耗大量的资源，如果有兴趣可以了解更加高效的NIO实现方式。

当获得client的socket后自然要开始处理client发送的httprequest。

Http Request Header的parse：

[plain] view plaincopy

// Read the first 8192 bytes.

// The full header should fit in here.

// Apache's default header limit is 8KB.

// Do NOT assume that a single read will get the entire header at once!

byte[] buf = new byte[BUFSIZE];

splitbyte = 0;

rlen = 0;

{

int read = -1;

try {

read = inputStream.read(buf, 0, BUFSIZE);

} catch (Exception e) {

safeClose(inputStream);

safeClose(outputStream);

throw new SocketException("NanoHttpd Shutdown");

}

if (read == -1) {

// socket was been closed

safeClose(inputStream);

safeClose(outputStream);

throw new SocketException("NanoHttpd Shutdown");

}

while (read 0) {

rlen += read;

splitbyte = findHeaderEnd(buf, rlen);

if (splitbyte 0)

break;

read = inputStream.read(buf, rlen, BUFSIZE - rlen);

}

}

1.读取socket数据流的前8192个字节，因为http协议中头部最长为8192

2.通过findHeaderEnd函数找到header数据的截止位置，并把位置保存到splitbyte内。

[java] view plaincopy

if (splitbyte rlen) {

inputStream.unread(buf, splitbyte, rlen - splitbyte);

}

parms = new HashMapString, String();

if(null == headers) {

headers = new HashMapString, String();

}

1.http协议规定header和body之间使用两个回车换行分割

1.Http协议第一行是Method URI HTTP_VERSION

2.后面每行都是KEY:VALUE格式的header

3.uri需要经过URIDecode处理后才能使用

4.uri中如果包含？则表示有param，httprequest的param一般表现为:/index.jsp?username=xiaomingid=2

下面是处理cookie，不过这里cookie的实现较为简单，所以跳过。之后是serve方法，serve方法提供了用户自己实现httpserver具体逻辑的很好接口。在NanoHttpd中的serve方法实现了一个默认的简单处理功能。

[java] view plaincopy

发送response的步骤如下：

1.设置mimeType和Time等内容。

2.创建一个PrintWriter，按照HTTP协议依次开始写入内容

3.第一行是HTTP的返回码

4.然后是content-Type

5.然后是Date时间

6.之后是其他的HTTP Header

7.设置Keep-Alive的Header，Keep-Alive是Http1.1的新特性，作用是让客户端和服务器端之间保持一个长链接。

8.如果客户端指定了ChunkedEncoding则分块发送response，Chunked Encoding是Http1.1的又一新特性。一般在response的body比较大的时候使用，server端会首先发送response的HEADER，然后分块发送response的body，每个分块都由chunk length\r\n和chunk data\r\n组成，最后由一个0\r\n结束。

9.如果没指定ChunkedEncoding则需要指定Content-Length来让客户端指定response的body的size，然后再一直写body直到写完为止。

如何编写一个简单的HTTP代理服务器，最好提供VB源码

VERSION 5.00

Object = "{248DD890-BB45-11CF-9ABC-0080C7E7B78D}#1.0#0"; "MSWINSCK.OCX"

Begin VB.Form Form1

ClientHeight = 3090

ClientLeft = 60

ClientTop = 450

ClientWidth = 4680

LinkTopic = "Form1"

ScaleHeight = 3090

ScaleWidth = 4680

StartUpPosition = 3 '窗口缺省

Begin VB.ListBox List1

Height = 1500

Left = 120

TabIndex = 0

Top = 720

Width = 3615

End

Begin MSWinsockLib.Winsock SckGET

Index = 0

Left = 2520

Top = 360

_ExtentX = 741

_ExtentY = 741

_Version = 393216

End

Begin MSWinsockLib.Winsock Winsock1

Left = 2040

Top = 360

_ExtentX = 741

_ExtentY = 741

_Version = 393216

End

End

Attribute VB_Name = "Form1"

Attribute VB_GlobalNameSpace = False

Attribute VB_Creatable = False

Attribute VB_PredeclaredId = True

Attribute VB_Exposed = False

Dim PathName As String

Sub Begin()

'启动Winsock1,使用listen方法，听254端口

DoEvents

Winsock1.Close

Winsock1.Protocol = sckTCPProtocol

Winsock1.LocalPort = 254

Winsock1.Listen

End Sub

Private Sub Form_Load()

'开始进行十个监听

For i = 1 To 9

Load SckGET(i)

SckGET(i).Close

SckGET(i).Protocol = sckTCPProtocol

Next

PathName = "E:\http\" '初始化目录

Begin

End Sub

Private Sub SckGET_DataArrival(Index As Integer, ByVal bytesTotal As Long)

Dim DataReceived As String

Dim pos1 As Long, pos2 As Long

Dim QuestFile As String

Dim TData As Byte

pos1 = 0: pos2 = 0

SckGET(Index).GetData DataReceived, vbString

'处理报文

For i = 1 To Len(DataReceived)

If Mid(DataReceived, i, 1) = " " Then

If pos1 = 0 Then pos1 = i + 1 Else pos2 = i - 1: Exit For

End If

Next

'对请求的文件进行处理

On Error GoTo ExitThisSub

If pos1 0 And pos2 0 Then

QuestFile = Mid(DataReceived, pos1 + 1, pos2 - pos1) '得到主文件名

If QuestFile = "" Then QuestFile = "index.htm" '主页

QuestFile = PathName QuestFile '得到路径

List1.AddItem SckGET(Index).LocalIP " : GET " QuestFile " HTTP/1.1"

If Dir(QuestFile) = "" Then QuestFile = PathName "404.htm" '未找到

End If

'开始发送文件信息

Open QuestFile For Binary As #1

SckGET(Index).SendData "HTTP/1.0 200 OK" + vbCrLf

SckGET(Index).SendData "MIME_version:1.0" + vbCrLf

SckGET(Index).SendData "Content_Length:" + CStr(LOF(1)) + vbCrLf

SckGET(Index).SendData "" + vbCrLf

Do While Not EOF(1)

Get #1, , TData

SckGET(Index).SendData TData

Loop

ExitThisSub:

Close #1

Begin

SckGET(Index).Close

SckGET(Index).LocalPort = 254

End Sub

Private Sub Winsock1_ConnectionRequest(ByVal requestID As Long)

Con:

For i = 0 To 9

If SckGET(i).State 7 Then SckGET(i).Accept requestID: Exit For '查找未用的SCK

If i = 9 And SckGET(9).State 7 Then Delay (1): GoTo Con '如果没有则继续等待

Next

End Sub

Sub Delay(Seconds)

t = Timer

Delay: DoEvents

If Timer t + Seconds Then GoTo Delay

End Sub

想用java编写个代理服务器，求具体一些思路，详细一些，谢谢

在编写代理服务器之前，首先应该明白一点，Java的代理机制，如图所示：

那么Java就处于中间这层代理服务器，代理服务器所作的事情如下：

         1、接收客户端请求，进行处理，然后发送给服务端

         2、接收服务端响应，进行处理，然后发送给客户端

         这样，就更清晰了，Java提供了代理的API为，java.net.Proxy类。此类表示代理设置，通常为类型（http、socks）和套接字地址。Proxy 是不可变对象。

         也就是说Java可以制作高级协议的代理，如 HTTP 或 FTP。也可以制作SOCKS（V4 或 V5）代理。

         首先，使用到了URL类，HttpURLConnection类及其我们的代理类Proxy类。他们都位于java.net包中。

第一步：生成代理，指定端口为8888：

第二步：使用URLConnection类进行连接

第三步：打开URL，并且读取HTML源码