您现在的位置: 365建站网 > 365学习 > .NET/C#中Web代理服务器WebProxy的使用方法

.NET/C#中Web代理服务器WebProxy的使用方法

文章来源:365jz.com     点击数:614    更新时间:2017-12-02 13:54   参与评论

WebRequest和WebProxy类的文档写的相当复杂,不但各个文档关注点不同,而且不同版本的同一文档也有小小的区别。

 

对于需要使用WebProxy类的情况,大致分如下几种:
1、创建WebRequest的时候,没有刻意设置代理(默认情况)
2、使用Internet Explorer代理
3、使用应用程序配置文件中的代理
4、不使用代理
5、使用.NET框架默认设置的代理
6、使用WPAD配置脚本自动设置的代理
7、使用IE+应用程序配置文件的混合代理
8、使用IE代理但禁用自动代理检测(WPAD)


怎么样,很混乱吧。当然上面这些很多都是重复的,不过基本已经涵盖了所有可能遇到的情况,下面让我来一个一个说说:


1、默认情况下的代理设置
当创建一个新的HTTP请求时(WebRequest.Create方法),得到的HttpWebRequest类会自动初始化它的Proxy属性,那么这个属性的默认值是什么呢?MSDN中说:


 如果配置文件中未指定代理并且未指定 Proxy 属性,则 HttpWebRequest 类使用从本地计算机上的 Internet Explorer 中继承的代理设置。 如果 Internet Explorer 中没有代理设置,请求会直接发送到服务器。 


这段话中,说到Proxy属性使用的其实就是默认代理,这个默认代理默认来自于IE,如果IE没有设置代理,那么就会直接连接到目标服务器。为什么要说“默认代理默认来自于IE”呢?因为这个“默认来自于IE”也是可以修改的,通过修改WebProxy.DefaultWebProxy属性,你可以控制每次新建请求时所使用的默认代理:


DefaultWebProxy 属性从 app.config 文件中读取代理服务器设置。 如果没有配置文件,则使用当前用户的 Internet Explorer (IE) 代理设置。
如果 DefaultWebProxy 属性设置为 null,则使用 Create 或 CreateDefault 方法创建的 WebRequest 类的所有后续实例都没有代理。
这里需要注意的是,如果DefaultWebProxy设置为null,并不意味着WebRequest的Proxy属性也是null,这两个null表示的意义不同。




2、使用IE代理,但不使用任何动态设置
最简单的方法是将Proxy属性设置为WebProxy.GetDefaultProxy,GetDefaultProxy会读取当前计算机上的IE代理设置,同时忽略掉所有动态设置的内容:
GetDefaultProxy 方法读取 Internet Explorer 5.5 和更高版本存储的非动态代理设置并使用这些设置创建 WebProxy 实例。
GetDefaultProxy 方法不获取从 Internet Explorer 运行的脚本、从自动配置项或者从 DHCP 或 DNS 查找生成的任何动态设置。
但是这个API已经过时,所以现在我推荐的方法是:将Proxy属性设置为null:
http://msdn.microsoft.com/zh-cn/library/fze2ytx2(v=vs.80).aspx




3、使用IE代理,同时使用各种动态配置项
这个是比较简单的了,当然这种情况还是会包含两种小的情况:
(1)使用app.config中的配置:将Proxy属性设置为 WebProxy.DefaultWebProxy 
(2)不使用app.config中的配置:将Proxy属性设置为 WebRequest.GetSystemWebProxy()
GetSystemWebProxy 方法读取当前用户的 Internet Explorer (IE) 代理设置。 此进程包括 IE 选项来自动检测代理设置,请使用自动配置脚本、手动代理服务器设置和高级手动代理服务器设置。 




4、不使用任何代理
不使用任何代理的方法是:创建一个WebProxy类的新实例:
默认构造函数通过将 Address 属性设置为 null 来初始化 WebProxy 类的空实例。
Address 属性为 null 时,IsBypassed 方法返回 true,且 GetProxy 方法返回目标地址。
另外再来看看Address属性的说明:
Address 属性包含代理服务器的地址。 如果未启用自动代理检测并且未指定自动配置脚本,则 Address 属性与 BypassList 共同确定用于请求的代理。
当 Address 属性为 null 时,请求回避此代理并且直接连接到目标主机。
综上所述,也就是说,当使用无参构造函数创建一个新的WebProxy对象时(req.Proxy = new WebProxy();),这个请求会绕过所有代理服务器直接连接目标服务器。




5、其他
关于如何设置app.config/machine.config配置文件中的代理设置:
<defaultProxy>元素:http://msdn.microsoft.com/zh-cn/library/kd3cf2ex
<proxy>元素:http://msdn.microsoft.com/zh-cn/library/sa91de1e(v=vs.100).aspx

 代理服务程序是一种广泛使用的网络应用程序。代理程序的种类非常多,根据协议不同可以分成HTTP代理服务程序、FTP代理服务程序等,而运行代理服务程序的服务器也就相应称为HTTP代理服务器和FTP代理服务器。本文将介绍用C#的Web代理服务程序代理的是HTTP协议。

  一、网络代理程序的优点

  代理服务所起的是一个桥的作用,它是网络信息的中转站。在网络中应用代理服务一般是基于以下几个原因:

  (1)充分利用IP地址资源。在局域网中,一般对外的IP地址都是非常有限的,为了保证局域网内部的主机都能够访问互联网资源,通过网络代理就可以实现。

  (2)能够保证网络安全。网络代理可以充当内部网和互联网之间的防火墙,通过过滤IP地址,限定某些IP地址对外部资源的访问。

  (3)能够有效地隐藏自己的IP地址和主机名。由于所有对外网的请求都是通过代理服务器实现的,所以目的主机只能知道代理服务器的IP地址。

  (4)提高网络速度。通常代理服务器都设有一个较大的硬盘缓冲区,它存储界数据,当你再访问相同的数据时,则可以直接从缓冲区中取出信息,从而提高访问速度。

  二、网络代理的类型及实现原理

  网络代理服务根据工作层次,一般可分为应用层代理、传输层代理和SOCKS代理。应用层代理是工作在TCP/IP参考模型的应用层之上,它支持对应用层协议(如HTTP、FTP)的代理。它提供的控制最多,但是不灵活,必须要有相应的协议支持。如果协议不支持代理(如SMTP和POP),那就只能在应用层以下代理,也即传输层代理。

  传输层代理直接与TCP层交互,更加灵活。要求代理服务器具有部分真正服务器的功能:监听特定TCP或UDP端口,接收客户端的请求同时向客户端发出相应的响应。另一种代理需要改变客户端的IP栈,即SOCKS代理。它是可用的最强大、最灵活的代理标准协议。SOCK V4允许代理服务器内部的客户端完全地连接到外部的服务器,SOCK V5增加了对客户端的授权和认证,因此它是一种安全性较高的代理。本节后面介绍的代理是一种应用层上面的代理,所代理的协议是HTTP,也就是经常见到的Web代理服务器。

  正如上面所说,网络代理就是一个连接客户端(需要代理的计算机)和服务器端(提供访问资源的服务器)的桥。要实现这种桥的功能,网络代理就必须满足下列条件,其实也是代理服务的运行的流程:

  (1)接收并解析客户端的请求。

  (2)创建到服务器的新连接,并转发客户端的请求信息。

  (3)接收服务器反馈的信息。

  (4)解释服务器的响应并将该响应传回给客户端。

  网络代理虽然有很多优点,但由于使用代理后,自己对网络的所有请求都是通过代理服务器这个中间人来实现的,所以有可能碰上存有恶意的人监听你的输入的内容。同样,如果选择的代理服务器的带宽比较小,使用代理还会降低网速。

  总而言之,使用代理有利有弊,使用者要根据自身的情况来决定。但无论如何,选择一个好的代理服务器是非常重要的。

  三、C#实现Web代理服务器程序

  经过了上面的介绍,我想大家对代理服务应该有了一个基本的认识,下面就让我们通过一个实例来深入体会一下如何用C#实现Web代理服务器。Web代理服务的功能顺序是这样的:

  (1)侦听端口,等待客户端浏览器发送来的Web请求信息。

  (2)接收到客户端Web请求信息后,解析出目标Web服务器的地址,并创建一个Socket实例,并以此实例连接Web服务器上。

  (3)通过创建的Socket传送客户端的Web请求数据包到Web服务器的80端口。

  (4)接收Web服务器返回的页面数据。

  (5)把接收来的数据传送到客户端,从而实现Web代理。

  客户端对某个Web地址的浏览,可能要传送很多的Web请求信息(比如网页中的图像、Flash等),为了更快更准确地处理这些信息,Web代理服务程序通常采用多线程来处理每一个Web请求。细心的读者可能会发现,处理每一个客户端的Web请求信息,代理服务器软件都要使用二个Socket,一个是用来接收/传送客户机的信息,一个是和Web服务器进行交流。为了区分这二个Socket,我们把和服务器对话的称为“服务Socket”,和客户端机器对话的称为“客户Socket”。

  下面就开始C#实现Web代理服务器的编写工作。这个实例包含三个部分内容:

  1.创建一个Web代理类。

  2.Web代理服务的类的实例化。

  3.如何通过这个Web代理类的实例实现Web代理服务。

  (一)创建一个Web代理类

  具体操作步骤如下:

  1.启动Visual Studio.Net,依次选择“文件”、“新建”、“项目”菜单后,在弹出“新建项目”对话框中将“项目类型”设置为“Visual C#项目”,将“模板”设置为“Windows应用程序”,在“名称”文本框中输入“WebProxy”,在“位置”文本框中输入“E:VS.NET项目”,然后单击“确定”按钮,这样项目便建立好了。

  2.依次选择菜单“项目”、“添加类”,将弹出“添加新项”对话框。

  3.将“模板”设置为“类”。

  4.在“名称”文本框中输入“Proxy”,单击“打开”按钮

  5.在“解决方案资源管理器”窗口中,双击Proxy.cs文件,进入Proxy.cs文件的编辑界

  6.在Proxy.cs源文件的开头,添加下列代码,下列代码是导入Proxy.cs中要使用到的命名空间:

  
  using System;  
  using System.Net;  
  using System.Net.Sockets;  
  using System.Text;  
  using System.IO; 

  7.用下列构造函数替代默认的构造函数。下面的代码是在Proxy类中创建一个构造函数。Proxy类只有一个构造函数,并且这个构造函数只有一个参数,这个参数是Socket对象,它主要用来和客户端进行数据交换,是一个“客户Socket”:

  
  public Proxy(Socket socket)  
  {  
  //  
  // TODO: 在此处添加构造函数逻辑  
  //  
  this.clientSocket = socket ;  
  } 

  8.在定义Proxy类代码区中加入下列代码,下列代码是定义Proxy类中的使用的一些变量,这些变量主要是在后面的定义Run方法中使用。

  
  Socket clientSocket;  
  Byte[] read = new byte[1024];  
  //定义一个空间,存储来自客户端请求数据包  
  Byte [] Buffer = null;  
  Encoding ASCII = Encoding.ASCII;  
  //设定编码  
  Byte[] RecvBytes = new Byte[4096];  
  //定义一个空间,存储Web服务器返回的数据 

  9.创建Proxy类中的Run方法。Run方法是Proxy类中唯一的方法。其功能是从客户端接收HTTP请求,并传送到Web服务器,然后从Web服务器接收反馈来的数据,并传送到客户端。为了实现这二个不同方面的数据传送,Run方法中是通过两个Socket实例来实现的。在编写Run方法的时候,要注意下面两点:

  (1)由于HTTP建立于TCP协议之上,所以创建的Socket实例应该使用TCP协议。下面代码是创建可以传送HTTP请求命令到Web服务器和接收来自Web服务器反馈来信息的Socket实例:

  
  Socket IPsocket = new Socket(AddressFamily.InterNetwork, SocketType.Stream, ProtocolType.Tcp); 

  (2)另外一个Socket是在代理服务程序侦听端口号,接收连接请求时候得到的,所以应该以此Socket为参数,利用Proxy类中的构造函数来创建一个Proxy实例。此Socket实现从客户端接收HTTP请求信息,并传送数据到客户端。

  Socket创建和使用是实现Web代理软件的关键。在构造函数代码后面,输入下列代码:
  

  
  public void Run()  
  {  
  string clientmessage = " " ;  
  //存放来自客户端的HTTP请求字符串  
  string URL = " " ;  
  //存放解析出地址请求信息  
  int bytes = ReadMessage(read, ref clientSocket, ref clientmessage);  
  if (bytes == 0)  
  {  
  return ;  
  }  
  int index1 = clientmessage.IndexOf(' ');  
  int index2 = clientmessage.IndexOf(' ', index1 + 1);  
  if ((index1 == -1) || (index2 == -1))  
  {  
  throw new IOException();  
  }  
  string part1 = clientmessage.Substring(index1 + 1, index2 - index1);  
  int index3 = part1.IndexOf('/', index1 + 8);  
  int index4 = part1.IndexOf(' ', index1 + 8);  
  int index5 = index4 - index3;  
  URL = part1.Substring(index1 + 4, (part1.Length - index5) - 8);   
  try  
  {  
  IPHostEntry IPHost = Dns.Resolve(URL);  
  Console.WriteLine("远程主机名: " + IPHost.HostName);  
  string [] aliases = IPHost.Aliases;  
  IPAddress[] address = IPHost.AddressList;  
  Console.WriteLine("Web服务器IP地址:" + address[0]);  
  //解析出要访问的服务器地址  
  IPEndPoint ipEndpoint = new IPEndPoint(address[0], 80);  
  Socket IPsocket = new Socket(AddressFamily.InterNetwork, SocketType.Stream, ProtocolType.Tcp);  
  //创建连接Web服务器端的Socket对象  
  IPsocket.Connect(ipEndpoint);  
  //Socket连Web接服务器  
  if (IPsocket.Connected)  
  Console.WriteLine("Socket 正确连接!");  
  string GET = clientmessage;  
  Byte[] ByteGet = ASCII.GetBytes(GET);  
  IPsocket.Send(ByteGet, ByteGet.Length, 0);  
  //代理访问软件对服务器端传送HTTP请求命令  
  Int32 rBytes = IPsocket.Receive(RecvBytes, RecvBytes.Length, 0);  
  //代理访问软件接收来自Web服务器端的反馈信息  
  Console.WriteLine("接收字节数:" + rBytes.ToString());  
  String strRetPage = null;  
  strRetPagestrRetPage = strRetPage + ASCII.GetString(RecvBytes, 0, rBytes);  
  while (rBytes > 0)  
  {  
  rBytes = IPsocket.Receive(RecvBytes, RecvBytes.Length, 0);  
  strRetPagestrRetPage = strRetPage + ASCII.GetString(RecvBytes, 0, rBytes);  
  }  
  IPsocket.Shutdown(SocketShutdown.Both);  
  IPsocket.Close();  
  SendMessage(clientSocket, strRetPage);  
  //代理服务软件往客户端传送接收到的信息  
  }  
  catch (Exception exc2)  
  } 
  //接收客户端的HTTP请求数据
  private int ReadMessage(byte [] ByteArray, ref Socket s, ref String clientmessage)
  {
  int bytes = s.Receive(ByteArray, 1024, 0);
  string messagefromclient = Encoding.ASCII.GetString(ByteArray);
  clientmessage = (String)messagefromclient;
  return bytes;
  }
  //传送从Web服务器反馈的数据到客户端
  private void SendMessage(Socket s, string message)
  {
  Buffer = new Byte[message.Length + 1];
  int length = ASCII.GetBytes(message, 0, message.Length, Buffer, 0);
  Console.WriteLine("传送字节数:" + length.ToString());
  s.Send(Buffer, length, 0);
  }

  至此,Proxy类的定义过程就完成了。

  (二)利用Proxy类,实现Web代理

  下面是利用Proxy类实现Web代理程序的具体实现步骤,Proxy类被定义在命名空间WebProxy中:

  1.在Visual Studio .Net的代码编辑器中打开Class1.cs文件,进入Class1.cs的代码编辑界面。

  2.在Class1.cs源文件的开头导入下列命名空间:

  
  using System;  
  using System.Net;  
  using System.Net.Sockets;  
  using System.Text;  
  using System.IO;  
  using System.Threading;  
  using WebProxy; 

  3.在Main函数中添加下列代码,下列代码是利用Proxy类,来实现Web代理程序:

  
  const int port = 8000 ;  
  //定义端口号  
  TcpListener tcplistener = new TcpListener(port);  
  Console.WriteLine("侦听端口号: " + port.ToString());  
  tcplistener.Start();  
  //侦听端口号  
  while (true)  
  {  
  Socket socket = tcplistener.AcceptSocket();  
  //并获取传送和接收数据的Scoket实例  
  Proxy proxy = new Proxy(socket);  
  //Proxy类实例化  
  Thread thread = new Thread(new ThreadStart(proxy.Run));  
  //创建线程  
  thread.Start();  
  //启动线程  
  } 

  保存上面的所有步骤,这样一个简单Web代理程序就算是完成了。此Web代理程序侦听的是8000端口号。

  (三)测试Web代码程序

  Web代理程序要通过二台计算机才能够实现,其中的一台计算机运行Web代理程序充当Web代理服务器,另外一台计算机充当客户机,通过Web代理服务器来浏览网页。在确定Web代理软件运行后,需要对客户机进行进行必要的设置:

  1.打开IE浏览器。

  2.依次选择“工具”、“Internet选项”,在弹出的“Internet选项”对话框中选择“连接”页面,单击其中的“局域网设置”按钮,在弹出的“局域网(LAN)设置”对话框,选择“为LAN使用代理服务器(X),(这些设置不会应用于拨号和VPN连接)”多选框,并在其中的“地址”文本框中输入代理服务器的IP地址,比如“10.138.198.213”,在“端口”文本框中输入“8000”。

  此时客户端的设置就完成了。在确定IP地址为“10.138.198.213”的这台计算机已经运行上面介绍的Web代理程序后,打开客户端的IE浏览器,并输入要浏览的网址,就可以通过Web代理服务器来浏览网页了。

  四、C#实现Web代理服务器总结

  至此一个简单的C#实现Web代理服务器软件就算基本完成了。虽然Web代理服务器的实现原理相对简单,但具体实现还是很繁琐的。网络代理是一个内容丰富,实现复杂的论题,本节介绍的代理服务软件,无论在实现的协议种类,还是实现的功能,都只能算很小的一部分。希望各位能够通过本文的介绍,结合其他相关的知识,创造出功能更强大、安全性更高,使用更稳定的网络代理服务程序来。

C#中给WebClient添加代理Proxy
 

效果图:

using System; 
using System.Collections.Generic; 
using System.ComponentModel; 
using System.Data; 
using System.Drawing; 
using System.Linq; 
using System.Net; 
using System.Text; 
using System.Windows.Forms; 
 
namespace TestProxy 

    public partial class MainForm : Form 
    { 
        public MainForm() 
        { 
            InitializeComponent(); 
        } 
 
        private void btnDownload_Click(object sender, EventArgs e) 
        { 
            try 
            { 
                Start(); 
            } 
            catch (Exception ex) 
            { 
                MessageBox.Show(ex.Message); 
            } 
        } 
 
        private void Start() 
        { 
            txtResult.Clear(); 
            var client = new WebClient(); 
            var uri = new Uri(txtUrl.Text.Trim()); 
            client.DownloadStringCompleted += client_DownloadStringCompleted; 
            client.Encoding = Encoding.UTF8; 
 
            if (checkBox.Checked) 
            { 
                var proxy = CreateProxy(); 
                if (proxy == null) return; 
                client.Proxy = proxy; 
            } 
            client.DownloadStringAsync(uri); 
        } 
 
        private void client_DownloadStringCompleted(object sender, DownloadStringCompletedEventArgs e) 
        { 
            try 
            { 
                txtResult.Text = e.Result; 
            } 
            catch (Exception ex) 
            { 
                var msg = ex.Message; 
                if (ex.InnerException != null) msg = ex.InnerException.Message; 
                MessageBox.Show(msg); 
            } 
        } 
 
        private void checkBox_CheckedChanged(object sender, EventArgs e) 
        { 
            gbProxy.Enabled = checkBox.Checked; 
        } 
 
        private WebProxy CreateProxy() 
        { 
            var host = txtHost.Text.Trim(); 
            if (string.IsNullOrWhiteSpace(host)) 
            { 
                MessageBox.Show("请输入代理地址"); 
                return null; 
            } 
            var port = 0; 
            try 
            { 
                port = Convert.ToInt32(txtPort.Text.Trim()); 
            } 
            catch (Exception) 
            { 
                MessageBox.Show("请输入正确的代理端口"); 
                return null; 
            } 
            var cre = new NetworkCredential(txtUserName.Text, txtPwd.Text); 
            var proxy = new WebProxy(txtHost.Text.Trim(), port) {Credentials = cre}; 
            return proxy; 
        } 
    } 
}



一个webproxy代理类:

using System;
using System.Net;
using log4net;

namespace Witty
{
    public static class WebProxyHelper
    {
        private static Properties.Settings AppSettings = Properties.Settings.Default;
        private static readonly ILog logger = LogManager.GetLogger("Witty.Logging");

        public static IWebProxy GetConfiguredWebProxy()
        {
            WebProxy proxy = null;
            if (AppSettings.UseProxy)
            {
                try
                {
                    proxy = new WebProxy(AppSettings.ProxyServer, AppSettings.ProxyPort);
                    proxy.Credentials = new NetworkCredential(AppSettings.ProxyUsername, AppSettings.ProxyPassword);
                }
                catch (UriFormatException ex)
                {
                    logger.Debug(ex.ToString());
                }
            }
            return proxy;
        }
    }
}

如对本文有疑问,请提交到交流论坛,广大热心网友会为你解答!! 点击进入论坛


发表评论 (614人查看0条评论)
请自觉遵守互联网相关的政策法规,严禁发布色情、暴力、反动的言论。
用户名: 验证码: 点击我更换图片
最新评论
------分隔线----------------------------