HttpClient 4 实现文件下载

使⽤HttpClient实现⽂件的上传下载⽅法1 HTTPHTTP 协议可能是现在 Internet 上使⽤得最多、最重要的协议了，越来越多的 Java 应⽤程序需要直接通过 HTTP 协议来访问⽹络资源。

虽然在 JDK 的 包中已经提供了访问 HTTP 协议的基本功能，但是对于⼤部分应⽤程序来说，JDK 库本⾝提供的功能还不够丰富和灵活。

HttpClient ⽤来提供⾼效的、最新的、功能丰富的⽀持 HTTP 协议的客户端编程⼯具包，并且它⽀持HTTP 协议最新的版本和建议。

⼀般的情况下我们都是使⽤Chrome或者其他浏览器来访问⼀个WEB服务器，⽤来浏览页⾯查看信息或者提交⼀些数据、⽂件上传下载等等。

所访问的这些页⾯有的仅仅是⼀些普通的页⾯，有的需要⽤户登录后⽅可使⽤，或者需要认证以及是⼀些通过加密⽅式传输，例如HTTPS。

⽬前我们使⽤的浏览器处理这些情况都不会构成问题。

但是⼀旦我们有需求不通过浏览器来访问服务器的资源呢？那该怎么办呢？下⾯以本地客户端发起⽂件的上传、下载为例做个⼩Demo。

HttpClient有两种形式，⼀种是org.apache.http下的，⼀种是mons.httpclient.HttpClient。

2 ⽂件上传⽂件上传可以使⽤两种⽅式实现，⼀种是PostMethod⽅式，⼀种是HttpPost⽅式。

两者的处理⼤同⼩异。

PostMethod是使⽤FileBody将⽂件包装流包装起来，HttpPost是使⽤FilePart将⽂件流包装起来。

在传递⽂件流给服务端的时候，都可以同时传递其他的参数。

2.1 客户端处理2.1.1 PostMethod⽅式将⽂件封装到FilePart中，放⼊Part数组，同时，其他参数可以放⼊StringPart中，这⾥没有写，只是单纯的将参数以setParameter的⽅式进⾏设置。

此处的HttpClient是mons.httpclient.HttpClient。

实现HTTP⽂件下载
HTTP实现⽂件下载时，只要在服务器设置好相关响应头，并使⽤⼆进制传输⽂件数据即可，⽽客户端(浏览器)会根据响应头接收⽂件数据。

⽽在Node.js中，设置好响应头后，读取⽂件流，再使⽤“.pipe()”⽅法将流转接到响应对象Response就可以实现⼀个简单的⽂件下载服务器。

1. ⽂件下载介绍
HTTP基于请求头和响应头实现状态交互，在得到服务器正确响应状态后，⽽客户端⾸先会解析响应头，并根据响应头来接收和展⽰数据（响应体）。

对于⽂件下载来说，其实现过程如下：
1.客户端发起⽂件资源请求
2.服务器查找对应⽂件，并设置”Content-Type”、”Content-Disposition”等响应头，分别⽤于表⽰⽂件的”MIME”类型及⽂件描述
3.客户端根据服务器返回的响应头解析和接收⽂件数据
需要设置的响应头
设置⽂件下载响应头时，除了常⽤的HTTP响应头外，⽐较重要是还要设置以下两个响应头：
1 2Content-Type: application/octet-stream
Content-Disposition: attachment; filename=MyFileName.ext
在上⾯的设置中，”Content-Type: application/octet-stream”告诉浏览器这是⼀个⼆进制⽂件，”Content-Disposition”告诉浏览器这是⼀个需要下载的附件并告诉浏览器默认的⽂件名。

如果不添加”Content-Disposition”响应头，浏览器可能会下载或显⽰⽂件内容，不同浏览器的处理有所不同。

http协议下载⽂件1. 通过在 URL 上调⽤ openConnection ⽅法创建连接对象。

（HttpURLConnection conn = (HttpURLConnection)new URL("⽹址").openConnection();）2. 处理设置参数和⼀般请求属性。

（conn.setRequestProperty()）3. 使⽤ connect ⽅法建⽴到远程对象的实际连接。

（conn.connect()）4. 远程对象变为可⽤。

远程对象的头字段和内容变为可访问。

(conn.getHeaderField(),conn.getInputStream等⽅法对连接进⾏操作)下⾯是对⽂件下载的具体实现案例（单线程）：HttpURLConnection conn = (HttpURLConnection)new URL("资源⽹址").openConnection();conn.connect();InputStream is = connection.getInputStream();FileOutputStream os = new FileOutputStream("保存路径");int count = 1024;if(connection.getResponseCode()==200){while ((count = is.read(b))!=-1) {os.write(b,0,count);}os.close();is.close();}多线程要设置的头⽂件：connection.setRequestProperty("Range", "bytes=0-4194304");/*有个疑惑：代码这样写的话，出现⽂件下载不全。

while (count==1024) {count = is.read(b)os.write(b,0,count);}*/。

Struts2 结合HttpClient 实现远程服务器文件下载1、只实现远程文件下载未处理远程服务器连接失败的状态1.1、页面配置部分<button id="download" class="button" onclick="window.location.href = 'downlo adExample.action';return false;">下载模板</button><s:submit id="importButton" value="上传文件" theme="simple" cssClass="butto n"></s:submit><s:reset value="重置路径" theme="simple" cssClass="button" ></s:reset> 1.2、Struts2配置文件部分<!--下载模板--><action name="downloadExample" class="com.web.action.file.ImportAction "><param name="downFileName">文件下载.xls</param><result name="success" type="stream"><param name="contentType">application/vnd.ms-excel</param><param name="contentDisposition">attachment;filename="${downl oadName}"</param><param name="inputName">downloadFile</param><param name="bufferSize">4096</param></result></action>1.3、Action层中获取远程服务器文件流程序部分public class ImportAction{private String downFileName;private String downloadName;IFileServicefileService;/*** @paramfileService the fileService to set*/public void setEztFileService(IFileServicefileService) {this.fileService = fileService;}/*** @return the downFileName*/public String getDownFileName() {return downFileName;}/*** @paramdownFileName the downFileName to set*/public void setDownFileName(String downFileName) {this.downFileName = downFileName;}/*** @return the downloadName*/public String getDownloadName() {return downloadName;}/*** @paramdownloadName the downloadName to set*/public void setDownloadName(String downloadName) {this.downloadName = downloadName;}public InputStreamgetDownloadFile(){downloadName = fileService.getDownloadFileName(downFileName); //下载文件显示名称转编码Properties properties = ResourceUtil.getProperties("file.properties");//取得远程服务器信息配置属性文件file.properties文件为自定义文件放置在web项目src/conf文件夹下String strRemoteFileUrl = properties.getProperty("serverPath")+ propertie s.getProperty("templateName"); //取得远程文件路径InputStream in = fileService.getDownloadFile(strRemoteFileUrl); //调用S ervice层方法取得远程服务器文件流return in;}}1.4、Service层接口实现public class FileService implements IFileService {public String getDownloadFileName(String downFileName) { //解决下载文件名称中文乱码问题try {downFileName = new String(downFileName.getBytes(), "ISO-8859-1 ");} catch (UnsupportedEncodingException e) {e.printStackTrace();}return downFileName;}publicInputStreamgetDownloadFile(String strRemoteFileUrl) {// TODO Auto-generated method stubHttpClient client = new HttpClient();GetMethodhttpGet = new GetMethod(strRemoteFileUrl);InputStream in = null;try {intintResponseCode = client.executeMethod(httpGet);in = httpGet.getResponseBodyAsStream();} catch (HttpException e) {// TODO Auto-generated catch block//记录日志} catch (IOException e) {// TODO Auto-generated catch block//记录日志}return in;}}1.5、读取properties文件工具类部分public class ResourceUtil {public static Properties getProperties(String fileName) {try {Properties properties = new Properties();ClassLoader cl = Thread.currentThread().getContextClassLoader();properties.load(cl.getResourceAsStream(fileName));return properties;} catch (Exception ex) {ex.printStackTrace();}return null;}}1.6、总结：此项实现，在文件服务器运行正常的情况下文件下载正常，如果文件服务器运行异常或已停止运行则在jsp页面部分将会抛出异常。

ApacheHttpClient4使⽤教程基于HttpClient 4.5.21. 执⾏GET请求CloseableHttpClient httpClient = HttpClients.custom().build();CloseableHttpResponse response = httpClient.execute(new HttpGet("https://"));System.out.println(EntityUtils.toString(response.getEntity()));2. 执⾏POST请求1. 提交form表单参数CloseableHttpClient httpClient = HttpClients.custom().build();HttpPost httpPost = new HttpPost("https://");List<NameValuePair> formParams = new ArrayList<NameValuePair>();//表单参数formParams.add(new BasicNameValuePair("name1", "value1"));formParams.add(new BasicNameValuePair("name2", "value2"));UrlEncodedFormEntity entity = new UrlEncodedFormEntity(formParams, "utf-8");httpPost.setEntity(entity);CloseableHttpResponse response = httpClient.execute(httpPost);System.out.println(EntityUtils.toString(response.getEntity()));2. 提交payload参数CloseableHttpClient httpClient = HttpClients.custom().build();HttpPost httpPost = new HttpPost("https://");StringEntity entity = new StringEntity("{\"id\": \"1\"}");httpPost.setEntity(entity);CloseableHttpResponse response = httpClient.execute(httpPost);System.out.println(EntityUtils.toString(response.getEntity()));3. post上传⽂件CloseableHttpClient httpClient = HttpClients.custom().build();HttpPost httpPost = new HttpPost("https://");MultipartEntityBuilder multipartEntityBuilder = MultipartEntityBuilder.create();//要上传的⽂件multipartEntityBuilder.addBinaryBody("file", new File("temp.txt"));httpPost.setEntity(multipartEntityBuilder.build());CloseableHttpResponse response = httpClient.execute(httpPost);System.out.println(EntityUtils.toString(response.getEntity()));4. post提交multipart/form-data类型参数CloseableHttpClient httpClient = HttpClients.custom().build();HttpPost httpPost = new HttpPost("https://");MultipartEntityBuilder multipartEntityBuilder = MultipartEntityBuilder.create();multipartEntityBuilder.addTextBody("username","wycm");multipartEntityBuilder.addTextBody("passowrd","123");//⽂件multipartEntityBuilder.addBinaryBody("file", new File("temp.txt"));httpPost.setEntity(multipartEntityBuilder.build());CloseableHttpResponse response = httpClient.execute(httpPost);System.out.println(EntityUtils.toString(response.getEntity()));3. 设置User-AgentCloseableHttpClient httpClient = HttpClients.custom().setUserAgent("Mozilla/5.0").build();CloseableHttpResponse response = httpClient.execute(new HttpGet("https://"));System.out.println(EntityUtils.toString(response.getEntity()));4. 设置重试处理器当请求超时, 会⾃动重试，最多3次HttpRequestRetryHandler retryHandler = (exception, executionCount, context) -> {if (executionCount >= 3) {return false;}if (exception instanceof InterruptedIOException) {return true;}if (exception instanceof UnknownHostException) {return true;}if (exception instanceof ConnectTimeoutException) {return true;}if (exception instanceof SSLException) {return true;}HttpClientContext clientContext = HttpClientContext.adapt(context);HttpRequest request = clientContext.getRequest();boolean idempotent = !(request instanceof HttpEntityEnclosingRequest);if (idempotent) {return true;}return false;};CloseableHttpClient httpClient = HttpClients.custom().setRetryHandler(retryHandler).build();httpClient.execute(new HttpGet("https://"));5. 重定向策略1. HttpClient默认情况会对302、307的GET和HEAD请求以及所有的303状态码做重定向处理2. 关闭⾃动重定向CloseableHttpClient httpClient = HttpClients.custom()//关闭httpclient重定向.disableRedirectHandling().build();3. POST⽀持302状态码重定向CloseableHttpClient httpClient = HttpClients.custom()//post 302⽀持重定向.setRedirectStrategy(new LaxRedirectStrategy()).build();CloseableHttpResponse response = httpClient.execute(new HttpPost("https://"));System.out.println(EntityUtils.toString(response.getEntity()));6. 定制cookie⽅式⼀：通过addHeader⽅式设置（不推荐这种⽅式）CloseableHttpClient httpClient = HttpClients.custom().build();HttpGet httpGet = new HttpGet("");httpGet.addHeader("Cookie", "name=value");httpClient.execute(httpGet);由于HttpClient默认会维护cookie状态。

java下载功能Java是一种跨平台的编程语言，能够在各种操作系统上运行，因此非常适合用于开发具有下载功能的应用程序。

Java提供了丰富的API和库，使开发者能够轻松地实现下载功能。

下面是一些常用的Java下载功能的实现方式：1. 使用URLConnection类来进行下载：URLConnection类是Java提供的用于网络连接的类，可以通过该类来实现下载。

使用URLConnection的步骤包括创建URL对象、打开连接、获取输入流、创建输出流、将数据从输入流写入输出流等。

2. 使用HttpClient库来进行下载：HttpClient是一个功能强大的开源HTTP客户端库，可以用于发送HTTP请求并处理HTTP响应。

通过使用HttpClient库，可以实现更为复杂的下载功能，例如断点续传、多线程下载等。

3. 使用多线程来进行下载：在下载大文件时，为了加快下载速度，可以使用多线程来并行下载。

通过将文件分成多个部分，每个部分由一个线程负责下载，可以同时下载多个部分，提高下载速度。

4. 使用下载管理器来进行下载：下载管理器是一种用于管理下载任务的工具，可以对下载任务进行管理和控制，例如暂停、取消、进度监控等。

Java提供了一些第三方库，如Downpour 和Download4j，可以用于实现下载管理器。

5. 使用流式处理来进行下载：在Java中，可以使用流式处理来处理大文件的下载。

通过使用BufferedInputStream和BufferedOutputStream，可以将下载的文件分块读取并写入本地文件，避免一次性读取整个文件导致内存溢出。

总之，Java提供了多种方式来实现下载功能，开发者可以根据需求选择合适的方法来实现。

通过合理利用Java的API和库，能够实现高效、安全的下载功能，并提供给用户优质的下载体验。

Http服务器实现文件上传与下载(一)一、引言大家都知道web编程的协议就是http协议，称为超文本传输协议。

在J2EE中我们可以很快的实现一个Web工程，但在C++中就不是非常的迅速，原因无非就是底层的socket网络编写需要自己完成，上层的http协议需要我们自己完成，用户接口需要我们自己完成，如何高效和设计一个框架都是非常困难的一件事情。

但这些事情Java已经在底层为我们封装好了，而我们仅仅只是在做业务层上的事情吧了。

在本Http服务器实现中，利用C++库和socket原套接字编程和pthread线程编写。

拒绝使用第三方库。

因为主要是让大家知道基本的实现方式，除去一些安全、高效等特性，但是不管怎么样，第三方商业库的基本原理还是一致的，只是他们对其进行了优化而已。

在开始的编写时，我不会全部的简介Http的协议的内容，这样太枯燥了，我仅仅解释一些下面需要用到的协议字段。

在写本文的时候，之前也有些迷惑，C++到底能干啥，到网上一搜，无非就是能开发游戏，嵌入式编程，写服务器等等。

接着如果问如何编写一个服务器的话，那么这些网络水人又会告诉你，你先把基础学好，看看什么书，之后你就知道了，我只能呵呵了，在无目的的学习中，尽管看了你也不知道如何写的，因为尽管你知道一些大概，但是没有一个人领导你入门，我们还是无法编写一个我们自己想要的东西，我写这篇博客主要是做一个小小的敲门砖吧，尽管网上有许多博客，关于如何编写HTTP服务器的，但是要不是第三方库acl，要么就是短短的几行代码，要么就是加入了微软的一些C#内容或者MFC，这些在我看来只是一些无关紧要的东西，加入后或许界面上你很舒服，但是大大增加了我们的学习成本，因为这些界面上的代码改变了我们所知道的程序流程走向，还有一些界面代码和核心代码的混合，非常不利于学习。

二、HTTP协议在大家在浏览器的url输入栏上输入http://10.1.18.4/doing时。

Http服务器实现⽂件上传与下载（五）⼀、引⾔欢迎⼤家和我⼀起编写Http服务器实现⽂件的上传和下载，现在我回顾⼀下在上⼀章节中提到的⼀些内容，之前我已经提到过⽂件的下载，在⽂件的下载中也提到了⽂件的续下载只需要在响应头中填写Content-Range这⼀字段，并且服务器的⽂件指针指向读取的指定位置开始读取传输。

在这⼀章节中我讲讲解⽂件的上传这⼀功能，讲完这⼀章节，⼤致的功能也全部完成，接着就是上⾯⽂件控制模块和⼀些资源模块。

在⽂件的上传中主要以HttpRequest类为主，在考虑⽂件的上传时我⼀点迷惑，到底把⽂件的上传功能是放到HttpResponse下还是在HttpRequest下，毕竟HttpResponse中有⼀些相应的⽂件下载功能，在添加⼀个⽂件上传功能也不为过。

但是我最终还是选择在HttpRequest中，原因是我主要是HttpResponse作为是服务器到浏览器发送内容，⽽HttpRequest作为浏览器到服务器发送内容。

这样下载和上传的功能就分别坐落在了HttpResponse和HttpRequest上了。

在完成功能上的归属问题后，接着直接上代码，在⽂件的上传中，涉及到C++流。

在这⾥其实⽤到不是很多的内容，但是这却是C++⼀个重要的⼀⼤块内容。

有时间和⼤家在⼀起复习这⼀块内容。

好了，接着上代码咯，上⼀章的内容有设计⼀些HttpRequest的代码，没有全部的包括进去。

⼆、HttpRequest头⽂件(include/httprequest.h)1 #ifndef HTTPREQUEST_H2#define HTTPREQUEST_H3 #include "socket.h"4 #include <map>5 #include <string>6 #include <fstream>7namespace Http{8class HttpRequest{9public:10 HttpRequest(TCP::Socket &c);11virtual ~HttpRequest();12 std::string getMethod() const;13 std::string getUrl() const;14 std::string getHost() const;15 std::map<std::string,std::string> getHeader(int confd) ;16 ssize_t upload(int confd,std::string filename);17protected:18private:19 std::string method;20 std::string url;21 std::string host;22 TCP::Socket &s;23 };24 }25#endif// HTTPREQUEST_H源⽂件(src/httprequest.cpp)1 #include "httprequest.h"2 #include "utils.h"3namespace Http{4 HttpRequest::HttpRequest(TCP::Socket &c):s(c){5 }67 HttpRequest::~HttpRequest(){8 }9 std::map<std::string,std::string> HttpRequest::getHeader(int confd){10char recvBuf[1024];11 memset(recvBuf,0,sizeof(recvBuf));12 s.server_read(confd,recvBuf,1024);13 std::cout<<recvBuf<<std::endl;14 std::map<std::string,std::string> mp =Utils::parseHeader(recvBuf);15 method =mp["Method"];16 url=mp["Url"];17 host=mp["Host"];18return mp;19 }20 ssize_t HttpRequest::upload(int confd,std::string filename){21char buf[1024];22 size_t n=0;23 ssize_t nread=0;24 std::string boundary;25 std::string file;26 std::ofstream outStream;27int readlineCount=1;28while(1){29 memset(buf,0,sizeof(buf));30 n=s.server_readline(confd,buf,sizeof(buf));31if(readlineCount==1){32 boundary=std::string(buf,buf+strlen(buf)-2);33 boundary+="--\r\n";34 std::cout<<boundary<<std::endl<<boundary.size();35 }else if(readlineCount==2){36int i=n;37while(buf[i]!='='){38if((buf[i]>='0'&&buf[i]<='9')39 ||(buf[i]>='a'&&buf[i]<='z')40 ||(buf[i]>='A'&&buf[i]<='Z')41 ||(buf[i]=='.'))42 i--;43else{44 buf[i]='*';45 i--;46 }47 }48 file=std::string(buf+i+2,buf+n-3);49 }else if(readlineCount==3){50 std::string rw;51 rw=std::string(buf,buf+strlen(buf));52int pos=rw.find('/');53 rw=rw.substr(0,pos);54 filename=filename+file;55if(rw=="Content-Type: text")56 outStream.open(filename.c_str());57else{58 outStream.open(filename.c_str(),std::ios::binary);59 std::cout<<"ios::binary"<<std::endl;60 }61 }else if(readlineCount==4){62 memset(buf,0,sizeof(buf));63while(1){64 n=s.server_readn(confd,buf,sizeof(buf));65if(n==boundary.size()&&strcmp(buf,boundary.c_str())==0){66goto exit;67 }68 nread+=n;69if(buf[n-1]==0){70 outStream.write(buf,n-1);71 }else{72 outStream.write(buf,n);73 }74 }75 }76 readlineCount++;77 }78 exit:79 outStream.close();80 s.server_close(confd);81return nread;82 }83 std::string HttpRequest::getMethod() const{84return method;85 }86 std::string HttpRequest::getUrl() const{87return url;88 }89 std::string HttpRequest::getHost() const{90return host;91 }92 }好了上传⽂件的代码也已经出来了，现在就是对其稍微的解释⼀下把。