java利用socket 上传文件到webservice服务器

背景

因为业务上的需求,需要将数据传递给第三方,第三方以表单形式接收包含数据的文件,而我方数据存在数据库中,按常规做法,先把数据保存在本地文件,在利用http工具类上传,因为数据行数过多,文件io会大大影响效率,所以决定跳过文件io。

方案

因为HTTP属于应用层协议,所以可以在代码中拼装上传文件的HTTP报文,通过scoket打开TCP连接,写入报文。

过程

首先通过Wireshark抓取环回地址文件上传的HTTP报文:


http.png

然后参照图片中报文的样子拼装http

        bufferedWriter.write("POST " + path + " HTTP/1.1\r\n");
        bufferedWriter.write("Host: " + "127.0.0.1:8080" + "\r\n");
        bufferedWriter.write("content-type: multipart/form-data; boundary=--sugar963sugar\r\n");
        bufferedWriter.write("content-length: 10000\r\n");
        bufferedWriter.write("\r\n");
        bufferedWriter.write("----sugar963sugar\r\n");
        bufferedWriter.write("Content-Disposition: form-data; name=\"file\";filename=\"wx.txt\"\r\n");
        bufferedWriter.write("Content-type: text/plain\r\n\r\n");
        bufferedWriter.write("sdadadadadadada456555cuilvjjf645");
        bufferedWriter.write("\r\n----sugar963sugar--\r\n")

拼装好后利用socket请求获取服务器成功响应

但是这个报文有个问题,必须在上传前指定数据长度:content-length: 10000\r\n
当然,可以将这个长度设置成足够业务使用的长度,但为了能够比较通用,避免硬编码,需要换一种传输方式

通过Wireshark抓包发现,http有另外一种动态传输数据的方式:


E6D84http.png

继续照葫芦画瓢:

        bufferedWriter.write("POST " + path + " HTTP/1.1\r\n");
        bufferedWriter.write("Host: " + "127.0.0.1:8080" + "\r\n");
        bufferedWriter.write("content-type: multipart/form-data; boundary=--sugar963sugar\r\n");
        bufferedWriter.write("Transfer-Encoding: chunked\r\n");
        bufferedWriter.write("\r\n");
        bufferedWriter.write("6c\r\n");
        bufferedWriter.write("----sugar963sugar\r\n");
        bufferedWriter.write("Content-Disposition: form-data; name=\"fi\";filename=\"wx.txt\"\r\n");
        bufferedWriter.write("Content-type: text/plain\r\n\r\n\r\n");
        bufferedWriter.write("35\r\n");
        bufferedWriter.write("sdadadadadadada456555cuilvjjf645");
        bufferedWriter.write("\r\n----sugar963sugar--\r\n");
        bufferedWriter.write("0\r\n\r\n");

关键的头部信息:Transfer-Encoding: chunked 分块传输

利用socket发送依旧成功获得响应

自此开始编写工具类

结果

package com.example.demo.controller;

import javax.net.ssl.SSLSocketFactory;
import java.io.*;
import java.net.Socket;
import java.util.Arrays;


/**
 *
 * @author sugar
 *
 * Created by 2019/01/24
 *
 *
 * */

public class HttpStream {

    private Socket socket;
    private InputStream inputStream = null;
    private OutputStream outputStream = null;

    DataMeta dataMeta = DataMeta.FORM;
    RequestMothed requestMothed = RequestMothed.POST;

    public class Response {
        int status;
        String msg;
    }

    public enum RequestMothed {
        POST(1);
        int value;

        RequestMothed(int value) {
            this.value = value;
        }
    }

    public enum DataMeta {
        FORM(1);
        int value;

        DataMeta(int value) {
            this.value = value;
        }
    }


    public HttpStream(RequestMothed requestMothed, DataMeta dataMeta, String host, int port, boolean isSSL, String path) {
        this.dataMeta = dataMeta;
        this.requestMothed = requestMothed;
        try {
            if (isSSL) {
                //https请求
                socket = (SSLSocketFactory.getDefault()).createSocket(host, port);
                inputStream = socket.getInputStream();
                outputStream = socket.getOutputStream();
            } else {
                socket = new Socket(host, port);
                inputStream = socket.getInputStream();
                outputStream = socket.getOutputStream();
            }
            if (RequestMothed.POST == requestMothed) {
                outputStream.write(("POST " + path + " HTTP/1.1\r\n").getBytes());
                outputStream.write(("Host: " + host + ":" + port + "\r\n").getBytes());
                outputStream.write(("Connection: keep-alive\r\n").getBytes());
                if (DataMeta.FORM == dataMeta) {
                    outputStream.write(("content-type: multipart/form-data; boundary=--sugar963sugar\r\n").getBytes());
                    outputStream.write(("Transfer-Encoding: chunked\r\n").getBytes());
                    outputStream.write(("\r\n").getBytes());
                } else {
                    //其他数据提交方式
                }
            } else {
                //其他请求方式
            }
        } catch (IOException e) {
            throw new RuntimeException(e);
        }
    }

    public void putData(String key, String value) {
        try {
            if (RequestMothed.POST == requestMothed) {
                if (DataMeta.FORM == dataMeta) {
                    putDataOfForm(key, value);
                } else {
                    //其他数据提交方式
                }
            } else {
                //其他请求方式
            }
        } catch (IOException e) {
            throw new RuntimeException(e);
        }
    }

    public void putDataWithFile(String key, String fileName) {
        try {
            if (RequestMothed.POST == requestMothed) {
                if (DataMeta.FORM == dataMeta) {
                    putDataOfFormWithFile(key, fileName);
                } else {
                    //其他数据提交方式
                }
            } else {
                //其他请求方式
            }
        } catch (IOException e) {
            throw new RuntimeException(e);
        }
    }

    public void putFileContent(byte[] content, boolean isEnd) {
        try {
            if (RequestMothed.POST == requestMothed) {
                if (DataMeta.FORM == dataMeta) {
                    putDataFileContent(content, isEnd);
                } else {
                    //其他数据提交方式
                }
            } else {
                //其他请求方式
            }
        } catch (IOException e) {
            throw new RuntimeException(e);
        }
    }

    public Response Response() throws IOException {
        Response response = new Response();
        byte[] bytes = new byte[1];
        ByteArrayOutputStream byteArray = new ByteArrayOutputStream();
        int respL = 0;
        while (-1 != inputStream.read(bytes)) {
            byteArray.write(bytes);
            if (bytes[0] == '\n') {
                String context = byteArray.toString();
                byteArray.reset();
                if (context.equals("\r\n")) break;
                else if (context.startsWith("Content-Length: "))
                    respL = Integer.parseInt(context.substring(16).trim());
                else if (context.startsWith("Transfer-Encoding: chunked"))
                    respL = -1;
                else if (context.startsWith("HTTP/1.1 "))
                    response.status = Integer.parseInt(context.substring(9, 12));
            }
        }
        if (-1 == respL) {
            ByteArrayOutputStream bodyByte = new ByteArrayOutputStream();
            while (-1 != inputStream.read(bytes)) {
                byteArray.write(bytes);
                if (bytes[0] == '\n') {
                    int chunked;
                    String context = byteArray.toString();
                    chunked = Integer.parseInt(context.trim(), 16);
                    byteArray.reset();
                    if (0 == chunked){
                        response.msg = bodyByte.toString();
                        break;
                    }
                    byte[] chunkedBody = new byte[chunked];
                    inputStream.read(chunkedBody);
                    inputStream.read(new byte[2]);
                    bodyByte.write(chunkedBody);
                }
            }
        } else {
            byte[] body = new byte[respL];
            inputStream.read(body);
            response.msg = new String(body);
        }
        return response;
    }

    public void colse() {
        try {
            outputStream.close();
            inputStream.close();
            socket.close();
        } catch (IOException e) {
            throw new RuntimeException(e);
        }
    }

    public void flush() {
        try {
            if (RequestMothed.POST == requestMothed) {
                if (DataMeta.FORM == dataMeta) {
                    flushForm();
                } else {
                    //其他数据提交方式
                }
            } else {
                //其他请求方式
            }
        } catch (IOException e) {
            throw new RuntimeException(e);
        }
    }

    private void flushForm() throws IOException {
        String formM = "----sugar963sugar--";
        byte[] bytes = formM.getBytes();
        int count = bytes.length;
        String countS = Integer.toHexString(count).toLowerCase();
        outputStream.write((countS + "\r\n").getBytes());
        outputStream.write(bytes);
        outputStream.write("\r\n0\r\n\r\n".getBytes());
        outputStream.flush();
    }

    private void putDataOfForm(String key, String value) throws IOException {
        String formM = "----sugar963sugar\r\nContent-Disposition: form-data; name=\"" + key + "\"\r\n\r\n" + value + "\r\n";
        byte[] bytes = formM.getBytes();
        int count = bytes.length;
        String countS = Integer.toHexString(count).toLowerCase();
        outputStream.write((countS + "\r\n").getBytes());
        outputStream.write(bytes);
        outputStream.write("\r\n".getBytes());
    }

    private void putDataOfFormWithFile(String key, String fileName) throws IOException {
        String formM = "----sugar963sugar\r\nContent-Disposition: form-data; name=\"" + key + "\";filename=\"" + fileName + "\"\r\nContent-type: text/plain\r\n\r\n";
        byte[] bytes = formM.getBytes();
        int count = bytes.length;
        String countS = Integer.toHexString(count).toLowerCase();
        outputStream.write((countS + "\r\n").getBytes());
        outputStream.write(bytes);
        outputStream.write("\r\n".getBytes());
    }

    private void putDataFileContent(byte[] content, boolean isEnd) throws IOException {
        byte[] contentE = content;
        if (isEnd) {
            contentE = Arrays.copyOf(content, content.length + 2);
            contentE[content.length] = '\r';
            contentE[content.length + 1] = '\n';
        }
        int count = contentE.length;
        String countS = Integer.toHexString(count).toLowerCase();
        outputStream.write((countS + "\r\n").getBytes());
        outputStream.write(contentE);
        outputStream.write("\r\n".getBytes());
    }

}

利用putDataWithFile和putFileContent可以将文件内容直接写入报文,目前只实现了POST表单提交信息,后期再进行扩充
测试demo:

        HttpStream httpStream = new HttpStream(HttpStream.RequestMothed.POST, HttpStream.DataMeta.FORM, "127.0.0.1", 8080, false, "/file/t");
        httpStream.putData("api_p","aa22");
        httpStream.putDataWithFile("file", "fileName.txt");
        httpStream.putFileContent("hah邪恶那大家阿卡\n".getBytes(), false);
        httpStream.putFileContent("ddddee".getBytes(), true);
        httpStream.putData("f1","0");
        httpStream.flush();
        HttpStream.Response response = httpStream.Response();
        System.out.println(response.status + ":" + response.msg);
        httpStream.colse();
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 218,204评论 6 506
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,091评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,548评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,657评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,689评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,554评论 1 305
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,302评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,216评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,661评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,851评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,977评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,697评论 5 347
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,306评论 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,898评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,019评论 1 270
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,138评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,927评论 2 355

推荐阅读更多精彩内容