HTTP-клиент Java для загрузки файлов (multipart/form-data)

Я пытаюсь реализовать HTTP-клиент, который отправляет составные запросы на загрузку файлов на HTTP-сервер. Форма HTML имеет три поля ввода: одно для имени пользователя, одно для пароля и одно для файла. Серверная часть выглядит следующим образом.

<html>
<head>
<title>Uploader</title>
</head>

<body>
   <div id="header">
         <h1>Uploader</h1>
   </div>
   <div id="content">
         <form id="uploadformular" action="upload" method="post"
                enctype="multipart/form-data" accept-charset="utf-8">
                <div class="block">
                       <label for="user">Username</label> <input type="text" id="user"
                              name="myuser" required />
                </div>
                <div class="block">
                       <label for="password">Password</label> <input type="password" id="pin"
                              name="mypassword" required />
                </div>
                <div class="block">
                       <label for="file">ZIP File</label> <input type="file" id="file"
                              name="myfile" required />
                </div>
                <div>
                       <input type="submit" value="Upload" />
                </div>
         </form>
   </div>

</body>
</html>

Моя реализация выглядит следующим образом.

public class MultipartUploader {

    private static final String CHARSET = "UTF-8";

    private static final String CRLF = "\r\n";

    public String httpUpload(String url, String filename, byte[] byteStream)
        throws MalformedURLException, IOException {

        HttpURLConnection connection = (HttpURLConnection) new URL(url).openConnection();
        final String boundary = Strings.repeat("-", 15) + Long.toHexString(System.currentTimeMillis());

        connection.setDoOutput(true);
        connection.setDoInput(true);
        connection.setUseCaches(false);
        connection.setRequestMethod("POST");
        connection.setRequestProperty("Connection", "Keep-Alive");
        connection.setRequestProperty("Cache-Control", "no-cache");
        connection.setRequestProperty("Content-Type", "multipart/form-data; boundary=" + boundary);

        OutputStream directOutput = connection.getOutputStream();
        PrintWriter body = new PrintWriter(new OutputStreamWriter(directOutput, CHARSET), true);

        body.append(CRLF);
        addSimpleFormData("myuser", "myUserName", body, boundary);
        addSimpleFormData("mypassword", "mySecretPassword", body, boundary);
        addFileData("myfile", filename, byteStream, body, directOutput, boundary);
        addCloseDelimiter(body, boundary);

        int responseCode = connection.getResponseCode();
        String responseMessage = connection.getResponseMessage();

        String payload = CharStreams.toString(new InputStreamReader(connection.getInputStream()));
        return payload;
    }

    private static void addSimpleFormData(String paramName, String wert, PrintWriter body,
        final String boundary) {

        body.append(boundary).append(CRLF);
        body.append("Content-Disposition: form-data; name=\"" + paramName + "\"").append(CRLF);
        body.append("Content-Type: text/plain; charset=" + CHARSET).append(CRLF);
        body.append(CRLF);
        body.append(wert).append(CRLF);
        body.flush();
    }

    private static void addFileData(String paramName, String filename, byte[] byteStream, PrintWriter body,
        OutputStream directOutput, final String boundary) throws IOException {

        body.append(boundary).append(CRLF);
        body.append("Content-Disposition: form-data; name=\"" + paramName + "\"; filename=\"" + filename + "\"")
            .append(CRLF);
        body.append("Content-Type: application/octed-stream").append(CRLF);
        body.append("Content-Transfer-Encoding: binary").append(CRLF);
        body.append(CRLF);
        body.flush();

        directOutput.write(byteStream);
        directOutput.flush();

        body.append(CRLF);
        body.flush();
    }

    private static void addCloseDelimiter(PrintWriter body, final String boundary) {

        body.append(boundary).append("--").append(CRLF);
        body.flush();
    }
}

Сервер отвечает 200 OK. У меня проблема в том, что тело HTTP каким-то образом создается неправильно, поэтому в ответе, который я получаю от сервера, говорится, что не все поля формы установлены. Сервер не говорит, какое это поле. Итак, мой вопрос: вы видите какие-либо проблемы с этим кодом? Правильно ли я создаю составной запрос?

Я также попытался загрузить файл с помощью cURL с помощью следующей команды, и это сработало.

cURL -F "myuser=myUserName" -F "mypassword=mySecretPassword" -F "myfile=@/path/to/my/file.zip" "http://abcdef.gh:1234/path/to/uploader"

person Javiator    schedule 23.02.2018    source источник
comment
Что же такое все поля формы? Можете показать серверную часть?   -  person Evan Knowles    schedule 23.02.2018
comment
@EvanKnowles Я только что обновил вопрос.   -  person Javiator    schedule 23.02.2018
comment
Я предлагаю использовать http-клиент более высокого уровня, который позаботится о создании запроса для вас. Например, http://square.github.io/okhttp/   -  person Devstr    schedule 23.02.2018
comment
@Devstr Я бы сделал это, если бы это было возможно, но в моей ситуации это невозможно.   -  person Javiator    schedule 23.02.2018
comment
Когда я просматриваю тело HTTP, отправляемое на сервер, я вижу, что на самом деле между заголовками MIME-part-headers нет разрывов строк. Что может быть причиной этого? Я добавляю разрывы строк, как вы можете видеть выше. А может быть, они просто не отображаются редактором.   -  person Javiator    schedule 23.02.2018
comment
Затем попробуйте посмотреть, что curl отправляет через опцию -vvv --trace-ascii (если я правильно помню). Затем выгрузите то, что вы пишете в PrintWriter, в строку и сравните ее с запросом на завивку байт за байтом. Самый верный способ, конечно, использовать какой-нибудь сетевой сниффер, например Wireshark, чтобы посмотреть, что происходит в сети.   -  person Devstr    schedule 23.02.2018
comment
Вы можете использовать https://httpbin.org/ (/post) для отладки   -  person Devstr    schedule 23.02.2018


Ответы (2)


В ваших границах между частями данных отсутствуют лишние два тире в начале: --

Я обнаружил это, перехватив запросы к http://httpbin.org/post, сделанные через вашу программу и curl и сравнивая их с помощью инструмента сравнения. Я использовал Wireshark для сбора запросов.

Вот как это можно исправить:

private static void addSimpleFormData(String paramName, String wert, PrintWriter body,
                                      final String boundary) {

    body.append("--").append(boundary).append(CRLF);
    body.append("Content-Disposition: form-data; name=\"" + paramName + "\"").append(CRLF);
    body.append("Content-Type: text/plain; charset=" + CHARSET).append(CRLF);
    body.append(CRLF);
    body.append(wert).append(CRLF);
    body.flush();
}

private static void addFileData(String paramName, String filename, byte[] byteStream, PrintWriter body,
                                OutputStream directOutput, final String boundary) throws IOException {

    body.append("--").append(boundary).append(CRLF);
    body.append("Content-Disposition: form-data; name=\"" + paramName + "\"; filename=\"" + filename + "\"")
            .append(CRLF);
    body.append("Content-Type: application/octed-stream").append(CRLF);
    body.append("Content-Transfer-Encoding: binary").append(CRLF);
    body.append(CRLF);
    body.flush();

    directOutput.write(byteStream);
    directOutput.flush();

    body.append(CRLF);
    body.flush();
}

private static void addCloseDelimiter(PrintWriter body, final String boundary) {
    body.append("--").append(boundary).append("--").append(CRLF);
    body.flush();
}

Обратите внимание на дополнительные .append("--") в начале каждого метода.


полный рабочий код см. на странице https://gist.github.com/shtratos/8e9570a4a5591b2bcecd55ca60b3f24f.

person Devstr    schedule 23.02.2018

Есть ли веская причина, по которой вы пишете свою собственную реализацию, а не используете Apache HttpClient?

См. https://hc.apache.org/httpcomponents-client-ga/.

person isapir    schedule 23.02.2018