Кодирование передачи по частям - Chunked transfer encoding

Кодирование передачи по частям это потоковая передача механизм передачи данных доступен в версии 1.1 Протокол передачи гипертекста (HTTP). При кодировании передачи по частям поток данных делится на ряд неперекрывающихся «фрагментов». Фрагменты отправляются и принимаются независимо друг от друга. Ни отправителю, ни получателю в любой момент времени не требуется никаких сведений о потоке данных за пределами обрабатываемого в данный момент фрагмента.

Каждому фрагменту предшествует его размер в байтах. Передача заканчивается, когда получен фрагмент нулевой длины. В разбитый ключевое слово в Передача-кодирование заголовок используется для обозначения передачи по частям.

Ранняя форма кодирования передачи по частям была предложена в 1994 году.^[1] Кодирование фрагментированной передачи не поддерживается в HTTP / 2, который предоставляет собственные механизмы для потоковой передачи данных.^[2]

Обоснование

Внедрение фрагментированного кодирования дало различные преимущества:

Кодирование передачи по частям позволяет серверу поддерживать Постоянное соединение HTTP для динамически генерируемого контента. В этом случае заголовок HTTP Content-Length не может использоваться для разграничения содержимого и следующего HTTP-запроса / ответа, поскольку размер содержимого еще не известен. Преимущество фрагментированного кодирования состоит в том, что нет необходимости генерировать полный контент перед записью заголовка, поскольку оно позволяет передавать контент в виде фрагментов и явно сигнализировать о конце контента, делая соединение доступным для следующего HTTP-запроса / ответа.
Кодирование по частям позволяет отправителю отправлять дополнительные поля заголовка после тела сообщения. Это важно в случаях, когда значения поля не могут быть известны до тех пор, пока содержимое не будет создано, например, когда содержимое сообщения должно быть подписано цифровой подписью. Без фрагментированного кодирования отправителю пришлось бы буферизовать содержимое до его завершения, чтобы вычислить значение поля и отправить его перед содержимым.

Применимость

Для версии 1.1 протокола HTTP механизм передачи фрагментов считается всегда и в любом случае приемлемым, даже если он не указан в TE (кодирование передачи) поле заголовка запроса и при использовании с другими механизмами передачи всегда должно применяться к передаваемым данным в последнюю очередь и никогда не более одного раза. Этот метод кодирования передачи также позволяет отправлять дополнительные поля заголовка объекта после последнего фрагмента, если клиент указал параметр «трейлеры» в качестве аргумента поля TE. Сервер-источник ответа также может решить отправить дополнительные трейлеры объекта, даже если клиент не указал параметр "трейлеры" в поле запроса TE, но только если метаданные являются необязательными (т. Е. Клиент может использовать полученный объект без них. ). Каждый раз, когда используются трейлеры, сервер должен указывать их имена в поле заголовка трейлера; три типа полей заголовка специально запрещены для использования в качестве поля прицепа: Передача-кодирование, Content-Length и Трейлер.

Формат

Если Передача-кодирование поле со значением "разбитый"указывается в HTTP-сообщении (либо запрос, отправленный клиентом, либо ответ от сервера), тело сообщения состоит из неопределенного количества фрагментов, завершающего фрагмента, трейлера и конечной последовательности CRLF (т. е. возврат каретки с последующим перевод строки ).

Каждый кусок начинается с количества октеты данных, которые он встраивает в виде шестнадцатеричный число в ASCII за которыми следуют необязательные параметры (расширение чанка) и завершающую последовательность CRLF, за которой следуют данные фрагмента. Фрагмент завершается CRLF.

Если предусмотрены расширения фрагментов, размер фрагмента заканчивается точкой с запятой, после чего следуют параметры, каждый из которых также разделяется точкой с запятой. Каждый параметр кодируется как имя расширения, за которым следует необязательный знак равенства и значение. Эти параметры можно использовать для бега Дайджест сообщения или же цифровой подписи, или, например, чтобы указать приблизительный прогресс передачи.

Завершающий блок - это обычный блок, за исключением того, что его длина равна нулю. За ним следует трейлер, который состоит из (возможно, пустой) последовательности полей заголовка объекта. Обычно такие поля заголовка отправляются в заголовке сообщения; однако может быть более эффективным определить их после обработки всего объекта сообщения. В этом случае полезно отправить эти заголовки в трейлере.

Поля заголовка, регулирующие использование прицепов, TE (используется в запросах), и Трейлеры (используется в ответах).

Использовать со сжатием

HTTP-серверы часто используют сжатие для оптимизации передачи, например, с Кодирование содержимого: gzip или же Кодирование содержимого: сдувать. Если включены и сжатие, и кодирование по фрагментам, то поток содержимого сначала сжимается, а затем разбивается на фрагменты; поэтому кодирование фрагментов не сжимается, и данные в каждом фрагменте не сжимаются по отдельности. Затем удаленная конечная точка декодирует поток, объединяя фрагменты и распаковывая результат.

Пример

Закодированные данные

В следующем примере показаны три фрагмента длиной 4, 6 и 14 (шестнадцатеричное "E"). Размер блока передается как шестнадцатеричное число, за которым следует r n в качестве разделителя строк, за которым следует блок данных заданного размера.

4  r  n (байты для отправки) Wiki  r  n (данные) 6  r  n (байты для отправки) pedia  r  n (данные) E  r  n (байты для отправки) в  r  n  r  nchunks.  r  n (данные) 0  r  n (последний байт - 0)  r  n (конец сообщения)

Примечание: размер блока указывает размер данных блока и не включает завершающий CRLF (" r n"). В этом конкретном примере CRLF, следующий за «in», считается как два октета по отношению к размеру блока 0xE (14). CRLF в отдельной строке также учитывается как два октета по отношению к размеру блока. Символ точки в конце «фрагментов» является 14-м символом, поэтому это последний символ данных в этом фрагменте. CRLF, следующий за точкой, является завершающим CRLF, поэтому он не учитывается при размере блока 0xE (14).

Декодированные данные

Википедия.

Смотрите также

Список полей заголовка HTTP