HTTP - не получается разархивировать gzip

[djalex777]

Написал разборщих HTTP-ответа сервера. Выделяю данные из заголовка. Проверяю content-encoding. Если gzip, то пытаю выполнить uncompress с помощью библиотеки zlib.dll. Но uncompress почему-то не может разархивировать данные. Как правильно это сделать? Заметил что вначале gzip данных первой строкой передается какое-то число, а потом уже сами данные. На форуме находил подобную тему, но предоставленные там функции так же не разархивируют данные. Все объявлено и передается функциям в правильном виде. Проблема в самих данных. Может с ними нужно что-то сделать вначале? Или считывать как-то по особенному?

[iGrok]

Число - длина chunk'а данных в HEX. Насколько я понимаю, нужно сначала получить весь блок, а потом уже пытаться разжимать.
Если получится - отпишись, как сделал. Меня этот вопрос тоже сейчас интересует, но пока решение отошло на второй план, а я принудительно шлю серверу пустой "Accept-Encoding", чтобы никаких gzip'ов с compress'ами.

UPD:
Короче, смотри хидер "Transfer-Encoding". И если его значение - "chunked", тогда данные идут в таком формате:

<header>+CRLF+CRLF
HEX(Length(chunk))+CRLF+ChunkData+CRLF
HEX(Length(chunk))+CRLF+ChunkData+CRLF
0+CRLF+CRLF

Нулевая длина чанка - конец контента. Я только не уверен насчёт двух CRLF после него. Впрочем, это легко проверить.

[iGrok]

А хоть кому-то удавалось вообще ражимать gzip-контент, отдаваемый сервером?

Только не надо отправлять в поиск. Я там уже не первый день. =)

viewtopic.php?f=1&t=4431&p=25164
То, что приведено тут в последнем посте - не работает. Точнее, это похоже для deflate, а мне бы gzip..

[MIT]

Fiddler2. Не обфусцирован. Написан на NET`е; можно в рефлекторе посмотреть систему обработки и сделать по аналогии.

[iGrok]

Fiddler2. Не обфусцирован. Написан на NET`е; можно в рефлекторе посмотреть систему обработки и сделать по аналогии.

Гм.. Я на него, конечно, посмотрел, но в рефлекторе пока не разобрался. С .net работать особо не приходилось.

Но одно я таки знаю. В .net есть GZipStream, который для этих целей подходит. И я почти уверен, что они юзают именно его. Так что ничем мне это не поможет. (

[Megas13]

А хоть кому-то удавалось вообще ражимать gzip-контент, отдаваемый сервером?

Я без проблем разжимал gzip-контент. Использовал для этого библеотеку vbzlib.dll

[djalex777]

Да. Есть такая библиотека. Вот только она не скачивалась у меня ни с одного сайта... И тут сегодня она вдруг скачалась. Выкладываю её сюда. С ней действительно всё заработало.
Не chunked страница разжимается просто - берем данные, разбиваем их по vbCrLf. В первой строке длина всех данных в HEX формате. Вычисляем её и из второй строки берем именно столько - это и есть сжатый gzip. Разжимаем с помощью uncompress.
С chunked немного сложнее. Получили в заголовке chunked, значит следующие данные принимаем и соединяем с предыдущими начиная с данных в которых встретился chunked и заканчиваем объединение когда у нас в данных встретится "0" & vbClrFl. Далее расшифровываем по первой схеме, с учетом того что первая строка это длина всех данных, а остальные строки - это данные, которые нужно объединить воедино и взять (начиная с начала) длину всех данных.

[iGrok]

А хоть кому-то удавалось вообще ражимать gzip-контент, отдаваемый сервером?

Я без проблем разжимал gzip-контент. Использовал для этого библеотеку vbzlib.dll

О. Спасибо. )

Как выяснилось, можно разжимать и обычной zlib.dll, но несколько геморно. Может, потом руки дойдут сделать по-человечески. А пока вот: