AGB  ·  Datenschutz  ·  Impressum  







Anmelden
Nützliche Links
• Registrieren
Thema durchsuchen
Ansicht
Themen-Optionen

MemoryStream dekomprimieren

Ein Thema von glkgereon · begonnen am 12. Feb 2006 · letzter Beitrag vom 14. Jul 2006
Antwort Antwort
Seite 1 von 2  1 2      
Benutzerbild von glkgereon
glkgereon

Registriert seit: 16. Mär 2004
2.287 Beiträge
 
#1

MemoryStream dekomprimieren

  Alt 12. Feb 2006, 17:34
Hi,

Ich versuche mich grade an einem lokalen HTTP-Proxy...

Da ich bestimmte Seiten analysieren will, muss ich an die Daten rann, die tatsächlich übertragen werden...die stehen in einem TMemoryStream....und sind offensichtlich komprimiert oder verschlüsselt.

eine Beispieldatei im Anhang (Google.de)

ich habe versucht auf verdacht das ganze mit GZip zu dekomprimieren
markieren
Delphi-Quellcode:
function GZipStreamToString(const Input: TStream): string;
var DS: TZDecompressionStream;
begin
  DS:=TZDecompressionStream.Create(Input);
  DS.Read(Result,DS.Size);
  DS.Free;
end;
Doch das schlägt mit einem Data Error fehl

ist GZip überhaupt richtig?
was muss ich tun um den richtigen Text zu bekommen?


Im Header steht folgendes drin: (danke jfheins)
Zitat:
HTTP/1.1 200 OK
Date: Sun, 12 Feb 2006 16:45:26 GMT
Server: Apache/2.0.55 (Debian) mod_python/3.1.3 Python/2.3.5
Cache-Control: private, no-store, no-cache, must-revalidate, post-check=0, pre-check=0
Pragma: no-cache
X-Translation: 0.0005
X-Compression: 0.0000
X-Render-Time: 0.0186
Vary: Accept-Encoding
Content-Encoding: gzip
Connection: close
Content-Type: text/html
Angehängte Dateien
Dateityp: txt google_185.txt (1,5 KB, 24x aufgerufen)
»Unlösbare Probleme sind in der Regel schwierig...«
  Mit Zitat antworten Zitat
Der_Unwissende

Registriert seit: 13. Dez 2003
Ort: Berlin
1.756 Beiträge
 
#2

Re: MemoryStream dekomprimieren

  Alt 12. Feb 2006, 22:30
Hi,
ist auf jeden Fall einfach GZip gepackt. Wenn du es entpackst bekommst du etwas wie

Zitat:
<html><head><meta http-equiv="content-type" content="text/html; charset=UTF-8"><title>Google</title><style><!--
body,td,a,p,.h{font-family:arial,sans-serif;}
.h{font-size: 20px;}
.q{color:#0000cc;}
//-->
</style>
<script>
<!--
function sf(){document.f.q.focus();}
function rwt(el,ct,cd,sg){el.href="/url?sa=t&ct="+escape(ct)+"&cd="+escape(cd)+"&url=" +escape(el.href).replace(/\+/g,"%2B")+"&ei=QGPvQ_z9Na_QRs-BhZ4L"+sg;el.onmousedown="";return true;}
// -->
</script>
</head><body bgcolor=#ffffff text=#000000 link=#0000cc vlink=#551a8b alink=#ff0000 onLoad=sf() topmargin=3 marginheight=3><center><table border=0 cellspacing=0 cellpadding=0 width=100%><tr><td align=right nowrap><font size=-1>Personalisierte Startseite|Anmelden</font></td></tr><tr height=4><td><img alt="" width=1 height=1></td></tr></table><img src=/logos/olympics06_opening.gif width=276 height=115 border=0 alt="Torino 2006" title="Torino 2006">


<form action=/search name=f><script><!--
function qs(el) {if (window.RegExp && window.encodeURIComponent) {var ue=el.href;var qe=encodeURIComponent(document.f.q.value);if(ue.in dexOf("q=")!=-1){el.href=ue.replace(new RegExp("q=[^&$]*"),"q="+qe);}else{el.href=ue+"&q="+qe;}}return 1;}
// -->
</script><table border=0 cellspacing=0 cellpadding=4><tr><td nowrap><font size=-1>WebBilderGroupsVerzeichnisNewsFroogleMehr&raquo;</font></td></tr></table><table cellspacing=0 cellpadding=0><tr><td width=25%></td><td align=center><input type=hidden name=hl value=de><input maxlength=2048 size=55 name=q value="" title="Google-Suche">
<input type=submit value="Google-Suche" name=btnG><input type=submit value="Auf gut Glück!" name=btnI></td><td valign=top nowrap width=25%><font size=-2><a href=/advanced_search?hl=de>Erweiterte Suche</a>
Sprachtools</font></td></tr><tr><td colspan=3 align=center><font size=-1>Suche: <input id=all type=radio name=meta value="" checked><label for=all> Das Web</label><input id=lgr type=radio name=meta value="lr=lang_de" ><label for=lgr> Seiten auf Deutsch</label><input id=cty type=radio name=meta value="cr=countryDE" ><label for=cty>Seiten aus Deutschland</label></font></td></tr></table></form>

<font size=-1>Unternehmensangebote - - <a href=http://www.google.com/ncr>Google.com in English</font>

<font size=-2>&copy;2006 Google</font></p></center></body></html>
Was ganz richtig aussieht.

Gruß Der Unwissende (vielleicht einfach mit einer anderen Komponente entpacken)
  Mit Zitat antworten Zitat
Benutzerbild von Luckie
Luckie

Registriert seit: 29. Mai 2002
37.621 Beiträge
 
Delphi 2006 Professional
 
#3

Re: MemoryStream dekomprimieren

  Alt 12. Feb 2006, 23:41
Zitat von glkgereon:
ich habe versucht auf verdacht das ganze mit GZip zu dekomprimieren
markieren
Delphi-Quellcode:
function GZipStreamToString(const Input: TStream): string;
var DS: TZDecompressionStream;
begin
  DS:=TZDecompressionStream.Create(Input);
  DS.Read(Result,DS.Size);
  DS.Free;
end;
Doch das schlägt mit einem Data Error fehl
http://www.delphipraxis.net/internal...ct.php?t=74974
Michael
Ein Teil meines Codes würde euch verunsichern.
  Mit Zitat antworten Zitat
Benutzerbild von glkgereon
glkgereon

Registriert seit: 16. Mär 2004
2.287 Beiträge
 
#4

Re: MemoryStream dekomprimieren

  Alt 14. Feb 2006, 14:56
@Luckie:

sollte es dann so aussehen?

markieren
Delphi-Quellcode:
function GZipDecode(const Input: TStream): string;
var DS: TZDecompressionStream;
    i:Integer;
begin
  DS:=TZDecompressionStream.Create(Input);
  SetLength(Result, DS.Size);
  i:=DS.Read(Result[1], DS.Size);
  Result:=copy(Result, 1, DS.Size);
  DS.Free;
end;
@DerUnwissende:
womit hast du es denn entpackt?
»Unlösbare Probleme sind in der Regel schwierig...«
  Mit Zitat antworten Zitat
Muetze1
(Gast)

n/a Beiträge
 
#5

Re: MemoryStream dekomprimieren

  Alt 14. Feb 2006, 15:56
- i ist unnütz
- das Copy() auch
- Resourcenschutzblock empfehlenswert

zusammenfalten · markieren
Delphi-Quellcode:
function GZipDecode(const Input: TStream): string;
var
  DS: TZDecompressionStream;
begin
  DS := TZDecompressionStream.Create(Input);
  Try
    SetLength(Result, DS.Size);
    DS.Read(Result[1], DS.Size);
  Finally
    DS.Free;
  End;
end;
  Mit Zitat antworten Zitat
Benutzerbild von glkgereon
glkgereon

Registriert seit: 16. Mär 2004
2.287 Beiträge
 
#6

Re: MemoryStream dekomprimieren

  Alt 13. Jul 2006, 14:04
Es funktioniert immer noch nicht :-/

also ich habe einen TIdHTTPProxyServer...
Diesen nutze ich mit Firefox was auch alles klappt

nun nutze ich das Event OnProxyHTTPDocument wie folge:

markieren
Delphi-Quellcode:
procedure TForm1.ProxyHTTPDocument(ASender: TIdHTTPProxyServer;
  const ADocument: string; var VStream: TStream; const AHeaders: TIdHeaderList);
var T: String;
begin
  ListBox1.Items.Add(ADocument);
  ListBox1.Perform(WM_VSCROLL,SB_BOTTOM,0);
  //T:=GZipDecode(VStream);
  Memo1.Text:=T;
end;
auch das funktioniert noch problemlos...in Listbox1 stehen alle geladenen Dokumente drin.

zum dekodieren verwende ich dann das:
zusammenfalten · markieren
Delphi-Quellcode:
function GZipDecode(const Input: TStream): string;
var
  DS: TZDecompressionStream;
begin
  DS := TZDecompressionStream.Create(Input);
  Try
    SetLength(Result, DS.Size);
    DS.Read(Result[1], DS.Size);
  Finally
    DS.Free;
  End;
end;
doch sobald ich das versuche kommt ein "data error".

Und ich habe absolut keine Idee mehr
»Unlösbare Probleme sind in der Regel schwierig...«
  Mit Zitat antworten Zitat
Muetze1
(Gast)

n/a Beiträge
 
#7

Re: MemoryStream dekomprimieren

  Alt 13. Jul 2006, 18:42
Auf der Seite der GZipEx steht allerdings, dass er Dinge entpackt, wenn als Packformat im HTTP Header nicht gzip sonder deflate angegeben ist. Somit ist der Ansatz hier falsch.
  Mit Zitat antworten Zitat
Benutzerbild von glkgereon
glkgereon

Registriert seit: 16. Mär 2004
2.287 Beiträge
 
#8

Re: MemoryStream dekomprimieren

  Alt 13. Jul 2006, 19:35
Wie wäre denn der richtige Ansatz?
»Unlösbare Probleme sind in der Regel schwierig...«
  Mit Zitat antworten Zitat
Muetze1
(Gast)

n/a Beiträge
 
#9

Re: MemoryStream dekomprimieren

  Alt 13. Jul 2006, 23:12
Zitat von glkgereon:
Wie wäre denn der richtige Ansatz?
?? Was ist denn daran nun nicht zu verstehen? Der richtige Ansatz wäre in diesem Falle TZDecompressionStream nicht auf Daten anzuwenden die laut HTTP Header mit "gzip" komprimiert wurden, sondern mit "deflate". Das wäre der richtige Ansatz. Also stelle den Request so, dass du keine gzip Kompression unterstützt, wohl aber deflate als Kompressionsmethode.
  Mit Zitat antworten Zitat
Benutzerbild von glkgereon
glkgereon

Registriert seit: 16. Mär 2004
2.287 Beiträge
 
#10

Re: MemoryStream dekomprimieren

  Alt 13. Jul 2006, 23:26

Denkfehler meinerseits...
Ich dachte an einen Ansatz auch gzip zu können...

Aber direkt das nächste Problem...
zB im Event OnBeforeConnect (Find ich hört sich logisch an...) bekommt ich einen TIdContext übergeben.
Wo kann ich da den Header ändern? (Ich find einfach die Eigenschaft nicht )
»Unlösbare Probleme sind in der Regel schwierig...«
  Mit Zitat antworten Zitat
Antwort Antwort
Seite 1 von 2  1 2      

« Vorheriges Thema | Nächstes Thema »

Forumregeln

Es ist dir nicht erlaubt, neue Themen zu verfassen.
Es ist dir nicht erlaubt, auf Beiträge zu antworten.
Es ist dir nicht erlaubt, Anhänge hochzuladen.
Es ist dir nicht erlaubt, deine Beiträge zu bearbeiten.
BB-Code ist an.
Smileys sind an.
[IMG] Code ist an.
HTML-Code ist aus.
Trackbacks are an
Pingbacks are an
Refbacks are aus
Gehe zu:

• Impressum · AGB · Datenschutz · Nach oben
Alle Zeitangaben in WEZ +1. Es ist jetzt 12:59 Uhr.
Powered by vBulletin® Copyright ©2000 - 2024, Jelsoft Enterprises Ltd.
LinkBacks Enabled by vBSEO © 2011, Crawlability, Inc.
Delphi-PRAXiS (c) 2002 - 2023 by Daniel R. Wolf, 2024 by Thomas Breitkreuz