Brainstorming: Datei mit definierter Entropie erzeugen

[API]

http://www.shannonentropy.netmark.pl/calculate liefert einen leicht anderen Wert.

H(X) = 3.59448

Code:

CDU
CSU
FDP
SPD
Grüne

[Uwe Raabe]

Wie ermittelst du denn die Entropie?

[PeterPanino]

Wenn ich aber diese Textdatei verwende:

Zitat:

enürG
DPS
PDF
USC
UDC

komme ich wieder auf den ersten Wert: 3,49366068968819

[PeterPanino]

Zitat von Uwe Raabe:

Wie ermittelst du denn die Entropie?

Es geht um "Shannon's Formula", die MiTeC auf meine Anregung hin in TPEReader integriert hat.

Zur Ermittlung zweckentfremde ich die Klasse TPEReader von MiTeC:

Delphi-Quellcode:

uses
  MiTeC_PE;

var
  PE: TPEReader;

procedure TForm3.FormCreate(Sender: TObject);
begin
  PE := TPEReader.Create;
  try
    PE.FileName := 'R:\test.txt';
    CodeSite.Send('TForm3.FormCreate: ', PE.Entropy.ToString);
  finally
    PE.Free;
  end;
end;

[Uwe Raabe]

Zitat von PeterPanino:

Es geht um "Shannon's Formula",

OK, das ist dann allerdings eine andere Definition von Entropie.

[Rollo62]

Die Entropie hängt doch sicher auch vom Zeichensatz ab, ob english, kyrilliusch, chinesisch, ANSI, UTF16, ...

[KodeZwerg]

In Bezug zu PE Dateien vermute ich stellt die Entropy dar, ob Datei gepackt wurde. 8 sollte maximum Darstellen, also stark gepackt und 1 wäre zu 100% ungepackt. Kann ich gerade nicht nachvollziehen da mir diese Unit/Klasse fehlt, zum nachschauen kaufe ich das nicht.

[PeterPanino]

Zitat von KodeZwerg:

In Bezug zu PE Dateien vermute ich stellt die Entropy dar, ob Datei gepackt wurde. 8 sollte maximum Darstellen, also stark gepackt und 1 wäre zu 100% ungepackt. Kann ich gerade nicht nachvollziehen da mir diese Unit/Klasse fehlt, zum nachschauen kaufe ich das nicht.

Nein, es ist wirklich die Entropie-Berechnung laut Shannon's Formula.

[PeterPanino]

Zitat von Rollo62:

Die Entropie hängt doch sicher auch vom Zeichensatz ab, ob english, kyrilliusch, chinesisch, ANSI, UTF16, ...

In diesem Fall wird das byteweise (also nicht als Text) aus der Datei ausgelesen.

[KodeZwerg]

Erstell mal bitte Dateien mit folgenden Inhalt und sage Entropy dazu.

Code:

1234567890

Code:

1111222333

hier ist hinten noch ein leerzeichen!

Code:

1 2 3 4 5

hier ist vorne noch ein leerzeichen!

Code:

 1 2 3 4 5

Danke.