Golang と Python の Zlib 出力の違いを理解する

Zlib 圧縮を使用して文字列を圧縮すると、Python の zlib ライブラリは、 Golang の zlib 実装。具体的には、5 番目のバイトが異なり、Python の値は 0 ですが、Golang の値は 4 です。

違いの原因

出力の不一致の原因Python および Go ライブラリで使用されるさまざまなフラッシュ メカニズムから。 Python の zlib のデフォルトは Z_FLUSH で、データの各ブロックを圧縮した後にバッファーをフラッシュします。対照的に、Zlib を実装する Golang の flate ライブラリは、デフォルトで Z_SYNC_FLUSH を使用します。この動作は、入力ストリーム全体が処理された後にデータをフラッシュします。

Golang で同じ出力を取得する方法

Python の zlib と同じ出力を取得するには、次のように置き換えます。 Go コードの Close() と Flush() :

func compress(source string) []byte {
    buf := new(bytes.Buffer)
    w, _ := flate.NewWriter(buf, 7)
    w.Write([]byte(source))
    w.Flush()

    return buf.Bytes()
}

バイトと完全なストリーム

Python サンプルの出力は完全なストリームではないことに注意することが重要です。最初の文字列を圧縮した後にのみバッファをフラッシュします。

バイト間のマッチングの制限

さまざまな圧縮ライブラリのバイト間の出力を比較します。圧縮されたデータと一致させることは、一般に実現不可能または現実的ではありません。圧縮ライブラリによって生成される出力は、同一ではなく互換性があることが保証されています。