Zstd: ZSTD_c_targetCBlockSize == ZSTD_TARGETCBLOCKSIZE_MAX अनुचित रूप से खराब संपीड़न की ओर जाता है

को निर्मित 28 अप्रैल 2020 · 3टिप्पणियाँ · स्रोत: facebook/zstd

ZSTD_CCtxParams_setParameter(cctxParams, ZSTD_c_targetCBlockSize, ZSTD_TARGETCBLOCKSIZE_MAX) का उपयोग बड़े न्यूनतम अनुक्रम (> 1kB) वाले स्रोतों के लिए अनुचित रूप से खराब संपीड़न की ओर जाता है।

एक सीनीकृत सीएसएस के दोहराया संघनन का उपयोग करना:
लक्ष्य निर्धारण के साथब्लॉकसाइज़ == ZSTD_TARGETBLOCKSIZE_MAX:
bootstrap.min.css : 97.31% (13862462 => 13488900 bytes, bootstrap.min.css.zst)
लक्ष्य सेट किए बिना
bootstrap.min.css : 0.15% (13862462 => 20476 bytes, bootstrap.min.css.zst)

आगे नोट: # 2093 के बारे में डीकंप्रेस पर ब्लॉक आकार को कम करने की कोशिश के परिणामस्वरूप मुझे इसका सामना करना पड़ा। यदि TargetCompressedBlockSize को सेट करने के बजाय, ZSTD_BLOCKSIZEMAX स्वयं कम हो जाता है, जिसके परिणामस्वरूप अधिकतम अवरोध भी कम हो जाता है, तो इसका संपीड़न पर बहुत कम प्रभाव पड़ता है।

उपयोग किया गया स्रोत निम्नलिखित अनुक्रम के माध्यम से प्राप्त किया गया था:
rm bootstrap.min.css; wget https://stackpath.bootstrapcdn.com/bootstrap/4.3.1/css/bootstrap.min.css && for i in {1..5}; do cat bootstrap.min.css >> bootstrap_2.min.css; cat bootstrap_2.min.css >> bootstrap.min.css; done && rm bootstrap_2.min.css

bug release-blocking

स्रोत

dciliske

👍2

सबसे उपयोगी टिप्पणी

@dciliske मैंने इस मुद्दे को 22 के स्तर पर पुन: पेश किया है। यह zstd-1.4.4 में मौजूद नहीं है, इसलिए इसने इसे कभी रिलीज़ नहीं किया। ऐसा लगता है कि मैंने इसे https://github.com/facebook/zstd/pull/1947 में पेश किया

terrelln 29 अप्रैल 2020

👍2

सभी 3 टिप्पणियाँ

मैं यहाँ आर्किटेक्चर के बारे में एक सवाल पूछने जा रहा हूँ: क्या targetCBlockSize कंप्रेसर को यह मानने का कारण बनता है कि यह एक डिकम्प्रेसर को खिलाया जा रहा है, जिसे इसे प्राप्त होने वाले ब्लॉक के बाहर कोई ज्ञान नहीं होगा? यानी यह एक पूरी तरह से बफरलेस स्ट्रीमिंग डिकम्प्रेसर है?

dciliske 28 अप्रैल 2020

targetCBlockSize "का अर्थ" स्ट्रीमिंग परिदृश्यों में उपयोग किया जाना है जहां आप पहले बाइट को डिकम्पोज करने के लिए समय कम करना चाहते हैं। इसलिए यदि आपका पैकेट का आकार 4KB है, तो आप अपने लक्ष्य ब्लॉक का आकार 4KB पर सेट कर सकते हैं और पहले बाइट को डिकम्पोज करने से पहले पूर्ण 128KB की प्रतीक्षा करने के बजाय प्रत्येक पैकेट को डिकम्प्रेसेबल बनाने का प्रयास कर सकते हैं।

मुझे यकीन नहीं है कि इस परिदृश्य में क्या हो रहा है, लेकिन इनपुट के साथ इसे पुन: पेश करना और ठीक करना आसान होना चाहिए। मैं जल्द ही इस पर गौर करूंगा। रिपोर्ट और विस्तृत रिप्रो निर्देश के लिए फिर से धन्यवाद!

terrelln 29 अप्रैल 2020

👍1

terrelln 29 अप्रैल 2020

👍2

क्या यह पृष्ठ उपयोगी था?

0 / 5 - 0 रेटिंग्स

Zstd: ZSTD_c_targetCBlockSize == ZSTD_TARGETCBLOCKSIZE_MAX अनुचित रूप से खराब संपीड़न की ओर जाता है

सबसे उपयोगी टिप्पणी

सभी 3 टिप्पणियाँ

संबंधित मुद्दों