Meilisearch-laravel-scout: स्काउट:बड़े डेटा (5 मिलियन रिकॉर्ड) पर आयात करने में बहुत समय लगता है

@curquiza क्या आपके पास कोई विचार है यदि यह स्काउट या मेलिसर्च से संबंधित है, तो मैंने इतने बड़े डेटासेट पर कभी अनुभव नहीं किया है।

नमस्ते @Kladislav और @shokme!
यह वास्तव में MeiliSearch से जुड़ा हो सकता है न कि स्काउट करने के लिए।
@ क्लादिस्लाव , क्या आप समझा सकते हैं कि "बहुत समय लेने" से आपका क्या मतलब है: क्या आपको कोई त्रुटि संदेश मिलता है? क्या update तक पहुंचने में समय लगता है? कितनी बार?

आईडीके, कोई त्रुटि नहीं, एपीआई ठीक काम करता है, लेकिन मैं 18 घंटे खर्च करता हूं और केवल 2/5 मिलियन रिकॉर्ड आयात करता हूं, क्या मैं इसे तेज कर सकता हूं?

यदि आप पहले से ऐसा नहीं करते हैं, तो आप स्काउट के साथ कई कतार चलाने का प्रयास कर सकते हैं।

हैलो @ क्लादिस्लाव!
MeiliSearch आपको बैच द्वारा दस्तावेज़ भेजने की अनुमति देता है। आप इस MeiliSearch पैरामीटर के साथ इन बैचों का आकार बढ़ा सकते हैं: https://docs.meilisearch.com/guides/advanced_guides/configuration.html#payload -limit-size।
यदि आपके पास बड़ी मात्रा में बैच हैं, तो यह एक विशाल अनुक्रमण समय की ओर जाता है। इसलिए, आपको इस इंडेक्सेशन समय को कम करने के लिए प्रति बैच भेजे गए दस्तावेज़ों की संख्या बढ़ानी चाहिए। लेकिन सावधान रहें, बहुत बड़े बैच न बनाएं: जब बैच बड़े होते हैं तो मेमोरी का उपयोग अधिक हो सकता है और MeiliSearch को मार दिया जा सकता है।
यदि आपके दस्तावेज़ों में लगभग 20 फ़ील्ड हैं, तो आप 10,000 दस्तावेज़ों के बैच द्वारा अपने दस्तावेज़ भेजने का प्रयास कर सकते हैं।

इसके अलावा, हम वर्तमान में इस इंडेक्सेशन समय को कम करने के लिए कोर-इंजन को बेहतर बनाने पर सक्रिय रूप से काम कर रहे हैं

php कारीगर स्काउट:आयात -सी 10000, 6 घंटे में 5.5 मिलियन रिकॉर्ड, अच्छा लगता है

क्या मैं इस मुद्दे को बंद कर सकता हूं @Kladislav? मैं

@ कर्क्विज़ा =)