Xapian-haystack: टर्म बहुत लंबा मुद्दा

को निर्मित 22 मई 2011 · 3टिप्पणियाँ · स्रोत: notanumber/xapian-haystack

When I run manage.py rebuild_index I get following error: जब मैं manage.py rebuild_index चलाता हूं तो मुझे निम्न त्रुटि मिलती है:

```Traceback (most recent call last): ``` ट्रेसबैक (सबसे हालिया कॉल अंतिम):
File "./manage.py", line 11, in फ़ाइल "./manage.py", पंक्ति 11, in
execute_manager(settings) execute_manager (सेटिंग्स)
File "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/django/core/management/ init .py", line 438, in execute_manager फ़ाइल " /home/lorien/web/dumpz/.env/lib/python2.6/site-packages/django/core/management/init .py", लाइन 438, execute_manager में
utility.execute() उपयोगिता.निष्पादन ()
File "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/django/core/management/ init .py", line 379, in execute फ़ाइल " /home/lorien/web/dumpz/.env/lib/python2.6/site-packages/django/core/management/init .py", लाइन 379, निष्पादन में
self.fetch_command(subcommand).run_from_argv(self.argv) self.fetch_command(subcommand).run_from_argv(self.argv)
File "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/django/core/management/base.py", line 191, in run_from_argv फ़ाइल "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/django/core/management/base.py", पंक्ति 191, run_from_argv में
self.execute(_args, *_options. dict ) self.execute(_args, *_options. dict )
File "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/django/core/management/base.py", line 220, in execute फ़ाइल "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/django/core/management/base.py", लाइन 220, निष्पादन में
output = self.handle(_args, *_options) आउटपुट = सेल्फ.हैंडल (_args, *_options)
File "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/haystack/management/commands/rebuild_index.py", line 14, in handle फ़ाइल "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/haystack/management/commands/rebuild_index.py", लाइन 14, हैंडल में
call_command('update_index', *_options) call_command('update_index', *_options)
File "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/django/core/management/ init .py", line 166, in call_command फ़ाइल " /home/lorien/web/dumpz/.env/lib/python2.6/site-packages/django/core/management/init .py", लाइन 166, call_command में
return klass.execute(_args, *_defaults) वापसी klass.execute(_args, *_defaults)
File "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/django/core/management/base.py", line 220, in execute फ़ाइल "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/django/core/management/base.py", लाइन 220, निष्पादन में
output = self.handle(_args, *_options) आउटपुट = सेल्फ.हैंडल (_args, *_options)
File "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/haystack/management/commands/update_index.py", line 184, in handle फ़ाइल "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/haystack/management/commands/update_index.py", लाइन 184, हैंडल में
return super(Command, self).handle(_apps, *_options) सुपर रिटर्न (कमांड, सेल्फ)। हैंडल (_apps, *_options)
File "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/django/core/management/base.py", line 286, in handle फ़ाइल "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/django/core/management/base.py", लाइन 286, हैंडल में
app_output = self.handle_app(app, *_options) app_output = self.handle_app (ऐप, *_विकल्प)
File "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/haystack/management/commands/update_index.py", line 218, in handle_app फ़ाइल "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/haystack/management/commands/update_index.py", लाइन 218, हैंडल_एप में
do_update(index, qs, start, end, total, self.verbosity) do_update(index, qs, start, end, Total, self.verbosity)
File "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/haystack/management/commands/update_index.py", line 100, in do_update फ़ाइल "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/haystack/management/commands/update_index.py", लाइन 100, do_update में
index.backend.update(index, current_qs) index.backend.update(index, current_qs)
File "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/xapian_backend.py", line 257, in update फ़ाइल "/home/lorien/web/dumpz/.env/lib/python2.6/site-packages/xapian_backend.py", लाइन 257, अद्यतन में
database.replace_document(document_id, document) database.replace_document(document_id, document)
xapian.InvalidArgumentError: Term too long (> 245): 4f6d6e6961206d6561206d6563756d20706f72746f202d20e2f1e520f1e2eee520edeef8f320f120f1eee1eefe0d0a566974612073696e65206c69626572746174652c206e6968696c202d20e6e8e7edfc20e1e5e720f1e2eee1eee4fb202d20ede8f7f2ee0d0a417273206c6f6e67612c207669746120627265766973 xapian.InvalidArgumentError: Term too long (> 245): 4f6d6e6961206d6561206d6563756d20706f72746f202d20e2f1e520f1e2eee520edeef8f320f120f1eee1eefe0d0a566974612073696e65206c69626572746174652c206e6968696c202d20e6e8e7edfc20e1e5e720f1e2eee1eee4fb202d20ede8f7f2ee0d0a417273206c6f6e67612c207669746120627265766973

Do you have any idea how to handle this problem?

Thanks.

P.S.
python 2.6
python-xapian (debian) 1.2.4-1
libxapian (debian) 1.2.5
recent versions of django, haystack-xapian, django-xapian

स्रोत

gpetukhov

सबसे उपयोगी टिप्पणी

@notanumber @jorgecarleitao What do you think about this https://github.com/Alir3z4/xapian-haystack/commit/a249b46c48957f4d8a776ef41b0ce12490ad52dd ? @notannumber @jorgecarleitao आप इस बारे में क्या सोचते हैं https://github.com/Alir3z4/xapian-haystack/commit/a249b46c48957f4d8a776ef41b0ce12490ad52dd ?

the text document is usually more than 245, I know it's raised from xapian itself but this shouldn't break the [re]building the index. टेक्स्ट दस्तावेज़ आमतौर पर 245 से अधिक होता है, मुझे पता है कि यह xapian से ही उठाया गया है, लेकिन यह [पुनः] अनुक्रमणिका का निर्माण नहीं करना चाहिए।

Alir3z4 10 नव॰ 2015

👍3

सभी 3 टिप्पणियाँ

I've created quick fix, it just ignores such error and I think documents with invalid terms are not added to index completely. मैंने त्वरित सुधार किया है, यह सिर्फ ऐसी त्रुटि को अनदेखा करता है और मुझे लगता है कि अमान्य शर्तों वाले दस्तावेज़ पूरी तरह से अनुक्रमणिका में नहीं जोड़े जाते हैं।

``` lorien@big :/tmp/xapian-haystack$ git diff ``` लॉरियन @ बड़ा : / tmp / xapian-haystack $ git diff
diff --git a/xapian_backend.py b/xapian_backend.py अंतर --git a/xapian_backend.py b/xapian_backend.py
index fbbe221..1884613 100755 सूचकांक fbbe221..1884613 100755
--- a/xapian_backend.py --- a/xapian_backend.py
+++ b/xapian_backend.py +++ b/xapian_backend.py
@@ -259,7 +259,10 @@ class SearchBackend(BaseSearchBackend): @@ -259,7 +259,10 @@ क्लास सर्चबैकएंड (बेस सर्चबैकएंड):
DOCUMENT_CT_TERM_PREFIX + u'%s.%s' % DOCUMENT_CT_TERM_PREFIX + u'%s.%s' %
(obj._meta.app_label, obj._meta.module_name) (obj._meta.app_label, obj._meta.module_name)
) )

database.replace_document(document_id, document) database.replace_document(document_id, document)
try: प्रयत्न:
database.replace_document(document_id, document) database.replace_document(document_id, document)
except xapian.InvalidArgumentError, ex: xapian.InvalidArgumentError को छोड़कर, उदा:
``` ```
sys.stderr.write('xapian.InvalidArgumentErrorn') sys.stderr.write('xapian.InvalidArgumentErrorn')

except UnicodeDecodeError: UnicodeDecodeError को छोड़कर:
sys.stderr.write('Chunk failed.n') sys.stderr.write ('चंक विफल। एन')
``` ```

gpetukhov 22 मई 2011

This is actually raised by Xapian itself. यह वास्तव में Xapian द्वारा ही उठाया गया है। I've left the exception to bubble up so it's possible for a developer to see the issue. मैंने बबल अप करने के लिए अपवाद छोड़ दिया है, इसलिए डेवलपर के लिए इस मुद्दे को देखना संभव है। The solution is to ensure your terms are no longer than 245 characters, unfortunately. समाधान यह सुनिश्चित करना है कि आपकी शर्तें दुर्भाग्य से 245 वर्णों से अधिक नहीं हैं।

notanumber 24 मई 2011

Alir3z4 10 नव॰ 2015

👍3

क्या यह पृष्ठ उपयोगी था?

0 / 5 - 0 रेटिंग्स

Xapian-haystack: टर्म बहुत लंबा मुद्दा

सबसे उपयोगी टिप्पणी

सभी 3 टिप्पणियाँ

संबंधित मुद्दों