Nltk: "IndexError: índice de string fora do intervalo" ao tentar derivar a palavra "oing"

Criado em 8 fev. 2017  ·  5Comentários  ·  Fonte: nltk/nltk

Fácil de reproduzir:

>>> from nltk import PorterStemmer
>>> stemmer = PorterStemmer()
>>> stemmer.stem('oing')
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
  File "/Users/peterbe/virtualenvs/songsearch/lib/python3.5/site-packages/nltk/stem/porter.py", line 665, in stem
    stem = self._step1b(stem)
  File "/Users/peterbe/virtualenvs/songsearch/lib/python3.5/site-packages/nltk/stem/porter.py", line 376, in _step1b
    lambda stem: (self._measure(stem) == 1 and
  File "/Users/peterbe/virtualenvs/songsearch/lib/python3.5/site-packages/nltk/stem/porter.py", line 258, in _apply_rule_list
    if suffix == '*d' and self._ends_double_consonant(word):
  File "/Users/peterbe/virtualenvs/songsearch/lib/python3.5/site-packages/nltk/stem/porter.py", line 214, in _ends_double_consonant
    word[-1] == word[-2] and
IndexError: string index out of range
>>> import nltk
>>> nltk.__version__
'3.2.2'
bug pleaseverify stelemma

Comentários muito úteis

Então, o problema foi resolvido?

Todos 5 comentários

Recebi este erro para a palavra "aed" :

from nltk.stem.porter import PorterStemmer
from nltk.corpus import stopwords
stemmer = PorterStemmer()
stemmer.stem('aed')

O erro é:

Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
  File "/Users/peter.hurford/.virtualenvs/rex/lib/python2.7/site-packages/nltk/stem/porter.py", line 665, in stem
    stem = self._step1b(stem)
  File "/Users/peter.hurford/.virtualenvs/rex/lib/python2.7/site-packages/nltk/stem/porter.py", line 376, in _step1b
    lambda stem: (self._measure(stem) == 1 and
  File "/Users/peter.hurford/.virtualenvs/rex/lib/python2.7/site-packages/nltk/stem/porter.py", line 258, in _apply_rule_list
    if suffix == '*d' and self._ends_double_consonant(word):
  File "/Users/peter.hurford/.virtualenvs/rex/lib/python2.7/site-packages/nltk/stem/porter.py", line 214, in _ends_double_consonant
    word[-1] == word[-2] and
IndexError: string index out of range

Instalado com:

pip install nltk
python -m nltk.downloader -d

Versão:

import nltk
nltk.__version__ # '3.2.2'

Duplicado de https://github.com/nltk/nltk/issues/1581. Minha culpa; Desculpe. :(

O bug foi introduzido na versão 3.2.2 e foi corrigido no master; você pode usar develop ou a versão 3.2.1 para se livrar do bug.

Fechar como corrigido?

Então, o problema foi resolvido?

Este problema deveria ter sido resolvido até # 1582 😉

>>> import nltk
>>> nltk.__version__
'3.2.5'

>>> from nltk import PorterStemmer
>>> porter = PorterStemmer()
>>> porter.stem('oing')
u'o'

Esta página foi útil?
0 / 5 - 0 avaliações

Questões relacionadas

alvations picture alvations  ·  3Comentários

DavidNemeskey picture DavidNemeskey  ·  4Comentários

talbaumel picture talbaumel  ·  4Comentários

goodmami picture goodmami  ·  4Comentários

stevenbird picture stevenbird  ·  3Comentários