Nltk: Démo de Brill Tagger cassée

Il y a eu une certaine réorganisation de la base de code nltk en cours pour les modules de tagger Brill, voir https://github.com/nltk/nltk/commits/develop/nltk/tag/brill.py

Actuellement, la démo du tagueur Brill réside dans https://github.com/nltk/nltk/blob/develop/nltk/tbl/demo.py , donc dans le code :

import nltk
nltk.tbl.demo()

J'ai peur que ça ne marche pas non plus. J'obtiens une erreur d'importation sur map_tag :

Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
  File "C:\Compilers\Python\lib\site-packages\nltk\__init__.py", line 128, in <module>
    from nltk.chunk import *
  File "C:\Compilers\Python\lib\site-packages\nltk\chunk\__init__.py", line 157, in <module>
    from nltk.chunk.api import ChunkParserI
  File "C:\Compilers\Python\lib\site-packages\nltk\chunk\api.py", line 15, in <module>
    from nltk.chunk.util import ChunkScore
  File "C:\Compilers\Python\lib\site-packages\nltk\chunk\util.py", line 13, in <module>
    from nltk.tag.mapping import map_tag
  File "C:\Compilers\Python\lib\site-packages\nltk\tag\__init__.py", line 68, in <module>
    from nltk.tag.brill         import BrillTagger
  File "C:\Compilers\Python\lib\site-packages\nltk\tag\brill.py", line 16, in <module>
    from nltk.tbl import Feature, Template
  File "C:\Compilers\Python\lib\site-packages\nltk\tbl\__init__.py", line 29, in <module>
    from nltk.tbl.demo import demo
  File "C:\Compilers\Python\lib\site-packages\nltk\tbl\demo.py", line 18, in <module>
    from nltk.corpus import treebank
  File "C:\Compilers\Python\lib\site-packages\nltk\corpus\__init__.py", line 66, in <module>
    from nltk.corpus.reader import *
  File "C:\Compilers\Python\lib\site-packages\nltk\corpus\reader\__init__.py", line 59, in <module>
    from nltk.corpus.reader.tagged import *
  File "C:\Compilers\Python\lib\site-packages\nltk\corpus\reader\tagged.py", line 18, in <module>
    from nltk.tag import str2tuple, map_tag
ImportError: cannot import name 'map_tag'

Hé, je ne reçois pas cette erreur, en utilisant python v2.7.10. Quelle version utilisez-vous ? Ceci est ma sortie:

>>> import nltk
>>> from nltk.tbl import demo as issue1828
>>> issue1828.demo()
Loading tagged data from treebank...
Read testing data (200 sents/5251 wds)
Read training data (800 sents/19933 wds)
Read baseline data (800 sents/19933 wds) [reused the training set]
Trained baseline tagger
    Accuracy on test set: 0.8345
Training tbl tagger...
TBL train (fast) (seqs: 800; tokens: 19933; tpls: 24; min score: 3; min acc: None)
Finding initial useful rules...
    Found 12960 useful rules.

           B      |
   S   F   r   O  |        Score = Fixed - Broken
   c   i   o   t  |  R     Fixed = num tags changed incorrect -> correct
   o   x   k   h  |  u     Broken = num tags changed correct -> incorrect
   r   e   e   e  |  l     Other = num tags changed incorrect -> incorrect
   e   d   n   r  |  e
------------------+-------------------------------------------------------
  23  23   0   0  | POS->VBZ if Pos:PRP@[-2,-1]
  16  17   1   0  | NN->VB if Pos:-NONE-@[-2] & Pos:TO@[-1]
  15  16   1   0  | VBN->VBD if Pos:PRP@[-1]
  12  12   0   0  | VBP->VB if Pos:MD@[-2,-1]

etc...

Merci @campionfellin pour la vérification.

@MrDupin pourriez-vous nous fournir les détails de votre version afin que nous puissions vous aider ?

De plus, je pense qu'il serait bon d'ajouter cette démo à l'un des unittest dans nltk/test/unit afin que les fonctionnalités de cette démo puissent être testées dans les tests CI automatisés. Quelqu'un pour ça?

@stevenbird Nous devrions également modifier le code du livre en ligne sur https://github.com/nltk/nltk_book/edit/master/book/ch05.rst également.

Ce que @campionfellin a fait a fonctionné. Merci!

Peut-être que le livre nltk.tag.brill.demo() être :

from nltk.tbl import demo as brill_tagger
brill_tagger.demo()

Ajout de la démo à l'unittest sur #2099

L'exemple de livre doit être résolu par https://github.com/nltk/nltk_book/pull/204