Pandas: read_csv(filename_with_asian_locale) विंडोज़ के लिए अजगर 3.6 में विफल रहा

कोड:

Python 3.6.0 |Anaconda 4.3.1 (64-bit)| (default, Dec 23 2016, 11:57:41) [MSC v.1900 64 bit (AMD64)] on win32
>>> pd.__version__
'0.20.1'
>>> import platform
>>> platform.platform()
'Windows-7-6.1.7601-SP1'
>>> import pandas as pd
>>> df = pd.read_csv(r'c:\tmp\中文.csv')
Traceback (most recent call last):
  File "C:\ProgramData\Anaconda3\lib\site-packages\IPython\core\interactiveshell.py", line 2881, in run_code
    exec(code_obj, self.user_global_ns, self.user_ns)
  File "<ipython-input-6-0cd6317422e5>", line 1, in <module>
    df = pd.read_csv(r'c:\tmp\中文.csv')
  File "C:\ProgramData\Anaconda3\lib\site-packages\pandas\io\parsers.py", line 655, in parser_f
    return _read(filepath_or_buffer, kwds)
  File "C:\ProgramData\Anaconda3\lib\site-packages\pandas\io\parsers.py", line 405, in _read
    parser = TextFileReader(filepath_or_buffer, **kwds)
  File "C:\ProgramData\Anaconda3\lib\site-packages\pandas\io\parsers.py", line 762, in __init__
    self._make_engine(self.engine)
  File "C:\ProgramData\Anaconda3\lib\site-packages\pandas\io\parsers.py", line 966, in _make_engine
    self._engine = CParserWrapper(self.f, **self.options)
  File "C:\ProgramData\Anaconda3\lib\site-packages\pandas\io\parsers.py", line 1582, in __init__
    self._reader = parsers.TextReader(src, **kwds)
  File "pandas\_libs\parsers.pyx", line 394, in pandas._libs.parsers.TextReader.__cinit__ (pandas\_libs\parsers.c:4209)
  File "pandas\_libs\parsers.pyx", line 712, in pandas._libs.parsers.TextReader._setup_parser_source (pandas\_libs\parsers.c:8895)
OSError: Initializing from file failed

समस्या विवरण

अजगर 3.6 ने sys.getfilesystemencoding () को "mbcs" के बजाय "utf-8" वापस करने के लिए बदल दिया
पीईपी 529 देखें।

कैसे ठीक करना है

यहाँ समस्या है: parsers.pyx

if isinstance(source, basestring):
     if not isinstance(source, bytes):
         source = source.encode(sys.getfilesystemencoding() or 'utf-8')

स्रोत पैरामीटर हमारा फ़ाइल नाम है, और इसे 'utf-8' में एन्कोड किया जाएगा, न कि अजगर 3.6 में विरासत 'mbcs' में
और अंत में io.c:new_file_source . में open() में
इस प्रकार एक एमबीसीएस स्ट्रिंग के रूप में व्याख्या की गई है, इसलिए, "फ़ाइल नहीं मिली" अपवाद आश्चर्यचकित नहीं है
शायद यह विंडोज़ एपीआई के यूनिकोड संस्करण का उपयोग करके इन चीजों को संभालने के लिए अजगर 3.6 के लिए साइथन की जिम्मेदारी होनी चाहिए,
लेकिन अभी के लिए, हम सिर्फ sys.getfilesystemencoding() को "mbcs" में बदल देते हैं