<p>virtualenv --always-copy가 CentOS에서 실패합니다(lib64 문제?)</p>

에 만든 2019년 03월 05일 · 12코멘트 · 출처: pypa/virtualenv

/lib64 디렉토리를 사용하는 플랫폼에서 --always-copy 로 virtualenv를 생성하는 것은 불가능해 보입니다.

CentOS 7.6에서는 시스템 패키지(python 2.7.5 , virtualenv 15.1.0 )와 SCL을 통해 설치된 패키지 모두에서 동일한 일이 발생합니다.
관련될 수 있는 일부 티켓(#985, #1192, #3477, https://github.com/FPGAwars/icestudio/issues/244)과 문제를 해결하는 것으로 추정되는 병합된 pull 요청(#1189)이 있습니다. 그러나 여전히 잘못된 일이 일어나고 있다는 인상을 받았습니다.

SCL을 사용한 예(Python 3.6.3 , virtualenv는 수동으로 16.4.3 으로 업그레이드됨).
첫 번째 오류는 virtualenv_support/pip-19.0.3-py2.py3-none-any.whl 에서 발생하는 것 같습니다.

  File "<scl_base>/lib64/python3.6/socket.py", line 49, in <module>
    import _socket
ModuleNotFoundError: No module named '_socket'

컨텍스트에서 보려면 로그를 완료하십시오.

$ <scl_base>/bin/virtualenv --python <scl_base>/bin/python --always-copy --verbose TEST
Running virtualenv with interpreter <scl_base>/bin/python
Using base prefix '<scl_base>'
Creating <somedir>/TEST/lib/python3.6
Copying to <somedir>/TEST/lib64
Symlinking Python bootstrap modules
  Copying to <somedir>/TEST/lib/python3.6/config-3.6m-x86_64-linux-gnu
  Copying to <somedir>/TEST/lib/python3.6/lib-dynload
  Copying to <somedir>/TEST/lib64/python3.6/os.py
  Ignoring built-in bootstrap module: posix
  Copying to <somedir>/TEST/lib64/python3.6/posixpath.py
  Cannot import bootstrap module: nt
  Copying to <somedir>/TEST/lib64/python3.6/ntpath.py
  Copying to <somedir>/TEST/lib64/python3.6/genericpath.py
  Copying to <somedir>/TEST/lib64/python3.6/fnmatch.py
  Copying to <somedir>/TEST/lib64/python3.6/locale.py
  Copying to <somedir>/TEST/lib64/python3.6/encodings
  Copying to <somedir>/TEST/lib64/python3.6/codecs.py
  Copying to <somedir>/TEST/lib64/python3.6/stat.py
  Cannot import bootstrap module: UserDict
  Creating parent directories for <somedir>/TEST/lib64/python3.6/lib-dynload
  Copying to <somedir>/TEST/lib64/python3.6/lib-dynload/readline.cpython-36m-x86_64-linux-gnu.so
  Cannot import bootstrap module: copy_reg
  Copying to <somedir>/TEST/lib64/python3.6/types.py
  Copying to <somedir>/TEST/lib64/python3.6/re.py
  Cannot import bootstrap module: sre
  Copying to <somedir>/TEST/lib64/python3.6/sre_parse.py
  Copying to <somedir>/TEST/lib64/python3.6/sre_constants.py
  Copying to <somedir>/TEST/lib64/python3.6/sre_compile.py
  Copying to <somedir>/TEST/lib64/python3.6/lib-dynload/zlib.cpython-36m-x86_64-linux-gnu.so
  Cannot import bootstrap module: _abcoll
  Copying to <somedir>/TEST/lib64/python3.6/warnings.py
  Copying to <somedir>/TEST/lib64/python3.6/linecache.py
  Copying to <somedir>/TEST/lib64/python3.6/abc.py
  Copying to <somedir>/TEST/lib64/python3.6/io.py
  Copying to <somedir>/TEST/lib64/python3.6/_weakrefset.py
  Copying to <somedir>/TEST/lib64/python3.6/copyreg.py
  Copying to <somedir>/TEST/lib64/python3.6/tempfile.py
  Copying to <somedir>/TEST/lib64/python3.6/random.py
  Copying to <somedir>/TEST/lib64/python3.6/__future__.py
  Copying to <somedir>/TEST/lib64/python3.6/collections
  Copying to <somedir>/TEST/lib64/python3.6/keyword.py
  Copying to <somedir>/TEST/lib64/python3.6/tarfile.py
  Copying to <somedir>/TEST/lib64/python3.6/shutil.py
  Copying to <somedir>/TEST/lib64/python3.6/struct.py
  Copying to <somedir>/TEST/lib64/python3.6/copy.py
  Copying to <somedir>/TEST/lib64/python3.6/tokenize.py
  Copying to <somedir>/TEST/lib64/python3.6/token.py
  Copying to <somedir>/TEST/lib64/python3.6/functools.py
  Copying to <somedir>/TEST/lib64/python3.6/heapq.py
  Copying to <somedir>/TEST/lib64/python3.6/bisect.py
  Copying to <somedir>/TEST/lib64/python3.6/weakref.py
  Copying to <somedir>/TEST/lib64/python3.6/reprlib.py
  Copying to <somedir>/TEST/lib64/python3.6/base64.py
  Copying to <somedir>/TEST/lib64/python3.6/_dummy_thread.py
  Copying to <somedir>/TEST/lib64/python3.6/hashlib.py
  Copying to <somedir>/TEST/lib64/python3.6/hmac.py
  Copying to <somedir>/TEST/lib64/python3.6/imp.py
  Copying to <somedir>/TEST/lib64/python3.6/importlib
  Copying to <somedir>/TEST/lib64/python3.6/rlcompleter.py
  Copying to <somedir>/TEST/lib64/python3.6/operator.py
  Copying to <somedir>/TEST/lib64/python3.6/_collections_abc.py
  Copying to <somedir>/TEST/lib64/python3.6/_bootlocale.py
  Copying to <somedir>/TEST/lib64/python3.6/enum.py
  No LICENSE.txt / LICENSE found in source
Creating <somedir>/TEST/lib/python3.6/site-packages
Writing <somedir>/TEST/lib64/python3.6/site.py
Writing <somedir>/TEST/lib64/python3.6/orig-prefix.txt
Writing <somedir>/TEST/lib64/python3.6/no-global-site-packages.txt
Creating <somedir>/TEST/bin
New python executable in <somedir>/TEST/bin/python
Changed mode of <somedir>/TEST/bin/python to 0o775
Copying to <somedir>/TEST/bin/python3
Copying to <somedir>/TEST/bin/python3.6
Testing executable with <somedir>/TEST/bin/python -c "import sys;out=sys.stdout;getattr(out, "buffer", out).write(sys.prefix.encode("utf-8"))"
Got sys.prefix result: '<somedir>/TEST'
Creating <somedir>/TEST/lib64/python3.6/distutils
Writing <somedir>/TEST/lib64/python3.6/distutils/__init__.py
Writing <somedir>/TEST/lib64/python3.6/distutils/distutils.cfg
Traceback (most recent call last):
  File "<scl_base>/lib64/python3.6/runpy.py", line 193, in _run_module_as_main
    "__main__", mod_spec)
  File "<scl_base>/lib64/python3.6/runpy.py", line 85, in _run_code
    exec(code, run_globals)
  File "<scl_base>/usr/lib/python3.6/site-packages/virtualenv_support/pip-19.0.3-py2.py3-none-any.whl/pip/__main__.py", line 16, in <module>
  File "<scl_base>/usr/lib/python3.6/site-packages/virtualenv_support/pip-19.0.3-py2.py3-none-any.whl/pip/_internal/__init__.py", line 19, in <module>
  File "<scl_base>/usr/lib/python3.6/site-packages/virtualenv_support/pip-19.0.3-py2.py3-none-any.whl/pip/_vendor/urllib3/__init__.py", line 8, in <module>
  File "<scl_base>/usr/lib/python3.6/site-packages/virtualenv_support/pip-19.0.3-py2.py3-none-any.whl/pip/_vendor/urllib3/connectionpool.py", line 7, in <module>
  File "<scl_base>/lib64/python3.6/socket.py", line 49, in <module>
    import _socket
ModuleNotFoundError: No module named '_socket'
Command <somedir>/TEST/bin/python -m pip config list had error code 1
Installing setuptools, pip, wheel...

  Traceback (most recent call last):
    File "<stdin>", line 4, in <module>
    File "<somedir>/TEST/lib64/python3.6/tempfile.py", line 45, in <module>
      from random import Random as _Random
    File "<somedir>/TEST/lib64/python3.6/random.py", line 42, in <module>
      from math import log as _log, exp as _exp, pi as _pi, e as _e, ceil as _ceil
  ModuleNotFoundError: No module named 'math'
  Complete output from command <somedir>/TEST/bin/python - setuptools pip wheel:
  Traceback (most recent call last):
  File "<stdin>", line 4, in <module>
  File "<somedir>/TEST/lib64/python3.6/tempfile.py", line 45, in <module>
    from random import Random as _Random
  File "<somedir>/TEST/lib64/python3.6/random.py", line 42, in <module>
    from math import log as _log, exp as _exp, pi as _pi, e as _e, ceil as _ceil
ModuleNotFoundError: No module named 'math'
----------------------------------------
...Installing setuptools, pip, wheel...done.
Traceback (most recent call last):
  File "<scl_base>/usr/lib/python3.6/site-packages/virtualenv.py", line 2567, in <module>
    main()
  File "<scl_base>/usr/lib/python3.6/site-packages/virtualenv.py", line 793, in main
    symlink=options.symlink,
  File "<scl_base>/usr/lib/python3.6/site-packages/virtualenv.py", line 1088, in create_environment
    install_wheel(to_install, py_executable, search_dirs, download=download)
  File "<scl_base>/usr/lib/python3.6/site-packages/virtualenv.py", line 935, in install_wheel
    _install_wheel_with_search_dir(download, project_names, py_executable, search_dirs)
  File "<scl_base>/usr/lib/python3.6/site-packages/virtualenv.py", line 1025, in _install_wheel_with_search_dir
    call_subprocess(cmd, show_stdout=False, extra_env=env, stdin=script)
  File "<scl_base>/usr/lib/python3.6/site-packages/virtualenv.py", line 886, in call_subprocess
    raise OSError("Command {} failed with error code {}".format(cmd_desc, proc.returncode))
OSError: Command <somedir>/TEST/bin/python - setuptools pip wheel failed with error code 1

나는 운이 없이 정말 많은 조합(많은 버전, PATH 및 PYTHONPATH 사용)을 시도했습니다. 도움을 주시면 감사하겠습니다.

bug

출처

muxator

가장 유용한 댓글

venv pip에는 다음이 있으며 오류를 출력합니다.
!"/mnt/c/Users/Artem Russakovskii/Dropbox/workspace/SNIP.test/SNIP/env-linux/bin/python3"

이것은 당신이 발견한 못생긴 버그입니다. 외관상 일부 bash 스크립트에서 누락된 따옴표로 보입니다(이것이 간과되는 빈도를 감안할 때 놀라지 않을 것입니다).

이런 종류의 물건은 나에게 가려움증을 긁기 때문에 찾으려고 노력할 것입니다. 그것은 당신의 문제를 해결하지 못하지만 적어도 우리는 누군가를 위해 좋은 것을 얻을 것입니다.

muxator 에 2019년 10월 31일

👍2

모든 12 댓글

안녕하세요, 이 버그가 사라지기 전에 수정이 필요한 미래 사용자를 위한 정보입니다.

내 프로젝트가 python3 에 있으므로 다음과 같이 문제를 대체했습니다.

virtualenv --always-copy

~와 함께

python -m venv --copies

이것은 CentOS 7.x ( ModuleNotFoundError: No module named '_socket' 및 ModuleNotFoundError: No module named 'math' )에서 작동하며 본질적으로 내 프로젝트에서 실행 가능한 선택이었던 virtualenv에서 멀어졌습니다.

muxator 에 2019년 03월 07일

👍1

그래서 옵션 이름이 바뀌었나요?
IMO, (의미가 같다면 최소한) (기존) --always-copy long 옵션은 (new) --copies 옵션의 별칭으로 지원되어야 합니다. 이것은 어렵지 않아야 합니다. optparse 옵션에서는 문제가 없었습니다. 여기서 발견된 첫 번째 긴 옵션 문자열은 기본 dest 대해 취해진 것입니다.

tobiasherp 에 2019년 03월 08일

안녕하세요 @tobiasherp 입니다. 정확히는 아닙니다.

두 가지 옵션은 서로 다른 프로그램을 참조합니다. --always-copy 는 virtualenv 옵션이고 --copies 는 python -m venv 입니다.

내가 한 것은 virtualenv를 완전히 버리고 python3부터 시작하여 아무 것도 설치할 필요 없이 기본적으로 사용할 수 있는 -m venv 를 사용하는 것이며 제 경우에는 잘 작동합니다.

muxator 에 2019년 03월 08일

알 겠어요

Traceback (most recent call last):
  File "<stdin>", line 4, in <module>
  File "/tmp/tmp_6oib3xo/venv/lib64/python3.7/tempfile.py", line 45, in <module>
    from random import Random as _Random
  File "/tmp/tmp_6oib3xo/venv/lib64/python3.7/random.py", line 42, in <module>
    from math import log as _log, exp as _exp, pi as _pi, e as _e, ceil as _ceil
ModuleNotFoundError: No module named 'math'

tests/test_virtualenv.py::test_always_copy_option 를 실행하려고 할 때

hroncok 에 2019년 07월 12일

OpenSUSE 15.0 및 15.1에서 동일한 문제가 발생합니다.

virtualenv --always-copy temp
Using base prefix '/usr'
New python executable in /srv/www/htdocs/dev.SNIP.com/apk-downloader/temp/bin/python3
Also creating executable in /srv/www/htdocs/dev.SNIP.com/apk-downloader/temp/bin/python
Command /srv/www/htdocs/dev....der/temp/bin/python3 -m pip config list had error code 1
Installing setuptools, pip, wheel...

  Complete output from command /srv/www/htdocs/dev....der/temp/bin/python3 - setuptools pip wheel:
  Traceback (most recent call last):
  File "<stdin>", line 4, in <module>
  File "/srv/www/htdocs/dev.SNIP.com/apk-downloader/temp/lib64/python3.6/tempfile.py", line 45, in <module>
    from random import Random as _Random
  File "/srv/www/htdocs/dev.SNIP.com/apk-downloader/temp/lib64/python3.6/random.py", line 42, in <module>
    from math import log as _log, exp as _exp, pi as _pi, e as _e, ceil as _ceil
ModuleNotFoundError: No module named 'math'
----------------------------------------
...Installing setuptools, pip, wheel...done.
Traceback (most recent call last):
  File "/usr/bin/virtualenv", line 11, in <module>
    load_entry_point('virtualenv==16.7.5', 'console_scripts', 'virtualenv')()
  File "/usr/lib/python3.6/site-packages/virtualenv.py", line 870, in main
    symlink=options.symlink,
  File "/usr/lib/python3.6/site-packages/virtualenv.py", line 1173, in create_environment
    install_wheel(to_install, py_executable, search_dirs, download=download)
  File "/usr/lib/python3.6/site-packages/virtualenv.py", line 1019, in install_wheel
    _install_wheel_with_search_dir(download, project_names, py_executable, search_dirs)
  File "/usr/lib/python3.6/site-packages/virtualenv.py", line 1110, in _install_wheel_with_search_dir
    call_subprocess(cmd, show_stdout=False, extra_env=env, stdin=script)
  File "/usr/lib/python3.6/site-packages/virtualenv.py", line 963, in call_subprocess
    raise OSError("Command {} failed with error code {}".format(cmd_desc, proc.returncode))
OSError: Command /srv/www/htdocs/dev....der/temp/bin/python3 - setuptools pip wheel failed with error code 1

@gaborbernat 여기에 어떤 아이디어가 있습니까? --always-copy 없으면 올바르게 실행됩니다.

archon810 에 2019년 10월 30일

venv 해결 방법을 시도했지만 --copies 가 사용된 경우에도 여전히 심볼릭 링크를 생성한다는 것을 알았습니다. 왜요?

python3 -m venv --copies temp
SNIP<strong i="8">@pylon</strong>:/srv/www/htdocs/dev.SNIP.com/apk-downloader> l temp
total 24
drwxr-xr-x 5 SNIP users 4096 Oct 30 14:09 ./
drwxr-xr-x 7 SNIP users 4096 Oct 30 14:09 ../
drwxr-xr-x 2 SNIP users 4096 Oct 30 14:09 bin/
drwxr-xr-x 2 SNIP users 4096 Oct 30 14:09 include/
drwxr-xr-x 3 SNIP users 4096 Oct 30 14:09 lib/
lrwxrwxrwx 1 SNIP users    3 Oct 30 14:09 lib64 -> lib/
-rw-r--r-- 1 SNIP users   69 Oct 30 14:09 pyvenv.cfg

archon810 에 2019년 10월 30일

@archon810 , /lib64 , with python -m venv --copies 는 여전히 symlink이지만 운 좋게도 유일하게 남아 있습니다. --copies 없이 실행하고 다음 내용을 살펴보세요. /lib/pyhon3.6/site-packages : 많은 파일이 심볼릭 링크가 됩니다.

나는 그것이 당신의 필요에 충분한지 모르겠습니다. 나를 위해 사용 사례는 사용자가 자신의 virtualenv에서 작업하는 동안 실수로 다른 디렉토리의 파일 권한을 엉망으로 만들지 않았는지 확인하는 것이었습니다. 이 경우 /lib64는 virtualenv 디렉토리 구조 내에 있기 때문에 심볼릭 링크로 허용됩니다.

참고 사항: python3에서 기본적으로 venv 를 사용할 수 있으므로 어쨌든 virtualenv 사용을 중단했습니다.

muxator 에 2019년 10월 30일

Windows의 WSL 내, Dropbox 폴더에 Python 환경을 설정하려고 하는데 Dropbox가 심볼릭 링크로 인해 혼란스러워집니다. 이것은 내가 알아낼 수 있는 마지막 심볼릭 링크 세트이며, 이 수학 충돌이 발생하지 않았다면 virtualenv가 거의 거기에 있었습니다.

내 말은, venv에 rm 및 cp -R을 추가하고 해당 경로로 가려고 할 수 있지만 실제로 수행하는 작업을 수행하고 심볼릭 링크가 전혀 없다면 좋을 것입니다.

python3 -m venv --copies env-linux && rm env-linux/lib64 && cp -R env-linux/lib env-linux/lib64

archon810 에 2019년 10월 31일

Ughhh, venv 는 공백이 있는 디렉토리를 처리하지 않기 때문에 좋지 않습니다.

virtualenv pip에는 다음이 있으며 작동합니다.

#!/bin/sh
'''exec' "/mnt/c/Users/Artem Russakovskii/Dropbox/workspace/SNIP.test/SNIP/env-linux/bin/python3" "$0" "$@"
' '''

venv pip에는 다음이 있으며 오류를 출력합니다.

#!"/mnt/c/Users/Artem Russakovskii/Dropbox/workspace/SNIP.test/SNIP/env-linux/bin/python3"

bash: env-linux.new/bin/pip3: "/mnt/c/Users/Artem: bad interpreter: No such file or directory

archon810 에 2019년 10월 31일

이 math 문제가 최신 16.7.7 버전을 사용하여 존재함을 확인했습니다.

archon810 에 2019년 10월 31일

venv pip에는 다음이 있으며 오류를 출력합니다.
!"/mnt/c/Users/Artem Russakovskii/Dropbox/workspace/SNIP.test/SNIP/env-linux/bin/python3"

muxator 에 2019년 10월 31일

👍2

https://github.com/pypa/virtualenv/pull/1500 은 지금 이 문제를 완전히 해결해야 합니다.

gaborbernat 에 2020년 01월 18일

🎉1

이 페이지가 도움이 되었나요?

0 / 5 - 0 등급

<p>virtualenv --always-copy가 CentOS에서 실패합니다(lib64 문제?)</p>

가장 유용한 댓글

!"/mnt/c/Users/Artem Russakovskii/Dropbox/workspace/SNIP.test/SNIP/env-linux/bin/python3"

모든 12 댓글

!"/mnt/c/Users/Artem Russakovskii/Dropbox/workspace/SNIP.test/SNIP/env-linux/bin/python3"

관련 문제