Pipenv: Pipfile.lock에서 requirements.txt 생성

Pipenv는 이에 대한 방법을 제공하지 않습니다. pipfile-requirements 와 같은 다른 pipfile 유틸리티 라이브러리를 찾을 수 있습니다.

당신은 실행할 수 있습니다

pipenv run pip freeze > requirements.txt

당신은 실행할 수 있습니다

pipenv run pip freeze > requirements.txt

그것이 첫 번째 게시물에서 해결 방법으로 언급 한 것입니다.

그러나 이것은 pipenv 환경이 동기화된 경우에만 작동합니다(모든 패키지가 설치됨).
Pipfile.lock 에서 직접 종속성을 추출하는 것이 더 편리합니다.

jq -r '.default
        | to_entries[]
        | .key + .value.version' \
    Pipfile.lock > requirements.txt

블로그 게시물
jq 도구

LOL, 나는 이미 그 라이브러리에 대해 언급했습니다.

저는 개인적으로 전용 라이브러리가 있는 것을 싫어합니다. 또한 팀원이 이미 jq 또는 기타 범용 도구를 설치했을 가능성이 더 높습니다.

당신은 심지어 실행할 수 있습니다

 pipenv lock --requirements > requirements.txt

내가 쓴 것처럼 예상대로 작동하지 않습니다.

pipenv lock -r 를 실행하면 기존 Pipfile.lock 를 무시하고 다시 잠금 프로세스를 수행합니다.

즉, 업데이트를 수행하여 잠재적으로 배포를 파괴할 수 있습니다. requirements.txt 를 생성하여 Dockerfile에서 도커 이미지를 빌드하는 데 사용한다고 상상해 보십시오. 응용 프로그램은 로컬에서 작동하지만 pipenv lock #$ 를 사용하여 $ requirements.txt 를 생성하면 요구 사항이 호환되지 않거나 손상된 버전으로 업데이트될 수 있습니다(희귀한 경우이지만). 그리고 당신은 이미지를 실행하기 전에 이것을 알지 못할 것입니다. 따라서 pipenv lock 를 실행한 후 앱을 다시 테스트해야 합니다.

jq 를 사용하지 않으려면 pipenv sync (업데이트하지 않음)로 첫 번째 게시물에서 제안한 접근 방식을 사용하는 것이 좋습니다.

@Zebradil 귀하의 jq oneliner 접근 방식은 이미 jq 를 설치했기 때문에 @frostming 자체 pipfile-requirements 패키지(100개 이상의 라인 파이썬 코드)보다 훨씬 간단합니다. 다른 종속성은 없습니다. 필수입니다. 훌륭합니다.

그러나 몇 가지 git 커밋 후에 pipenv lock --requirements 출력과 jq Pipfile.lock 파일을 통해 수집하고 출력하는 것의 차이점을 발견했습니다.

• jq 출력에는 -i https://pypi.org/simple 가 맨 처음 행으로 포함되지 않고 pipenv lock --r 가 항상 맨 처음 행으로 삽입되는 것과는 대조적입니다.
• jq 출력에는 패키지에 대한 주석이 포함되지 않습니다. 예: pipenv lock --r 출력에는 appnope==0.1.0 ; sys_platform == 'darwin' 행이 있지만 jq 출력에서는 appnope==0.1.0 입니다. 또 다른 예는 pipenv lock -r 가 pexpect==4.7.0 ; sys_platform != 'win32' $를 생성하는 반면 jq 는 pexpect==4.7.0 $를 생성하는데 이것이 중요한지 아닌지 확실하지 않습니다.
• 요구 사항 파일 패키지 순서는 두 출력 간에 다릅니다. jq Pipfile.lock 파일에서 패키지 순서를 취하는 것으로 추정되며 항상 알파벳과 문자 길이의 오름차순으로 정렬됩니다. 예를 들어 flask 는 flask-sqlalchemy 앞에 있습니다. flask-XXXXX 패키지인 반면 pipenv lock --r $ 는 flask-sqlalchemy flask $ 를 출력합니다. 이는 Pipfile.lock 의 순서와 다릅니다. 이것은 최소 git diff를 생성하지 않기 때문에 주요 성가심입니다. 나는 이것이 pipenv 의 버그라고 생각합니다.

안녕하세요 @ye님 , 방법을 잘 비교했습니다. 사람들이 특정 상황에 적합한 솔루션을 선택하고 경고를 피하는 데 도움이 될 수 있습니다.

네, 말씀하신 것처럼 jq 로 제안된 접근 방식은 기능이 제한적입니다. 주석 및 패키지 색인 URL을 추가하도록 확장할 수 있지만 지금은 그럴 필요가 없습니다.

생성된 requirements.txt에 차이가 발생하지 않도록 하려면 매번 동일한 접근 방식을 사용하는 것을 고려해야 합니다. 비슷한 방식으로 다른 코드 서식 지정 도구를 사용하면 결과가 일관되지 않을 수 있습니다. 그래서 저는 여기에 문제가 없다고 봅니다.

당신은 실행할 수 있습니다

pipenv run pip freeze > requirements.txt

그것이 첫 번째 게시물에서 해결 방법으로 언급 한 것입니다.

그러나 이것은 pipenv 환경이 동기화된 경우에만 작동합니다(모든 패키지가 설치됨).
Pipfile.lock 에서 직접 종속성을 추출하는 것이 더 편리합니다.

jq -r '.default
        | to_entries[]
        | .key + .value.version' \
    Pipfile.lock > requirements.txt

블로그 게시물
jq 도구

안녕,

솔루션에 감사드립니다. 나는 같은 문제에 부딪쳤지 pipenv lock -r 에 의해 생성된 소스의 정의도 필요합니다. 예: -i, --extra-index-url. 개인 소스로 작업하기 때문입니다.

@Zebradil 말씀하신 것 같은데요.

그래서 파이썬에서 해당 기능을 포함하는 또 다른 최소한 의 종속성 없는 스크립트를 만들었습니다. 또한 Pipfile에서 소스를 그렇게 정의한 경우 env vars를 확장합니다.

누구든지 살펴보고 싶다면 여기에 남겨 두겠습니다. https://gist.github.com/rcastill/dab85c234dd10fa7af56755116c75aee

다른 사람에게 도움이 되는 경우 결과에 해시를 포함하는 방법은 다음과 같습니다.

 jq --raw-output '.default | to_entries[] | .key + .value.version + (.value.hashes | map(" --hash=\(.)") | join(""))' Pipfile.lock

이렇게 하면 다음과 같은 항목이 생성됩니다.

paramiko==2.6.0 --hash=sha256:99f0179bdc176281d21961a003ffdb2ec369daac1a1007241f53374e3766576cf --hash=sha256:f4b2edfa0d226b

pip 가 해시를 적용하도록 합니다.

원래 요구 사항 파일에 있던 요구 사항만 포함하려는 경우( == 를 사용하여 특정 버전에 이미 잠겨 있는 경우):

 jq --raw-output '.default | to_entries[] | .key + .value.version + (.value.hashes | map(" --hash=\(.)") | join(""))' Pipfile.lock | grep --file=<(grep --only-matching --perl-regexp '^.*(?===)' requirements.txt | tr '[:upper:]' '[:lower:]') > new.txt && mv new.txt requirements.txt

tr 는 requirements.txt 파일에 대소문자가 혼합된 패키지 이름이 포함될 수 있지만 Pipfile에서 pipenv install -r requirements.txt 가 소문자이기 때문에 필요합니다.

다음은 Pipfile (잠금 파일 아님)를 requirements.txt 파일로 변환하려는 경우를 위한 작은 파이썬 스크립트입니다.

import configparser


def main():
    parser = configparser.ConfigParser()
    parser.read("Pipfile")

    packages = "packages"
    with open("requirements.txt", "w") as f:
        for key in parser[packages]:
            value = parser[packages][key]
            f.write(key + value.replace("\"", "") + "\n")


if __name__ == "__main__":
    main()

@frostming 안녕하세요, https://github.com/frostming/pipfile-requirements 가 유용하지만 왜 pipenv에 통합되지 않았습니까?

@linusguan 이 도구는 큰 pipenv 라이브러리를 설치하고 싶지 않은 사람들을 위해 존재합니다. pipenv를 설치할 때 pipenv lock -r 를 사용할 수 있습니다.

@frostming pipfile.lock 을 지원하지 않는 다른 도구와 함께 사용하는 것이 매우 유용하다는 것을 알았습니다.
pipenv lock -r 의 문제는 pipfile.lock을 업데이트하므로 다른 도구와 함께 결정적 빌드를 생성하는 데 사용할 수 없다는 것입니다. pipenv lock -r --ignore-pipfile 와 같은 것이 이상적입니다.

다음은 해시가 있는 Pipfile.lock 파일에서 requirements.txt를 생성하는 또 다른 파이썬 스크립트입니다.

import os
import json

__dir__ = os.path.dirname(os.path.realpath(__file__))


def read_json_file(path):
    with open(path) as f:
        return json.load(f)


def main():
    root = read_json_file(os.path.join(__dir__, 'Pipfile.lock'))

    for name, pkg in root["default"].items():
        version = pkg["version"]
        sep = lambda i: "" if i == len(pkg["hashes"]) - 1 else " \\"
        hashes = [f'--hash={t}{sep(i)}' for i, t in enumerate(pkg["hashes"])]
        tail = '' if len(hashes) == 0 else f' {hashes[0]}'
        print(f'{name} {version}{tail}')
        for h in hashes[1:]:
            print(f'    {h}')


if __name__ == "__main__":
    main()

@Zebradil 감사합니다! 귀하의 솔루션은 정말 저에게 효과적이었습니다.

• 먼저 brew install jq 를 사용하여 $ jq 도구를 설치합니다.
• 그런 다음 스크립트를 사용하여 Pipfile.lock requirements.txt 를 생성했습니다.

--keep-outdated 플래그로 해결할 수 있는 것 같습니다. 아니면 제가 잘못 알고 있는 것입니까?

pipenv lock --keep-outdated -d -r > requirements.txt

추신: 이 문제를 해결하기 위해 짜증나게 장황한 플래그입니다.

불행히도 @jacobisaliveandwell --keep-outdated 플래그가 하위 종속성을 업데이트하는 것으로 나타납니다. https://github.com/pypa/pipenv/issues/3975

@paytonrules 버그지만 플래그의 정신은 여전히 ​​이 문제에 대한 답입니다.

추신: 그것에 대해 엄지손가락을 치울 필요가 없습니다 :-(

명시된 해결 방법과 차이점이 있음을 언급하고 싶습니다.
pipenv run pip freeze 는 대소문자를 구분하는 패키지 이름을 반환합니다(예: PyYAML ).
pipenv lock --requirements 는 모든 소문자 패키지 이름을 반환합니다(예: pyyaml ).

@Darkless012 이를 설명하는 다른 티켓을 열고 이 문제를 관련으로 참조해야 합니다.

누군가가 jq를 설치할 수 없거나 설치하기를 원하지 않는 경우를 대비하여 순수한 bash, 패키지만, 다른 것은 없습니다.

cat Pipfile.lock \
  | grep -B1 '"hashes"\|"version": ' \
  | grep -v '"markers": \|"hashes": ' \
  | grep ": {\|version" \
  | sed -e 's/: {$//g' \
  | tr '\n' ',' | tr -s ' ' ' ' \
  | sed -e 's/, "version": "//g;s/", "/ /g;s/"//g;s/,//g' \
  | tr ' ' '\n' \
| grep -v "^$" > requirements.txt

pip install --require-hashes 가 작동하도록 Pipfile의 해시를 requirements.txt(예: 플랫폼 str과 같은 것으로 제공)로 복사하는 것이 있습니까?

• https://pip.pypa.io/en/stable/reference/pip_install/#hash -checking-mode
• https://pip.pypa.io/en/stable/reference/pip_hash/

$ pip install --help
# ...
  --require-hashes            Require a hash to check each requirement against, for repeatable installs. This option is implied when any package in a
                              requirements file has a --hash option.

Pipenv.lock(poety.lock도 포함) 파일을 requirements.txt(raw requirements.txt 또는 pip-tools 호환 가능)로 변환할 수 있는 micropipenv를 사용할 수 있습니다. https://github.com/thoth-station/micropipenv/#micropipenv -requirements--micropipenv-req 참조