Из virtualenv, pip freeze> requirements.txt дают ТОНЫ мусора! Как обрезать его?

Ответ 1

Это одна вещь, которая слишком сильно подслушивала меня. Это происходит, когда вы создаете virtualenv без флага --no-site-packages.

Есть несколько вещей, которые вы можете сделать:

• Создать virtualenv с флагом --no-site-packages.
• При установке приложений не запускайте pip install <name> напрямую, вместо этого сначала добавьте библиотеку в свой requirements.txt, а затем установите требования. Это происходит медленнее, но гарантирует, что ваши требования будут обновлены.
• Вручную удалять библиотеки, которые вам не нужны. Следующее правило для этого - добавить все, что есть в моих адаптерах INSTALLED_APPS и базы данных. Большинство других требуемых библиотек будут автоматически установлены из-за зависимостей. Я знаю его глупо, но это то, что я обычно делаю.

- Изменить -

С тех пор я написал пару скриптов, чтобы справиться с этим. Первый запускает pip freeze и добавляет найденную библиотеку к предоставленному файлу требований, а другой запускает установку pip, а затем добавляет ее в файл требований.

function pipa() {
    # Adds package to requirements file.
    # Usage: pipa <package> <path to requirements file>
    package_name=$1
    requirements_file=$2
    if [[ -z $requirements_file ]]
    then
        requirements_file='./requirements.txt'
    fi
    package_string=`pip freeze | grep -i $package_name`
    current_requirements=`cat $requirements_file`
    echo "$current_requirements\n$package_string" | LANG=C sort | uniq > $requirements_file
}

function pipia() {
    # Installs package and adds to requirements file.
    # Usage: pipia <package> <path to requirements file>
    package_name=$1
    requirements_file=$2
    if [[ -z $requirements_file ]]
    then
        requirements_file='./requirements.txt'
    fi
    pip install $package_name
    pipa $package_name $requirements_file
}

Ответ 2

Если вы заботитесь о чистоте вашего requirements.txt, вы должны использовать не только параметр --no-site-packages, как уже упоминалось, но также подумайте о том, чтобы не транслировать вывод pip freeze прямо на ваш requirements.txt. Причиной этого является то, что при выполнении pip freeze отображаются не только указанные вами пакеты, но и зависимости, установленные этими пакетами! Нет необходимости хранить их в своем requirements.txt, поскольку они автоматически устанавливаются с пакетом, который требует их... Поэтому, если вы добавите новый пакет в свой virtualenv, вы, вероятно, должны просто добавить строку для этого пакета в свой requirements.txt...

См. этот пример:

(demo)[~]$ pip freeze
distribute==0.6.19
wsgiref==0.1.2
(demo)[~]$ pip install django-blog-zinnia
Downloading/unpacking django-blog-zinnia
  Downloading django-blog-zinnia-0.9.tar.gz (523Kb): 523Kb downloaded
  Running setup.py egg_info for package django-blog-zinnia

    no previously-included directories found matching 'docs/api'
    no previously-included directories found matching 'docs/build'
    no previously-included directories found matching 'docs/coverage'
    no previously-included directories found matching 'zinnia/media/zinnia/css/.sass-cache'
Downloading/unpacking BeautifulSoup>=3.2.0 (from django-blog-zinnia)
  Downloading BeautifulSoup-3.2.1.tar.gz
  Running setup.py egg_info for package BeautifulSoup

  # truncated as it installs some more dependencies
Successfully installed django-blog-zinnia BeautifulSoup django-mptt django-tagging django-xmlrpc pyparsing
Cleaning up...
(demo)[~]$ pip freeze
BeautifulSoup==3.2.1
distribute==0.6.19
django-blog-zinnia==0.9
django-mptt==0.5.2
django-tagging==0.3.1
django-xmlrpc==0.1.3
pyparsing==1.5.6
wsgiref==0.1.2

(Хотя я, вероятно, должен был упомянуть, что в большинстве случаев это не повредит тем, что у вас есть эти зависимости там, только ваш файл будет расти и будет сложнее поддерживать.)

Ответ 3

pipreqs решает проблему. Он генерирует файл уровня проекта..

• Установить pipreqs: pip install pipreqs
• Сгенерировать файл требования .txt на уровне проекта: pipreqs /path/to/your/project/ файл требований будет сохранен в /path/to/your/project/requirements.txt

Ответ 4

У меня то же самое, когда я использую команду pip3 freeze в virtualenv. Но все работает в pip freeze

Я деактивирую свой virtualenv и обновляю virtualenv. И использую pip3 install virtualenv чтобы убедиться, что мой virtualenv работает на pip или pip3.

Ответ 5

Вы можете использовать следующее в вашей виртуальной среде

pip freeze -l > requirements.txt

Это напишет пакеты Python, которые находятся только в вашей виртуальной среде.