¿Cómo instalar paquetes sin conexión?

¿Cuál es la mejor manera de descargar un paquete de python y sus dependencias de pypi para la instalación fuera de línea en otra máquina? ¿Hay alguna manera fácil de hacer esto con pip o easy_install? Estoy tratando de instalar la biblioteca de solicitudes en un cuadro de FreeBSD que no está conectado a Internet.

Si el paquete está en PYPI, descárguelo y sus dependencias en algún directorio local. P.ej

$ mkdir / pypi && cd / pypi
$ ls -la
  -rw-r - r-- 1 personal de pavel 237954 19 de abril 11:31 Frasco-WTF-0.6.tar.gz
  -rw-r - r-- 1 personal de pavel 389741 22 de febrero 17:10 Jinja2-2.6.tar.gz
  -rw-r - r-- 1 personal de pavel 70305 11 de abril 00:28 MySQL-python-1.2.3.tar.gz
  -rw-r - r-- 1 personal de pavel 2597214 10 de abril 18:26 SQLAlchemy-0.7.6.tar.gz
  -rw-r - r-- 1 personal de pavel 1108056 22 de febrero 17:10 Werkzeug-0.8.2.tar.gz
  -rw-r - r-- 1 personal de pavel 488207 10 de abril 18:26 boto-2.3.0.tar.gz
  -rw-r - r-- 1 personal de pavel 490192 16 de abril 12:00 frasco-0.9-dev-2a6c80a.tar.gz

Algunos paquetes pueden tener que archivarse en tarballs de aspecto similar a mano. Lo hago mucho cuando quiero una versión más reciente (menos estable) de algo. Algunos paquetes no están en PYPI, por lo que se aplica a ellos.

Supongamos que tiene una aplicación Python correctamente formada en ~/src/myapp. ~/src/myapp/setup.pytendrá una install_requireslista que menciona una o más cosas que tiene en su /pypidirectorio. Al igual que:

  install_requires=[
    'boto',
    'Flask',
    'Werkzeug',
    # and so on

Si quieres poder ejecutar tu aplicación con todas las dependencias necesarias mientras la pirateas, harás algo como esto:

$ cd ~ / src / myapp
$ python setup.py desarrollo - siempre-descomprimir --allow-hosts = Ninguno --find-links = / pypi

De esta manera, su aplicación se ejecutará directamente desde su directorio de origen. Puedes hackear cosas y luego volver a ejecutar la aplicación sin reconstruir nada.

Si desea instalar su aplicación y sus dependencias en el entorno actual de Python, hará algo como esto:

$ cd ~ / src / myapp
$ easy_install --always-unzip --allow-hosts = None --find-links = / pypi.

En ambos casos, la compilación fallará si una o más dependencias no están presentes en el /pypidirectorio. No intentará instalar de manera promiscua las cosas faltantes de Internet.

Recomiendo invocar setup.py develop ...y easy_install ...dentro de un entorno virtual activo para evitar contaminar su entorno global de Python. Es (virtualenv que es) más o menos el camino a seguir. Nunca instales nada en el entorno global de Python.

Si la máquina en la que ha creado su aplicación tiene la misma arquitectura que la máquina en la que desea implementarla, puede simplemente tarball todo el directorio del entorno virtual en el que easy_installintrodujo todo. Sin embargo, justo antes de tarballing, debe hacer que el directorio del entorno virtual sea reubicable (consulte la opción --relocatable ). NOTA: la máquina de destino debe tener instalada la misma versión de Python, y también las dependencias basadas en C que pueda tener su aplicación también deben estar preinstaladas allí (por ejemplo, si depende de PIL , debe estar preinstalado libpng, libjpeg, etc.) .

El downloadcomando pip le permite descargar paquetes sin instalarlos:

pip download -r requirements.txt

(En versiones anteriores de pip, esto se deletreaba pip install --download -r requirements.txt).

Luego puede usar pip install --no-index --find-links /path/to/download/dir/ -r requirements.txtpara instalar esos sdists descargados, sin acceder a la red.

Si desea instalar libs de python y sus dependencias fuera de línea, termine de seguir estos pasos en una máquina con el mismo sistema operativo, red conectada y python instalado:

1) Cree un requirements.txtarchivo con contenido similar (Nota: estas son las bibliotecas que desea descargar):

Flask==0.12
requests>=2.7.0
scikit-learn==0.19.1
numpy==1.14.3
pandas==0.22.0

Una opción para crear el archivo de requisitos es usar pip freeze > requirements.txt. Esto enumerará todas las bibliotecas en su entorno. Luego puede entrar requirements.txty eliminar los innecesarios.

2) Ejecute el comando mkdir wheelhouse && pip download -r requirements.txt -d wheelhousepara descargar libs y sus dependencias en el directoriowheelhouse

3) Copie requerimientos.txt en el wheelhousedirectorio

4) Archivar la timonera wheelhouse.tar.gzcontar -zcf wheelhouse.tar.gz wheelhouse

Luego cargue wheelhouse.tar.gzen su máquina de destino:

1) Ejecutar tar -zxf wheelhouse.tar.gzpara extraer los archivos

2) Ejecutar pip install -r wheelhouse/requirements.txt --no-index --find-links wheelhousepara instalar las librerías y sus dependencias

Python sin conexión. para hacer esto uso virtualenv (entorno aislado de Python)

1) instalar virtualenv en línea con pip:

pip install virtualenv --user

o fuera de línea con whl: vaya a este enlace , descargue la última versión (.whl o tar.gz) e instálela con este comando:

pip install virtualenv-15.1.0-py2.py3-none-any.whl --user

al usar --userno necesitas usar sudo pip….

2) usa virtualenv

en la máquina en línea, seleccione un directorio con terminal cdy ejecute este código:

python -m virtualenv myenv
cd myenv
source bin/activate
pip install Flask

después de instalar todos los paquetes, debe generar un mensaje de texto requirements.txtmientras su virtualenv está activo, escriba

pip freeze > requirements.txt

abrir una nueva terminal y crear otro entorno como myenv2.

python -m virtualenv myenv2
cd myenv2
source bin/activate
cd -
ls

ahora puede ir a su carpeta sin conexión donde están su carpeta requirements.txty tranferred_packagesallí. descargue los paquetes con el siguiente código y póngalos todos en la tranferred_packagescarpeta.

pip download -r requirements.txt

lleve su carpeta fuera de línea a la computadora fuera de línea y luego

python -m virtualenv myenv2
cd myenv2
source bin/activate
cd -
cd offline
pip install --no-index --find-links="./tranferred_packages" -r requirements.txt

lo que está en la carpeta fuera de línea [required.txt, tranferred_packages {Flask-0.10.1.tar.gz, ...}]

lista de verificación de su paquete

pip list

nota: como estamos en 2017, es mejor usar python 3. puede crear python 3 virtualenv con este comando.

virtualenv -p python3 envname

Descargue el tarball , transfiéralo a su máquina FreeBSD y extráigalo, luego ejecútelo python setup.py instally listo.

EDITAR: solo para agregar eso, también puede instalar los tarballs con pip ahora.

Déjame pasar por el proceso paso a paso:

1. En una computadora conectada a Internet, cree una carpeta.

   $ mkdir packages
   $ cd packages

2. abra un símbolo del sistema o shell y ejecute el siguiente comando:

   Supongamos que el paquete que quieres es tensorflow

   $ pip download tensorflow

3. Ahora, en la computadora de destino, copie la packagescarpeta y aplique el siguiente comando

  $ cd packages
  $ pip install 'tensorflow-xyz.whl' --no-index --find-links '.'

Tenga en cuenta que tensorflow-xyz.whldebe reemplazarse por el nombre original del paquete requerido.

Utilizando wheelpaquetes compilados.

abrigarse:

$ tempdir=$(mktemp -d /tmp/wheelhouse-XXXXX)
$ pip wheel -r requirements.txt --wheel-dir=$tempdir
$ cwd=`pwd`
$ (cd "$tempdir"; tar -cjvf "$cwd/bundled.tar.bz2" *)

copiar tarball e instalar:

$ tempdir=$(mktemp -d /tmp/wheelhouse-XXXXX)
$ (cd $tempdir; tar -xvf /path/to/bundled.tar.bz2)
$ pip install --force-reinstall --ignore-installed --upgrade --no-index --no-deps $tempdir/*

Tenga en cuenta que wheellos paquetes binarios no están en las máquinas.

Más ref. aquí: https://pip.pypa.io/en/stable/user_guide/#installation-bundles

Tuve un problema similar. Y tuve que hacerlo instalar de la misma manera, lo hacemos desde pypi.

Hice las siguientes cosas:

1. Haga un directorio para almacenar todos los paquetes en la máquina que tienen acceso a Internet.

   mkdir -p /path/to/packages/

2. Descargue todos los paquetes a la ruta

   pip download -r requirements.txt -d /path/to/packages
   
   Eg:- ls /root/wheelhouse/  # **/root/wheelhouse** is my **/path/to/packages/**
   total 4524
   -rw-r--r--. 1 root root   16667 May 23  2017 incremental-17.5.0-py2.py3-none-any.whl
   -rw-r--r--. 1 root root   34713 Sep  1 10:21 attrs-18.2.0-py2.py3-none-any.whl
   -rw-r--r--. 1 root root 3088398 Oct 15 14:41 Twisted-18.9.0.tar.bz2
   -rw-r--r--. 1 root root  133356 Jan 28 15:58 chardet-3.0.4-py2.py3-none-any.whl
   -rw-r--r--. 1 root root  154154 Jan 28 15:58 certifi-2018.11.29-py2.py3-none-any.whl
   -rw-r--r--. 1 root root   57987 Jan 28 15:58 requests-2.21.0-py2.py3-none-any.whl
   -rw-r--r--. 1 root root   58594 Jan 28 15:58 idna-2.8-py2.py3-none-any.whl
   -rw-r--r--. 1 root root  118086 Jan 28 15:59 urllib3-1.24.1-py2.py3-none-any.whl
   -rw-r--r--. 1 root root   47229 Jan 28 15:59 tqdm-4.30.0-py2.py3-none-any.whl
   -rw-r--r--. 1 root root    7922 Jan 28 16:13 constantly-15.1.0-py2.py3-none-any.whl
   -rw-r--r--. 1 root root  164706 Jan 28 16:14 zope.interface-4.6.0-cp27-cp27mu-manylinux1_x86_64.whl
   -rw-r--r--. 1 root root  573841 Jan 28 16:14 setuptools-40.7.0-py2.py3-none-any.whl
   -rw-r--r--. 1 root root   37638 Jan 28 16:15 Automat-0.7.0-py2.py3-none-any.whl
   -rw-r--r--. 1 root root   37905 Jan 28 16:15 hyperlink-18.0.0-py2.py3-none-any.whl
   -rw-r--r--. 1 root root   52311 Jan 28 16:15 PyHamcrest-1.9.0-py2.py3-none-any.whl
   -rw-r--r--. 1 root root   10586 Jan 28 16:15 six-1.12.0-py2.py3-none-any.whl

3. Asfalte el directorio de paquetes y cópielo en la máquina que no tiene acceso a Internet. Entonces hazlo,

   cd /path/to/packages/
   tar -cvzf packages.tar.gz .  # not the . (dot) at the end

   Copie los paquetes.tar.gz en la máquina de destino que no tiene acceso a Internet.

4. En la máquina que no tiene acceso a Internet, haga lo siguiente (suponiendo que haya copiado los paquetes tarred a / path / to / package / en la máquina actual)

   cd /path/to/packages/
   tar -xvzf packages.tar.gz
   mkdir -p $HOME/.config/pip/
   
   vi $HOME/.config/pip/pip.conf

   y pegue el siguiente contenido dentro y guárdelo.

   [global]
   timeout = 10
   find-links = file:///path/to/package/
   no-cache-dir = true
   no-index = true

5. Finalmente, le sugiero que use alguna forma de virtualenvinstalar los paquetes.

   virtualenv -p python2 venv # use python3, if you are on python3
   source ./venv/bin/activate
   pip install <package>

Debería poder descargar todos los módulos que están en el directorio / ruta / a / paquete / .

Nota: Solo hice esto, porque no pude agregar opciones o cambiar la forma en que instalamos los módulos. De lo contrario lo hubiera hecho

    pip install --no-index --find-links /path/to/download/dir/ -r requirements.txt

Para Pip 8.1.2 puede usar pip download -r requ.txtpara descargar paquetes a su máquina local.