2017-05-08 63 views
1

只有在requirements.txt更改时,如何才能运行目标make install使用Makefile安装python requirements.txt only requirements.txt已更改

我不想每次升级包,当我做make install

我找到了一些解决方法通过创建假的文件_requirements.txt.pyc丑陋。它会拒绝安装PIP要求第二次因为requirements.txt没有变化

$ make install-pip-requirements 
make: Nothing to be done for 'install-pip-requirements'. 

但我的目标是要做到:

# first time, 
$ make install # create virtual environment, install requirements 

# second time 
$ make install # detected and skipping creating virtual env, 
       # detect that requirements.txt have no changes 
       # and skipping installing again all python packages 
make: Nothing to be done for 'install'. 

Python包的样子:

. 
├── Makefile 
├── README.rst 
├── lambda_handler.py 
└── requirements.txt 

我使用文件,Makefile,用于python中的一些自动化:

/opt/virtual_env: 
    # create virtual env if folder not exists 
    python -m venv /opt/virtual_env 

virtual: /opt/virtual_env 

# if requirements.txt is modified than execute pip install 
_requirements.txt.pyc: requirements.txt 
    /opt/virtual_env/bin/pip install -r --upgrade requirements.txt 
    echo > _requirements.txt.pyc 

requirements: SOME MAGIG OR SOME make flags   
    pip install -r requirements.txt 

install-pip-requirements: _requirements.txt.pyc 

install: virtual requirements 

我相信

必须这样做更好的方法

;)

+0

你能更详细地解释你的python包的外观吗?你使用任何类型的Python项目模板?你为什么用'sudo'运行make?为@ovanes更新了 – ovanes

+0

,添加了文件夹树,并删除了sudo,因为与问题无关(假设我是root)。 –

回答

3

不知道它会在这一点上回答你的问题。更好的方法是使用完全成熟的Python PIP项目模板。

我们使用cookiecutter创建一个特定的点子包与此cookiecutter template

它有一个Makefile,它不会不断重新安装所有的依赖关系,它使用Python tox,它允许自动在不同的python中运行项目测试。您仍然可以在开发virtualenv中开发,但只有在添加新软件包时,我们才会更新它,其他所有内容都由tox来处理。

但是,你到目前为止所展示的是试图从头开始编写一个Python构建,这是通过大量的项目模板完成的。如果你真的想了解那里发生了什么,你可以分析these templates


随着后续:因为你希望它有一个makefile工作,我建议从PIP命令去除--upgrade标志。我怀疑你的要求不包括项目工作所需的版本。我们做了一个经验,不要在那里放置版本可能会严重制动。因此,我们的requirements.txt样子:

configure==0.5 
falcon==0.3.0 
futures==3.0.5 
gevent==1.1.1 
greenlet==0.4.9 
gunicorn==19.4.5 
hiredis==0.2.0 
python-mimeparse==1.5.2 
PyYAML==3.11 
redis==2.10.5 
six==1.10.0 
eventlet==0.18.4 

使用不--upgrade原因要求PIP简单地验证什么是在virtualenv中,什么不是。满足所需版本的所有内容都将被跳过(无需下载)。你也可以参考git版本,要求如下:

-e git+http://some-url-here/path-to/[email protected]#egg=package-name-how-to-appear-in-pip-freeze 
+0

我不知道为什么,但我仍然认为,我必须更好的方式https://youtu.be/wf-BqAjZb8M?t=1390。我期待一个makefile的解决方案:( –

+0

@ Andrei.Danciuc:好吧,我提供了第二个选择,将版本引入'requirements.txt' – ovanes

0

@Andrei。Danciuc,make只需要两个文件进行比较;您可以使用运行pip install的任何输出文件。

例如,我通常使用“vendored”文件夹,因此我可以将路径别名为“vendored”文件夹而不是使用虚拟文件。

# Only run install if requirements.txt is newer than vendored folder 
vendored-folder := vendored 
.PHONY: install 
install: $(vendored-folder) 

$(vendored-folder): requirements.txt 
    rm -rf $(vendored-folder) 
    pip install -r requirements.txt -t $(vendored-folder) 

如果您没有使用售货文件夹,下面的代码应该适用于virtualenv和全局设置。

# Only run install if requirements.txt is newer than SITE_PACKAGES location 
.PHONY: install 
SITE_PACKAGES := $(shell pip show pip | grep '^Location' | cut -f2 -d':') 
install: $(SITE_PACKAGES) 

$(SITE_PACKAGES): requirements.txt 
    pip install -r requirements.txt 
相关问题