Python打包之setuptools

小百合 發表於 2019-9-17 22:29:00

参考链接1
参考链接2
参考链接3
<h3>一、setuptools介绍</h3>
Setuptools是Python Distutils的加强版，使开发者构建和发布Python包更加容易，特别是当包依赖于其他包时。用setuptools构建和发布的包与用Distutils发布的包是类似的。包的使用者无需安装setuptools就可以使用该包。如果用户是从源码包开始构建，并且没有安装过setuptools的话，则只要在你的setup脚本中包含一个bootstrap模块（ez_setup），用户构建时就会自动下载并安装setuptools了。
功能亮点：
<ul>
<li>利用EasyInstall自动查找、下载、安装、升级依赖包</li>
<li>创建Python Eggs</li>
<li>包含包目录内的数据文件</li>
<li>自动包含包目录内的所有的包，而不用在setup.py中列举</li>
<li>自动包含包内和发布有关的所有相关文件，而不用创建一个MANIFEST.in文件</li>
<li>自动生成经过包装的脚本或Windows执行文件</li>
<li>支持Pyrex，即在可以setup.py中列出.pyx文件，而最终用户无须安装Pyrex</li>
<li>支持上传到PyPI</li>
<li>可以部署开发模式，使项目在sys.path中</li>
<li>用新命令或setup()参数扩展distutils，为多个项目发布/重用扩展</li>
<li>在项目setup()中简单声明entry points，创建可以自动发现扩展的应用和框架</li>
</ul>
 
<h3>二、简单的例子</h3>
python中安装包的方式有很多种：
<ol>
<li>源码包：python setup.py install</li>
<li>在线安装：pip install 包名 / easy_install 包名</li>
</ol>
pip install的东西从哪里来的？
从PyPI （Python Package Index）来的，官网是：  https://pypi.python.org/pypi
执行pip install terminaltranslator命令的时候，它就会去从官方网站搜terminaltranslator，搜到了就下载压缩包并解压安装，如果没有搜索到就会报错。 
<h4>1、源码包安装</h4>
源码包安装就是你在本地编写好了一个模块，自己安装在本地使用，别人(即使是你自己)都不能 pip install xxx 下载你的模块
1.准备工作
<div class="cnblogs_code">
<pre># 1.首先创建我们需要的目录结构和文件(自行创建) # 当前测试的目录是： /tmp/demo 
`-- demo
|-- helloapp
| |-- hello.py
| `-- __init__.py
|-- __init__.py
|-- myapp
| |-- __init__.py
| `-- myapp.py
`-- setup.py

# 2.编辑 setup.py
from setuptools import setup, find_packages

setup(
name="demo",
version="1.0",
author="zbj",
author_email="22@qq.com",
packages=find_packages(),
)

# 3.编辑 hello.py
def hello_func():
print("HelloWorld")

# 4.编辑 myapp.py
def myapp_func():
print("嘿嘿嘿")</pre>
</div>
 
2.源码安装
<div class="cnblogs_code">
<pre># 进入setup.py所在的那层目录
cd /tmp/demo

# 检查setup.py 是否有错误(warning不是错误)
python setup.py check

# 安装
python setup.py install</pre>
</div>
 
3.结果
打包之后多出两个文件夹，分别是demo.egg-info和dist。demo.egg-info是必要的安装信息，
而dist中的压缩包就是安装包，此时默认的egg包，egg包就是zip包，如果需要使用egg包，name将egg后缀改成zip解压即可
 
4.测试
测试的时候需要注意导包路径和当前所在路径 目前所在路径是: /tmp/demo 直接进入python解释器: python3(我自己安装的python3版本)
<img src="https://img2018.cnblogs.com/blog/1449477/201909/1449477-20190917161323060-885394654.png" alt="">
 
 
 
5.setuptools更多参数用法 
https://setuptools.readthedocs.io/en/latest/setuptools.html
 
<h4>2、打包上传到pypi</h4>
官网连接
<h4>2-1、配置文件和打包</h4>
1.创建文件的目录结构
<div class="cnblogs_code">
<pre>hello/
|-- hello
| |-- hello.py
| `-- __init__.py
|-- LICENSE
|-- README.md
`-- setup.py</pre>
</div>
 
2. setup.py
<div class="cnblogs_code">
<pre>from setuptools import setup, find_packages

setup(
name="hello",
version='1.0',
description="Test Hello",
url="None",
author="zbj",
author_email="22@qq.com",
license="MIT",
packages=find_packages()
)</pre>
</div>
 
3. LICENSE
LICENSE代表许可证
官网
<div class="cnblogs_code">
<pre>Copyright (c) 2018 The Python Packaging Authority

Permission is hereby granted, free of charge, to any person obtaining a copy
of this software and associated documentation files (the "Software"), to deal
in the Software without restriction, including without limitation the rights
to use, copy, modify, merge, publish, distribute, sublicense, and/or sell
copies of the Software, and to permit persons to whom the Software is
furnished to do so, subject to the following conditions:

The above copyright notice and this permission notice shall be included in all
copies or substantial portions of the Software.

THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND, EXPRESS OR
IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF MERCHANTABILITY,
FITNESS FOR A PARTICULAR PURPOSE AND NONINFRINGEMENT. IN NO EVENT SHALL THE
AUTHORS OR COPYRIGHT HOLDERS BE LIABLE FOR ANY CLAIM, DAMAGES OR OTHER
LIABILITY, WHETHER IN AN ACTION OF CONTRACT, TORT OR OTHERWISE, ARISING FROM,
OUT OF OR IN CONNECTION WITH THE SOFTWARE OR THE USE OR OTHER DEALINGS IN THE
SOFTWARE.</pre>
</div>
 
4. setuptools 和wheel
首先需要保证你有最新版的<code>setuptools</code> 和<code>wheel</code>
<div class="cnblogs_code">
<pre>python -m pip install --user --upgrade setuptools wheel</pre>
</div>
Tip：如果出现问题了可以查看官网的解决方案：https://packaging.python.org/tutorials/installing-packages/
 
5. 打包模块
<div class="cnblogs_code">
<pre># 进入到setup.py同级的目录下
python setup.py sdist bdist_wheel</pre>
</div>
打包之后多出两个文件夹，分别是hello.egg-info和dist。hello.egg-info是必要的安装信息，而dist中的压缩包就是安装包
dist中包含两个文件：
<div class="cnblogs_code">
<pre>dist/
|-- hello-1.0-py3-none-any.whl
`-- hello-1.0.tar.gz</pre>
</div>
 
6.打包方式介绍
有了上面的 setup.py 文件，我们就可以打出各种安装包，主要分为两类：sdist 和 bdist。
Source distribution
使用 sdist 可以打包成 source distribution，支持的压缩格式有：
<table>
<thead>
<tr><th>Format</th><th>Description</th><th>Notes</th></tr>
</thead>
<tbody>
<tr>
<td>zip</td>
<td>zip file (.zip)</td>
<td>Windows 默认</td>
</tr>
<tr>
<td>gztar</td>
<td>gzip’ed tar file (.tar.gz)</td>
<td>Unix 默认</td>
</tr>
<tr>
<td>bztar</td>
<td>bzip2’ed tar file (.tar.bz2)</td>
<td> </td>
</tr>
<tr>
<td>xztar</td>
<td>xz’ed tar file (.tar.xz)</td>
<td> </td>
</tr>
<tr>
<td>ztar</td>
<td>compressed tar file (.tar.Z)</td>
<td> </td>
</tr>
<tr>
<td>tar</td>
<td>tar file (.tar)</td>
<td> </td>
</tr>
</tbody>
</table>
使用方式为：
<pre><code>$ python setup.py sdist --formats=gztar,zip
</code></pre>
现在目录下多出 dist 和 *.egg-info 目录，dist 内保存了我们打好的包，上面命令使用 <code>--formats</code> 指定了打出 <code>.tar.gz</code> 和 <code>.zip</code> 包，如果不指定则如上表根据具体平台默认格式打包。
包的名称为 <code>setup.py</code> 中定义的 <code>name</code>, <code>version</code>以及指定的包格式，格式如：firstApp-0.0.1.tar.gz。
Built distribution
使用 bdist 可以打出 built distribution，和源码包相比，由于预先构建好，所以安装更快：
<table>
<thead>
<tr><th>Format</th><th>Description</th><th>Notes</th></tr>
</thead>
<tbody>
<tr>
<td>gztar</td>
<td>gzipped tar file (.tar.gz)</td>
<td>Unix 默认</td>
</tr>
<tr>
<td>bztar</td>
<td>bzipped tar file (.tar.bz2)</td>
<td> </td>
</tr>
<tr>
<td>xztar</td>
<td>xzipped tar file (.tar.xz)</td>
<td> </td>
</tr>
<tr>
<td>ztar</td>
<td>compressed tar file (.tar.Z)</td>
<td> </td>
</tr>
<tr>
<td>tar</td>
<td>tar file (.tar)</td>
<td> </td>
</tr>
<tr>
<td>zip</td>
<td>zip file (.zip)</td>
<td>Windows 默认</td>
</tr>
<tr>
<td>rpm</td>
<td>RPM</td>
<td> </td>
</tr>
<tr>
<td>pkgtool</td>
<td>Solaris pkgtool</td>
<td> </td>
</tr>
<tr>
<td>sdux</td>
<td>HP-UX swinstall</td>
<td> </td>
</tr>
<tr>
<td>wininst</td>
<td>self-extracting ZIP file for Windows</td>
<td> </td>
</tr>
<tr>
<td>msi</td>
<td>Microsoft Installer.</td>
<td> </td>
</tr>
</tbody>
</table>
使用上，和 sdist 一样，可以使用 <code>--formats</code> 指定包格式。如：
<pre><code>$ python setup.py bdist --formats=rpm
</code></pre>
同时为了简化操作，setuptools 提供了如下命令：
<table>
<thead>
<tr><th>Command</th><th>Formats</th><th>Notes</th></tr>
</thead>
<tbody>
<tr>
<td>bdist_dumb</td>
<td>tar, gztar, bztar, xztar, ztar, zip</td>
<td>Windows 默认 zip, Unix 默认 gztar</td>
</tr>
<tr>
<td>bdist_rpm</td>
<td>rpm, srpm</td>
<td> </td>
</tr>
<tr>
<td>bdist_wininst</td>
<td>wininst</td>
<td> </td>
</tr>
<tr>
<td>bdist_msi</td>
<td>msi</td>
<td> </td>
</tr>
</tbody>
</table>
所以上面打 rpm 包可以使用：
<pre><code>$ python setup.py bdist_rpm</code></pre>
 
<h4>2-2、上传到Pypi</h4>
此时前置打包的步骤已经完成，可以开始进行上传。
1.利用<code>twine</code>将包上传上去，首先安装twine
<pre class="prettyprint"><code class="prism language-python has-numbering">pip install twine</code></pre>
 
2.注册 PyPI 账号
登录 https://pypi.python.org/pypi，注册账号
 
3.上传
<div class="cnblogs_code">
<pre># 使用 upload
$ twine upload dist/*
输入 username 和 password 即上传至 PyPI。

# 如果不想每次输入账号密码，可以在家目录下创建 .pypirc 文件，内容如下：


index-servers =
pypi
pypitest

username:
password:

repository: https://test.pypi.org/legacy/
username:
password: </pre>
</div>
 
4. 检验 这时候就可以，下载包，然后运行里面方法了
<div class="cnblogs_code">
<pre>pip install hello</pre>
</div>
<div class="cnblogs_code"><img id="code_img_closed_a44366b3-c98b-43ed-94d8-c7c5b2b4554d" class="code_img_closed" src="https://images.cnblogs.com/OutliningIndicators/ContractedBlock.gif" alt=""><img id="code_img_opened_a44366b3-c98b-43ed-94d8-c7c5b2b4554d" class="code_img_opened" style="display: none" src="https://images.cnblogs.com/OutliningIndicators/ExpandedBlockStart.gif" alt="">
<div id="cnblogs_code_open_a44366b3-c98b-43ed-94d8-c7c5b2b4554d" class="cnblogs_code_hide">
<pre>在本地测试的时候可以直接安装打包好的dist下的包：
pip install xxx.tag.gz
测试功能正常后再上传到pypi</pre>
</div>
提示</div>
 
5. 更新版本 更新版本也很简单，只需要修改setup.py下的version 然后重新生成档案，上传
<div class="cnblogs_code">
<pre>python setup.py sdist bdist_wheel
twine upload dist/hello-0.0.2*</pre>
</div>
 
6.更新本地moudle版本
<div class="cnblogs_code">
<pre>pip install --upgrade hello

或者是先卸载，再安装
# 卸载hello
pip uninstall hello
# 安装hello
pip install hello</pre>
</div>
 
 
<h3>三、setuptools的进阶使用</h3>
上面使用setuptools时只是简单的用一个配置文件setup.py就完成了打包信息填写。在真实的开发环境中，往往是多个文件配合。以openstack的打包为例。openstack中引入了Pbr的管理工具。
<div class="cnblogs_code">
<pre>pbr是setuptools的辅助工具，最初为openstack开发，基于d2to1。Pbr会读取和过滤setup.cfg中的内容，然后将解析后的数据提供给setup.py作为参数。
setup.cfg提供setup.py的默认参数，同时易于修改。Setup.py先解析setup.cfg文件，然后执行相关命令。包括以下功能：

1、从git中获取Version，AUTHORS和ChangeLog信息

2、SphinxAutodoc。pbr会扫描project，找到所有模块，生成stubfiles

3、Requirements。读取requirements.txt文件，生成setup函数需要依赖包

4、long_description。从README.rst、README.txt或者READMEfile中生成long_description参数</pre>
</div>
 
Pbr的文件很简单，如下。配置之后会自动寻找目录下的setup.cfg文件，解析文件参数给setup.py使用。
https://docs.openstack.org/pbr/latest/user/using.html
setup.py
<div class="cnblogs_code">
<pre>from setuptools import setup

setuptools.setup(

setup_requires=['pbr'],

pbr=True)</pre>
</div>
 
setup.cfg
<div class="cnblogs_code">
<pre>
name = my_package
version = attr: src.VERSION
description = My package description
long_description = file: README.rst, CHANGELOG.rst, LICENSE.rst
keywords = one, two
license = BSD 3-Clause License
classifiers =
Framework :: Django
License :: OSI Approved :: BSD License
Programming Language :: Python :: 3
Programming Language :: Python :: 3.5

packages =
project_name
data_files =
etc/pbr = etc/pbr/*

[global]
setup-hooks =
pbr.hooks.setup_hook

console_scripts =
project_name = project.cmd.mycmd:main

zip_safe = False
include_package_data = True
packages = find:
scripts =
bin/first.py
bin/second.py
install_requires =
requests
importlib; python_version == "2.7"

* = *.txt, *.rst
hello = *.msg

pdf = ReportLab>=1.2; RXP
rest = docutils>=0.3; pack ==1.1, ==1.3

exclude =
src.subpackage1
src.subpackage2

/etc/my_package =
site.d/00_default.conf
host.d/00_default.conf
data = data/img/logo.png, data/svg/icon.svg</pre>
</div>
  
来源：https://www.cnblogs.com/Zzbj/p/11535625.html

頁: [1]

琼殿技术论坛's Archiver

Python打包之setuptools