【Python基础】lpthw

人走茶凉 提交于 2020-05-07 18:48:49

  本节将会介绍如何构建一个项目骨架目录。骨架目录中会包含项目文件布局自动测试代码模块安装脚本

  一、环境配置(win10)

  1. 检查并确认自己只安装了一个python版本。

cd ~
python

  可以检查python版本。

  2. 运行pip,确认有基本的安装。

>pip list
pip(version xxx.xxx)
setuptools(version xxx.xxx)

  3. 使用下述命令设置虚拟环境

> pip install virtualenv

  4. 创建一个.venvs文件夹,在里面装虚拟环境

> mkdir .venvs
> virtualenv --system-site-packages .venvs/lpthw

  这两个命令创建了一个.venvs文件夹,用来存储不同的虚拟环境,然后创建了第一个虚拟环境lpthw。虚拟环境是一个用来安装软件的“假的”地方,这样我们就可以针对不同项目使用不同版本的软件包

  5. 安装完成后需要激活虚拟环境

  先cd到.venvs所在目录,然后执行以下命令进行激活:

> .\.venvs\lpthw\Scripts\activate

  这样就为PowerShell运行activate脚本,它把你当前的shell设为使用lpthw虚拟环境,以后每次使用书中的软件,都要先激活虚拟环境。

  需要注意的是,win10下还需要开启PS不能运行脚本的问题。方法为管理员身份运行PowerShell,并运行以下命令

> set-executionpolicy remotesigned

  6. 安装nose,以供后面运行测试使用

> pip install nose

  这样nose就安装完毕了,只不过pip将其安装到了.venvs/lpthw的虚拟环境下面,而非主系统软件包目录。这样你就可以为不同项目安装不同的相互冲突的Python软件包版本,同时还不会污染主系统级别的配置。

  二、创建骨架项目目录

  1. 创建骨架目录

> mkdir projects
> cd projects
> mkdir skeleton
> cd skeleton
> mkdir -p bin,NAME,tests,docs

  注意mkdir同时创建多个文件需要使用-p参数,并用逗号隔开文件名。

  projects用来存储各个项目。skeleton是本节新项目的基础目录。其中NAME目录是项目的主模块,使用骨架时,可以将其重命名为自己的项目的主模块名称。

  2. 设置初始文件

   创建一些空的python模块目录:

> new-item -type file NAME/__init__.py
> new-item -type file tests/__init__.py

  在skeleton目录下创建一个setup.py文件,这个文件在安装项目的时候会用到,其内容如下:

 1 try:
 2     from setuptools import setup
 3 except ImportError:
 4     from distutils.core import setup
 5 
 6 config = {
 7     'description': 'My Project',
 8     'author': 'Crystal',
 9     'url': 'URL to get it at.',
10     'downloard_url': 'Where to download it.',
11     'author_email': 'my_email@xx.xx',
12     'version': '1.0',
13     'install_requires': ['nose'],
14     'packages': ['NAME'],
15     'scripts': [],
16     'name': 'projectname'
17 }
18 
19 setup(**config)

  3. 建立测试专用的骨架文件

  在tests文件夹下建立一个NAME_tests.py,内容如下:

 1 from nose.tools import *
 2 import NAME
 3 
 4 def setup():
 5     print("SETUP!")
 6 
 7 def teardown():
 8     print("TEAR DOWN!")
 9 
10 def test_basic():
11     print("I RAN!")

  4. 最终的目录结构

  完成上述步骤后的目录结构应该如下所示:

  skeleton/

      NAME/

          __init__.py

      bin/

      docs/

      tests/

          NAME_tests.py

          __init__.py

      setup.py

  5. 运行测试程序

  注意一定要在skeleton目录下运行,而非tests目录下。

> nosetests
.
----------------------------------
Ran 1 test in 0.007s

OK

  三、使用这个骨架

  以后每次要新建一个项目时,遵循以下步骤即可:

  1. 复制这份骨架目录,把名字改成新项目的名字

  2. 将NAME目录更名为自己的项目的名字,或根模块的名字

  3. 编辑setup.py,将其包含的信息更新为新项目的信息

  4. 重命名tests/NAME_tests.py,把NAME换成2中所说的模块的名字

  5. 使用nosetests检查有无错误

  6. 开始写代码

  四、setup.py——python的构建工具

  【摘录自博客 https://www.cnblogs.com/maociping/p/6633948.html

  在安装python的相关库时,可以有以下两种安装方式

  pip install 模块名

  这种方法为在线安装,会安装该模块的相关依赖包。

  python setup.py install 模块名

  这种方法为下载源码后在本地安装,不会安装相关的依赖包。

  在安装普通的python包时,利用pip来安装是很方便的,但是在有的场景下,使用后者会更加满足我们的需要,例如:

  在本机开发一个程序,需要用到python的官方模块,以及自己编写的自定义模块。那么如何实现在服务器上去发布该系统,实现依赖模块和自定义模块一起打包和一键安装呢?也就是如何同时将自己编写的自定义模块以exe文件格式安装到python的全局执行路径C:\Python37\Scripts下呢?

   此时,pip工具似乎派不上用场,只能使用setup.py。我们只需要在setup.py文件中写明依赖的库版本,然后到目标机器上使用python setup.py install 安装。

  示例:

 1 from setuptools import setup, find_packages  
 2   
 3 setup(  
 4     name = "test",  
 5     version = "1.0",  
 6     keywords = ("test", "xxx"),  
 7     description = "eds sdk",  
 8     long_description = "eds sdk for python",  
 9     license = "MIT Licence",  
10   
11     url = "http://test.com",  
12     author = "test",  
13     author_email = "test@gmail.com",  
14   
15     packages = find_packages(),  
16     include_package_data = True,  
17     platforms = "any",  
18     install_requires = [],  
19   
20     scripts = [],  
21     entry_points = {  
22         'console_scripts': [  
23             'test = test.help:main'  
24         ]  
25     }  
26 )

  参数介绍:

--name 包名称
--version (-V) 包版本
--author 程序的作者
--author_email 程序的作者的邮箱地址
--maintainer 维护者
--maintainer_email 维护者的邮箱地址
--url 程序的官网地址
--license 程序的授权信息
--description 程序的简单描述
--long_description 程序的详细描述
--platforms 程序适用的软件平台列表
--classifiers 程序的所属分类列表
--keywords 程序的关键字列表
--packages 需要处理的包目录(包含__init__.py的文件夹) 
--py_modules 需要打包的python文件列表
--download_url 程序的下载地址
--cmdclass 
--data_files 打包时需要打包的数据文件,如图片,配置文件等
--scripts 安装时需要执行的脚步列表
--package_dir 告诉setuptools哪些目录下的文件被映射到哪个源码包。一个例子:package_dir = {'': 'lib'},表示“root package”中的模块都在lib 目录中。
--requires 定义依赖哪些模块 
--provides定义可以为哪些模块提供依赖 
--find_packages() 对于简单工程来说,手动增加packages参数很容易,刚刚我们用到了这个函数,它默认在和setup.py同一目录下搜索各个含有 __init__.py的包。其实我们可以将包统一放在一个src目录中,另外,这个包内可能还有aaa.txt文件和data数据文件夹。另外,也可以排除一些特定的包   find_packages(exclude=["*.tests", "*.tests.*", "tests.*", "tests"])

--install_requires = ["requests"] 需要安装的依赖包
--entry_points 动态发现服务和插件

  在前述entry_points中: 

  console_scripts 指明了命令行工具的名称;在“redis_run=RedisRun.redis_run:main”中,等号前面指明了工具包的名称,等号后面的内容指明了程序的入口地址。

  这里也可以有多条记录,这样一个项目就可以制作多个命令行工具了,如

1 setup(
2     entry_points = {
3         'console_scripts': [
4             'foo = demo:test',
5             'bar = demo:test',
6         ]}
7

  setup.py项目示例代码:

 1 #!/usr/bin/env python
 2 # coding=utf-8
 3 
 4 from setuptools import setup
 5 
 6 '''
 7 把redis服务打包成C:\Python27\Scripts下的exe文件
 8 '''
 9 
10 setup(
11     name="RedisRun",  #pypi中的名称,pip或者easy_install安装时使用的名称,或生成egg文件的名称
12     version="1.0",
13     author="Andreas Schroeder",
14     author_email="andreas@drqueue.org",
15     description=("This is a service of redis subscripe"),
16     license="GPLv3",
17     keywords="redis subscripe",
18     url="https://ssl.xxx.org/redmine/projects/RedisRun",
19     packages=['RedisRun'],  # 需要打包的目录列表
20 
21     # 需要安装的依赖
22     install_requires=[
23         'redis>=2.10.5',
24         'setuptools>=16.0',
25     ],
26 
27     # 添加这个选项,在windows下Python目录的scripts下生成exe文件
28     # 注意:模块与函数之间是冒号:
29     entry_points={'console_scripts': [
30         'redis_run = RedisRun.redis_run:main',
31     ]},
32 
33     # long_description=read('README.md'),
34     classifiers=[  # 程序的所属分类列表
35         "Development Status :: 3 - Alpha",
36         "Topic :: Utilities",
37         "License :: OSI Approved :: GNU General Public License (GPL)",
38     ],
39     # 此项需要,否则卸载时报windows error
40     zip_safe=False
41 )  

  修改后的项目代码(此时RedisRun模块是DrQueue模块的子模块,这是因为要导入某些公用的模块)

 1 #!/usr/bin/env python
 2 # coding=utf-8
 3 
 4 from setuptools import setup
 5 
 6 '''
 7 把redis服务打包成C:\Python27\Scripts下的exe文件
 8 '''
 9 
10 setup(
11     name="RedisRun",  #pypi中的名称,pip或者easy_install安装时使用的名称
12     version="1.0",
13     author="Andreas Schroeder",
14     author_email="andreas@drqueue.org",
15     description=("This is a service of redis subscripe"),
16     license="GPLv3",
17     keywords="redis subscripe",
18     url="https://ssl.xxx.org/redmine/projects/RedisRun",
19     packages=['DrQueue'],  # 需要打包的目录列表
20 
21     # 需要安装的依赖
22     install_requires=[
23         'redis>=2.10.5',
24     ],
25 
26     # 添加这个选项,在windows下Python目录的scripts下生成exe文件
27     # 注意:模块与函数之间是冒号:
28     entry_points={'console_scripts': [
29         'redis_run = DrQueue.RedisRun.redis_run:main',
30     ]},
31 
32     # long_description=read('README.md'),
33     classifiers=[  # 程序的所属分类列表
34         "Development Status :: 3 - Alpha",
35         "Topic :: Utilities",
36         "License :: OSI Approved :: GNU General Public License (GPL)",
37     ],
38     # 此项需要,否则卸载时报windows error
39     zip_safe=False
40 )

  此时项目的目录结构为:

  五、进一步的工作

  1. 在模块目录NAME下面写一些代码,并让其可以运行。

  2. 在bin目录下方写一个可以运行的脚本,并在setup.py里配置好bin中的脚本的信息。

  注意,bin中存放的一般是一些在命令行上运行的脚本,而不是模块;模块可以放在setup.py的同级目录下,且其必须包含__init__.py。

  前面提到,包含__init__.py的会被认为是一个模块(包),find_packages()就是搜索所有包含__init__.py的文件夹,并认为其是一个模块,然后在setup的时候一并安装。

  3. 使用setup.py安装自定义的模块,并确保安装的模块可以正常使用,最后使用pip将其卸载。

  cd 到setup.py目录下,执行以下命令(为保证不污染主环境,先激活lpthw虚拟环境!)

> python setup.py install

  此时安装好了名字为NAME的模块(可以有和NAME类似的其他文件夹,其中也需包含__init__.py,setup后可以根据其名字import)。

1 import NAME
2 ...

  使用pip卸载该包的命令如下

> pip uninstall projectname

  这个projectname参见前面setup.py中的配置。

 

易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!