学习Python Doc第五天: 模块
目录
1 简介
如果从 Python
解释器(命令行)退出再进入,那些之前定义的变量,函数都不复存在。如果想保存之前写过的代码,就需要用文件保存起来,下次调用的时候 import
进来。这些保存的文件可以是简单的脚本,亦可是复杂的函数。 Python
把调用的文件叫做 module
.一个 module
中的函数定义可以 import
到其他 module
也可以 import
到 main module
一个 module
包含了 Python
函数定义和语句。这个文件用 .py
作为文件名后缀。 在一个 module
中, module
的名字是全局变量 __name__
的值。例如,用文本编辑器(推荐 vi
或者 Emacs
)创建一个文件命名为 fibo.py
内容是:
# Fibonacci numbers module def fib(n): # write Fibonacci series up to n a, b = 0, 1 while b < n: print(b, end=' ') a, b = b, a+b print() def fib2(n): # return Fibonacci series up to n result = [] a, b = 0, 1 while b < n: result.append(b) a, b = b, a+b return result
现在进入 Python
解释器,导入这个 modul
>>>import fibo
使用 module
的名字 fibo
,可以调用该 module
中的函数。 比如:
In [1485]: fibo.fib(1000) 1 1 2 3 5 8 13 21 34 55 89 144 233 377 610 987 In [1493]: fibo.fib2(100) Out[1502]: [1, 1, 2, 3, 5, 8, 13, 21, 34, 55, 89]
还可以把函数的名字付给一个本地变量:
In [1503]: fib = fibo.fib In [1510]: fib(20) 1 1 2 3 5 8 13
2 深入了解 module
一个 module
不仅可以包括函数还可以包括可执行语句(由可执行语句集合起来的文件我们也叫脚本)。每一个 module
都有自己的私有符号表,这些符号表对于 module
中的函数来讲是全局的。因此,在 module
中使用全局变量不用担心与另一个人的全局变量产生冲突。
module
可以 import
其他的 module
还可以只调用 module
内的某些名字。
>>> from fibo import fib,fib2 >>> fib(500) 1 1 2 3 5 8 13 21 34 55 89 144 233 377
这样不会导入模块名,在上面的例子中 fibo
就没有被定义。
可以使用 *
来导入当前 module
中的所有名字:
>>> from fibo import * >>> fib(500) 1 1 2 3 5 8 13 21 34 55 89 144 233 377
上面的语句导入了除以下划线开头的所有名字。当然大多数时候,不建议使用这样的做法,因为这样子有可能会导入一些未知的名字进来,有可能会覆盖掉我们自己定义的函数或者变量。另外使用 *
会降低代码的可读性。
注意:从效率方面考虑,每一个 module
都只被导入一次,因此,如果 module
有所改变,你要么重启解释器,要么使用 importlib.reload()
比如:
import importlib; importlib.reload(modulename)
3 把 module
当做脚本执行
把一个 module
当做脚本执行很简单:
python fibo.py <arguments>
这个 module
中的代码就会被执行(就像你 import
了它一样),在执行的过程中 __name__
被设置为 __main__
,这意味着通过在 module
的尾部添加,如下语句,就可以把一个 module
当做脚本来使用:
if __name__ == "__main__": import sys fib(int(sys.argv[1]))
使用过程为:
>>>python fibo.py 50 1 1 2 3 5 8 13 21 34
4 module
的搜索路径
import
一个名称为 spam
的 module
后,解释器首先在内置 module
中搜索 spam
。如果没有找到,然后搜索名字为 spam.py
的文件名,搜索路径为 sys.path
初始的 sys.path
包含:
- 当前路径;
PYTHONPATH
- 安装的默认路径
初始化之后, Python
程序可以修改 sys.path
。包含当前脚本的路径被放在搜索路径的最开始位置(比标准库路径还要靠前),这意味着在当前路径匹配的 module
名会优先被调用。
5 “编译” Python
文件
为了加速 module
载入, Python
会把每一个 module
的编译版本 module.version.pyc
放到 __pycache__
目录下。比如,在 CPython3.3
中, spam.py
的编译版本保存路径是 __pycache__/spam.cpython-33.pyc
. Python
会像 make
一样自动检测 .pyc
和 py
的时间,然后判断哪些文件需要重新编译。
你可以使用 -O
或者 -OO
选项来让 Python
减小编译文件的大小。 -O
参数移除了 assert
语句。 使用 -OO
参数时,会从字节码中去除 __doc__
以产生更紧凑的 .pyo
.
6 标准模块
Python
自带了一个标准模板库 Python Library Reference
。一些 module
内置于解释器中,这些 module
提供了 Python
语言核心不提供的功能,比如系统调用;比如 winreg
模块只在Windows上提供。
有一个特殊的模块需要注意 sys
。这个模块内置于所有的 Python
解释器中。比如 变量 sys.ps1
和 sys.ps2
定义了主和次提示符的字符串:
>>> import sys >>> sys.ps1 '>>> ' >>> sys.ps2 '... ' >>> sys.ps1 = 'C> ' C> print('Yuck!') Yuck! C>
只有解释器处于交互模式时,这两个变量才有意义。
sys.path
包含了解释器搜索 module
的所有路径。可以使用标准的 list
操作符来改变这个值:
>>> import sys >>> sys.path.append('/ufs/guido/lib/python')
7 dir()
函数
内置的 dir()
用于找出一个模块里定义了那些名字. 它返回一个有序字串列表:
>>> import fibo, sys >>> dir(fibo) ['__name__', 'fib', 'fib2'] >>> dir(sys) ['__displayhook__', '__doc__', '__excepthook__', '__loader__', '__name__', '__package__', '__stderr__', '__stdin__', '__stdout__', '_clear_type_cache', '_current_frames', '_debugmallocstats', '_getframe', '_home', '_mercurial', '_xoptions', 'abiflags', 'api_version', 'argv', 'base_exec_prefix', 'base_prefix', 'builtin_module_names', 'byteorder', 'call_tracing', 'callstats', 'copyright', 'displayhook', 'dont_write_bytecode', 'exc_info', 'excepthook', 'exec_prefix', 'executable', 'exit', 'flags', 'float_info', 'float_repr_style', 'getcheckinterval', 'getdefaultencoding', 'getdlopenflags', 'getfilesystemencoding', 'getobjects', 'getprofile', 'getrecursionlimit', 'getrefcount', 'getsizeof', 'getswitchinterval', 'gettotalrefcount', 'gettrace', 'hash_info', 'hexversion', 'implementation', 'int_info', 'intern', 'maxsize', 'maxunicode', 'meta_path', 'modules', 'path', 'path_hooks', 'path_importer_cache', 'platform', 'prefix', 'ps1', 'setcheckinterval', 'setdlopenflags', 'setprofile', 'setrecursionlimit', 'setswitchinterval', 'settrace', 'stderr', 'stdin', 'stdout', 'thread_info', 'version', 'version_info', 'warnoptions']
如果没哟输入参数 dir()
列出了目前你定义的所有名字。 dir()
不会列举所有内置函数和变量,如果你想要看看 builtins
都内置了哪些函数和变量。你可以使用:
>>> import builtins >>> dir(builtins) ['ArithmeticError', 'AssertionError', 'AttributeError', 'BaseException', 'BlockingIOError', 'BrokenPipeError', 'BufferError', 'BytesWarning', 'ChildProcessError', 'ConnectionAbortedError', 'ConnectionError', 'ConnectionRefusedError', 'ConnectionResetError', 'DeprecationWarning', 'EOFError', 'Ellipsis', 'EnvironmentError', 'Exception', 'False', 'FileExistsError', 'FileNotFoundError', 'FloatingPointError', 'FutureWarning', 'GeneratorExit', 'IOError', 'ImportError', 'ImportWarning', 'IndentationError', 'IndexError', 'InterruptedError', 'IsADirectoryError', 'KeyError', 'KeyboardInterrupt', 'LookupError', 'MemoryError', 'NameError', 'None', 'NotADirectoryError', 'NotImplemented', 'NotImplementedError', 'OSError', 'OverflowError', 'PendingDeprecationWarning', 'PermissionError', 'ProcessLookupError', 'ReferenceError', 'ResourceWarning', 'RuntimeError', 'RuntimeWarning', 'StopIteration', 'SyntaxError', 'SyntaxWarning', 'SystemError', 'SystemExit', 'TabError', 'TimeoutError', 'True', 'TypeError', 'UnboundLocalError', 'UnicodeDecodeError', 'UnicodeEncodeError', 'UnicodeError', 'UnicodeTranslateError', 'UnicodeWarning', 'UserWarning', 'ValueError', 'Warning', 'ZeroDivisionError', '_', '__build_class__', '__debug__', '__doc__', '__import__', '__name__', '__package__', 'abs', 'all', 'any', 'ascii', 'bin', 'bool', 'bytearray', 'bytes', 'callable', 'chr', 'classmethod', 'compile', 'complex', 'copyright', 'credits', 'delattr', 'dict', 'dir', 'divmod', 'enumerate', 'eval', 'exec', 'exit', 'filter', 'float', 'format', 'frozenset', 'getattr', 'globals', 'hasattr', 'hash', 'help', 'hex', 'id', 'input', 'int', 'isinstance', 'issubclass', 'iter', 'len', 'license', 'list', 'locals', 'map', 'max', 'memoryview', 'min', 'next', 'object', 'oct', 'open', 'ord', 'pow', 'print', 'property', 'quit', 'range', 'repr', 'reversed', 'round', 'set', 'setattr', 'slice', 'sorted', 'staticmethod', 'str', 'sum', 'super', 'tuple', 'type', 'vars', 'zip']
8 包 ( Packages
)
包是一种 Python
模块组织命名空间的方法。比如模块名 A.B
是指在包 A
中字块 B
。就像模块的使用,使不同模块的作者不用担心其它全局变量的名字, 而带点号的模块使得多模块包, 例如 NumPy 或 Python 图像库, 的作者不用担心与其他模块名冲突。
假设你想设计一个模块集 (一个 “包”), 用于统一声音文件和声音数据的处理. 有许多不同的声音格式 (通常通过它们的后缀来辨认, 例如: .wave, .aiff, .au), 因此你可能需要创建和维护一个不断增长的模块集, 用以各种各样的文件格式间的转换. 还有许多你想对声音数据执行的不同操作 (例如混频, 增加回音, 应用一个均衡器功能, 创建人造的立体声效果), 因此, 你将额外的写一个永无止尽的模块流来执行这些操作. 这是你的包的一个可能的结构:
sound/ Top-level package __init__.py Initialize the sound package formats/ Subpackage for file format conversions __init__.py wavread.py wavwrite.py aiffread.py aiffwrite.py auread.py auwrite.py ... effects/ Subpackage for sound effects __init__.py echo.py surround.py reverse.py ... filters/ Subpackage for filters __init__.py equalizer.py vocoder.py karaoke.py ...
导入一个包时, Python
通过搜索 sys.path
来找包的子目录。
使用 __init__.py
来告诉 Python
哪些目录包含了包。这用来避免名字为一个通用名字(比如 string
), 的目录意外地隐藏了在模块搜索路径靠后的合法模块. 在最简单的例子里, __init__.py
是个空文件, 但它也可以为这个包执行初始化代码.
使用包可以导入单个模块:
import sound.effects.echo
这样导入了子模块 sound.effects.echo
。在使用这个子模块时必须使用全名,比如:
sound.effects.echo.echofilter(input, output, delay=0.7, atten=4)
显然,这很啰嗦。一种简单的调用方法是:
from sound.effects import echo
调用时,不需要很长的前缀,
echo.echofilter(input, output, delay=0.7, atten=4)
虽然简单,但是不够简单,我们想要的是 foo(a,b,c)
这样的形式, 看代码:
from sound.effects.echo import echofilter
调用:
echofilter(input, output, delay=0.7, atten=4)
现在,我开心了。
通过上面的各种导入过程,我们发现,使用 from package import item
这样的语法 item
可以是一个子模块,也可以是一个包,也可以是一个包中定义的函数。
相反,使用 import item.subitem.subsubitem
每一个项除了最后一个都应该是一个 package
,最后一项必须是 module
或者一个 package
但不许是函数或者变量。
9 从 package
导入 *
试想 from sound.effects import *
会发生什么?我们希望这句话能够去文件系统中找到所有包中包含的子模块,然后导入。但是这样操作一方面耗时,另一方面有可能出现名字覆盖。
包作者唯一能做的是提供包的显示索引。 import
语句有以下约定:
- 如果一个包的
__init__.py
中定义了一个名为__all__
的列表 - 当遇到
from package import *
时,它会被用来作为导入的模块名字的列表。
是否维护 __all__
这个变量取决于包作者。例如 sound/effects/__init__.py
可能包含:
__all__ = ["echo","surround","reverse"]
那么, from sound.effects import *
将导入 "echo","surround","reverse"
这几个子模块。一个放之四海而皆准的导入方法是: from package import specific_submodule
.
10 包之间的调用
当我们需要调用子包内部的模块式,我们实用绝对路径,比如如果 sound.filters.vocoder
需要用到 sound.effects
中的 echo
模块,可以使用:
from sound.effects import echo
当然也可以使用相对路径来调用,比如 从 surround
模块,可以使用:
from . import echo from .. import formats from ..filters import equalizer
注意相对路径只适合于当前模块。由于主模块的名字永远是 __main__
因此所有需要被当做主模块使用的模块都必须使用绝对路径导入。
11 在多个文件夹下的包
包支持一个特殊的属性 __path__
,这个属性初始化值是一个包含了包含了 __init__.py
目录的名字。可以修改这个变量使得在搜索模块或者子包时查找特定的路径。当然这个属性用的并不经常,主要用这个属性扩展当前包可以调用的模块。