Python中的mkdir -p的功能

mkdir -p functionality in Python

本问题已经有最佳答案，请猛点这里访问。

有没有一种方法可以从python内部在shell上获得类似于mkdir -p的功能？我正在寻找系统调用以外的解决方案。我确信代码少于20行，我想知道是否有人已经写了它？

mkdir -p功能如下：

1
2
3
4
5
6
7
8
9
10
11
12

import errno
import os

def mkdir_p(path):
try:
os.makedirs(path)
except OSError as exc: # Python >2.5
if exc.errno == errno.EEXIST and os.path.isdir(path):
pass
else:
raise

更新

对于python≥3.2，os.makedirs有一个可选的第三个参数exist_ok，如果为真，则启用mkdir -p功能，除非提供mode并且现有目录的权限与预期目录不同；在这种情况下，OSError会像以前一样被提升。

更新2

对于python≥3.5，也有pathlib.Path.mkdir：

1
2
3

import pathlib

pathlib.Path("/tmp/path/to/desired/directory").mkdir(parents=True, exist_ok=True)

在python 3.5中添加了exist_ok参数。

相关讨论

谢谢！一位朋友指出，这个解决方案是最有效的；需要对文件系统进行一次调用。在有争议的文件系统中，这是一种方法。希望你的解决方案能得到更多的选票，并进入第二名。
这是正确的python成语，eafp，或者"请求宽恕比请求允许更容易。"(参见en.wikipedia.org/wiki/python-syntax_and_-semantics exceptions&zwnj；&8203；)。其他不包括异常处理的实现具有潜在的竞态条件错误。
python的except OSError, exc:<2.5
@约翰尼兰巴达：对于Python来说，你的意思是
此版本还避免争用，因为文件系统可能在os.path.exist()和os.makedirs()之间发生更改。
本着微创的精神，很多人都会复制+粘贴：用!=代替==，去掉pass/else-)
@威尔：我更喜欢这种方法(else: raise，因为这种方法更容易增加对更多exc.errno案件(elif exc.errno == errno.EACCES:等)的处理。
@Tzot:+1，但是您不应该为了永远不会发生的情况而使代码复杂化。
@约翰尼兰巴达你的意思是Python<3.0？
@Jenstimmerman：对于python≤2.5是必需的，对于2.5
这显然是os.makedirs()中的一个设计错误：0，1不应该以特殊的方式处理。啊，Unix对许多工具都犯了同样的错误
@sam有exist_ok参数
@setjmp：它至少需要2个调用：stat()来检查父目录是否存在，mkdir()来创建目录。
如果路径的最后一部分是一个文件，这似乎会失败，因为exc.errno等于errno.eexist，所以一切看起来都正常，但是稍后实际使用目录显然会失败。
distutils.dir_util.mkpath怎么样？就像mkpath('./foo/bar')一样简单。
优化异常处理？除非错误为EXC：如果EXC.errno！=errno.eexist或not os.path.isdir(path)：提升
@由于未记录的缓存，MkPath的auraham有一些意外的行为，如果您像mkdir-p:bugs.python.org/issue10948那样使用它，可能会导致问题。
如果路径已经存在，我实际上会收到一个unicodedecode错误。这是虫子吗？python(2.7)可能在不进行检查的情况下传递从操作系统接收到的字符串。它可能包含一些非ASCII字符，在这种情况下，上述异常失败：unicodedecodeerror:'ascii'编解码器无法在位置13解码字节0xe3:序号不在范围(128)内。
对except .... raise部分发生的事情有什么解释吗？
@lamback："其他实现…有一个潜在的竞争条件错误。"因为你不能锁定文件系统，所有的实现，包括这一个，在被认为是调用它的代码的一部分时都有一个竞争条件：另一个进程可以删除你创建它和放入它之间的目录。我认为最好不要在低层代码中担心这些事情，而是在高层代码块周围有一个try块来捕获它们。这更接近于Python请求宽恕的精神。
但是这个解决了两个线程在完全相同的时间创建同一个目录时非常常见的竞争条件。not os.path.exists有很高的机会同时调用os.makedirs。
为了防止出现竞争情况，您可以安装ipython并使用ipython.utils.path.ensure_dir_exists()。

在python中>=3.2，这是

1	os.makedirs(path, exist_ok=True)

在早期版本中，使用@tzot的答案。

相关讨论

这比捕获异常更容易：

1
2
3

import os
if not os.path.exists(...):
os.makedirs(...)

免责声明：此方法需要两个系统调用，在某些环境/条件下更容易受到竞争条件的影响。如果你写的东西比在受控环境中运行的简单的一次性脚本更复杂，你最好选择只需要一个系统调用的公认答案。

更新2012-07-27

我很想删除这个答案，但我认为下面的评论有价值。因此，我正在将其转换为wiki。

相关讨论

最近，我发现了distutils.dir_util.mkpath：

1
2
3
4

In [17]: from distutils.dir_util import mkpath

In [18]: mkpath('./foo/bar')
Out[18]: ['foo', 'foo/bar']

相关讨论

如果文件已经存在，mkdir -p会给您一个错误：

1
2
3

$ touch /tmp/foo
$ mkdir -p /tmp/foo
mkdir: cannot create directory `/tmp/foo': File exists

因此，如果os.path.isdir返回False(在检查errno.EEXIST时)，那么对先前建议的改进将是重新raise例外。

(更新)另见这一高度相似的问题；我同意接受的回答(和注意事项)，除非我建议使用os.path.isdir而不是os.path.exists。

(更新)根据注释中的建议，完整功能如下：

1
2
3
4

import os
def mkdirp(directory):
if not os.path.isdir(directory):
os.makedirs(directory)

相关讨论

使用python3标准库中的pathlib：

1	Path(mypath).mkdir(parents=True, exist_ok=True)

If parents is true, any missing parents of this path are created as
needed; they are created with the default permissions without taking
mode into account (mimicking the POSIX mkdir -p command).
If exist_ok is false (the default), an FileExistsError is raised if
the target directory already exists.

If exist_ok is true, FileExistsError exceptions will be ignored (same
behavior as the POSIX mkdir -p command), but only if the last path
component is not an existing non-directory file.

Changed in version 3.5: The exist_ok parameter was added.

相关讨论

正如其他解决方案中提到的，我们希望能够在模仿mkdir -p的行为的同时攻击文件系统一次。我认为这不可能，但我们应该尽可能接近。

先编码，后解释：

1
2
3
4
5
6
7
8
9
10
11
12

import os
import errno

def mkdir_p(path):
""" 'mkdir -p' in Python"""
try:
os.makedirs(path)
except OSError as exc: # Python >2.5
if exc.errno == errno.EEXIST and os.path.isdir(path):
pass
else:
raise

正如对@tzot答案的注释所表明的那样，在实际创建目录之前，检查是否可以创建目录时存在问题：您不能同时判断是否有人更改了文件系统。这也符合Python要求宽恕而不是允许的风格。

所以我们应该做的第一件事就是建立一个目录，如果它出错了，找出原因。

正如JacobGabrielson指出的那样，我们必须寻找的一个案例是，在我们试图放置目录的地方已经存在一个文件。

使用mkdir -p时：

1
2
3

$ touch /tmp/foo
$ mkdir -p /tmp/foo
mkdir: cannot create directory '/tmp/foo': File exists

在Python中，类似的行为是引发异常。

所以我们必须弄清楚这是不是真的。不幸的是，我们不能。我们从makedirs得到相同的错误消息，不管目录存在(好)还是文件存在，都会阻止创建目录(坏)。

解决问题的唯一方法是再次检查文件系统以查看是否有目录。如果有，则静默返回，否则引发异常。

唯一的问题是文件系统现在的状态可能与调用makedirs时的状态不同。一个文件存在，导致makedirs失败，但现在有一个目录在它的位置。这其实没什么关系，因为在最后一次文件系统调用目录时，函数只会安静地退出，而不会引发异常。

相关讨论

我认为阿萨的回答基本上是正确的，但你可以把它扩大一点，使其更像以东十一〔0〕号，或者：

1
2
3
4
5

import os

def mkdir_path(path):
if not os.access(path, os.F_OK):
os.mkdirs(path)

或

1
2
3
4
5
6
7
8
9

import os
import errno

def mkdir_path(path):
try:
os.mkdirs(path)
except os.error, e:
if e.errno != errno.EEXIST:
raise

这两种方法都可以处理路径已经静默存在的情况，但会让其他错误冒泡。

相关讨论

功能声明；

1
2
3
4
5
6
7
8
9
10

import os
def mkdir_p(filename):

try:
folder=os.path.dirname(filename)
if not os.path.exists(folder):
os.makedirs(folder)
return True
except:
return False

用途：

1
2
3
4

filename ="./download/80c16ee665c8/upload/backup/mysql/2014-12-22/adclient_sql_2014-12-22-13-38.sql.gz"

if (mkdir_p(filename):
print"Created dir :%s" % (os.path.dirname(filename))

我个人在以下方面取得了成功，但我的函数应该被称为"确保此目录存在"之类的函数：

1
2
3
4
5
6
7
8
9
10

def mkdirRecursive(dirpath):
import os
if os.path.isdir(dirpath): return

h,t = os.path.split(dirpath) # head/tail
if not os.path.isdir(h):
mkdirRecursive(h)

os.mkdir(join(h,t))
# end mkdirRecursive

相关讨论

1
2
3
4
5
6

import os
import tempfile

path = tempfile.mktemp(dir=path)
os.makedirs(path)
os.rmdir(path)

1
2
3
4
5
6
7
8
9
10
11
12
13
14

import os
from os.path import join as join_paths

def mk_dir_recursive(dir_path):

if os.path.isdir(dir_path):
return
h, t = os.path.split(dir_path) # head/tail
if not os.path.isdir(h):
mk_dir_recursive(h)

new_path = join_paths(h, t)
if not os.path.isdir(new_path):
os.mkdir(new_path)

基于@dave c的答案，但修复了树的一部分已经存在的错误