我建议你看一本很棒的在线书籍Dive Into Python。这就是我最初学习这门语言的方式。

除了教你语言的基本结构和大量有用的数据结构之外，它还有一个关于文件处理的很好的章节，以及关于正则表达式等的后续章节。

任何shell都有几组特性。

The Essential Linux/Unix commands. All of these are available through the subprocess library. This isn't always the best first choice for doing all external commands. Look also at shutil for some commands that are separate Linux commands, but you could probably implement directly in your Python scripts. Another huge batch of Linux commands are in the os library; you can do these more simply in Python. And -- bonus! -- more quickly. Each separate Linux command in the shell (with a few exceptions) forks a subprocess. By using Python shutil and os modules, you don't fork a subprocess. The shell environment features. This includes stuff that sets a command's environment (current directory and environment variables and what-not). You can easily manage this from Python directly. The shell programming features. This is all the process status code checking, the various logic commands (if, while, for, etc.) the test command and all of it's relatives. The function definition stuff. This is all much, much easier in Python. This is one of the huge victories in getting rid of bash and doing it in Python. Interaction features. This includes command history and what-not. You don't need this for writing shell scripts. This is only for human interaction, and not for script-writing. The shell file management features. This includes redirection and pipelines. This is trickier. Much of this can be done with subprocess. But some things that are easy in the shell are unpleasant in Python. Specifically stuff like (a | b; c ) | something >result. This runs two processes in parallel (with output of a as input to b), followed by a third process. The output from that sequence is run in parallel with something and the output is collected into a file named result. That's just complex to express in any other language.

特定的程序(awk、sed、grep等)通常可以被重写为Python模块。不要走极端。替换您需要的内容并改进“grep”模块。不要一开始就编写一个替换“grep”的Python模块。

最好的事情是你可以一步一步来做。

用Python替换AWK和PERL。不要管其他的事情。 看看用Python替换GREP。这可能有点复杂，但是您的GREP版本可以根据您的处理需求进行定制。 看看用使用os.walk的Python循环替换FIND。这是一个巨大的胜利，因为您不需要生成那么多的进程。 看看用Python脚本替换常见的shell逻辑(循环、决策等)。

如果你的文本文件操作通常是一次性的，可能在shell提示符下完成，你从python中不会得到更好的东西。

另一方面，如果你经常不得不一遍又一遍地做同样的(或类似的)任务，并且你必须为此编写脚本，那么python是很棒的——你可以很容易地创建自己的库(你也可以用shell脚本来做，但它更麻烦)。

这是一个很简单的例子。

import popen2
stdout_text, stdin_text=popen2.popen2("your-shell-command-here")
for line in stdout_text:
  if line.startswith("#"):
    pass
  else
    jobID=int(line.split(",")[0].split()[1].lstrip("<").rstrip(">"))
    # do something with jobID

还要检查sys和getopt模块，它们是您首先需要的。

最好的选择是专门针对您的问题的工具。如果它正在处理文本文件，那么Sed、Awk和Perl是最佳竞争者。Python是一种通用动态语言。与任何通用语言一样，它支持文件操作，但这不是它的核心目的。如果我特别需要一种动态语言，我会考虑Python或Ruby。

简而言之，非常好地学习Sed和Awk，以及所有其他随*nix风格而来的好东西(所有Bash内置，grep, tr等等)。如果您感兴趣的是文本文件处理，那么您已经使用了正确的方法。

如果您想使用Python作为shell，为什么不看看IPython呢?用互动的方式学习语言也很好。 如果需要进行大量的文本操作，并且使用Vim作为文本编辑器，那么还可以直接用python为Vim编写插件。只需在Vim中输入“:help python”，然后按照说明操作，或者看看这个演示文稿。它是如此简单和强大的编写函数，你将直接在你的编辑器中使用!

In the beginning there was sh, sed, and awk (and find, and grep, and...). It was good. But awk can be an odd little beast and hard to remember if you don't use it often. Then the great camel created Perl. Perl was a system administrator's dream. It was like shell scripting on steroids. Text processing, including regular expressions were just part of the language. Then it got ugly... People tried to make big applications with Perl. Now, don't get me wrong, Perl can be an application, but it can (can!) look like a mess if you're not really careful. Then there is all this flat data business. It's enough to drive a programmer nuts.

进入Python、Ruby等。这些都是非常好的通用语言。它们支持文本处理，并且做得很好(尽管可能与语言的基本核心没有那么紧密地交织在一起)。但它们也可以很好地扩展，并且在一天结束时仍然有漂亮的代码。他们还发展了相当庞大的社区，有大量的图书馆，几乎可以提供任何东西。

Now, much of the negativeness towards Perl is a matter of opinion, and certainly some people can write very clean Perl, but with this many people complaining about it being too easy to create obfuscated code, you know some grain of truth is there. The question really becomes then, are you ever going to use this language for more than simple bash script replacements. If not, learn some more Perl.. it is absolutely fantastic for that. If, on the other hand, you want a language that will grow with you as you want to do more, may I suggest Python or Ruby.

不管怎样，祝你好运!

我已经构建了半长的shell脚本(300-500行)和Python代码，它们具有类似的功能。当执行许多外部命令时，我发现shell更容易使用。当有大量文本操作时，Perl也是一个很好的选择。

添加到前面的答案:检查pexpect模块处理交互式命令(adduser, passwd等)

在研究这个主题时，我发现了这个概念验证代码(通过http://jlebar.com/2010/2/1/Replacing_Bash.html上的评论)，它让你“使用简洁的语法在Python中编写类似shell的管道，并在有意义的地方利用现有的系统工具”:

for line in sh("cat /tmp/junk2") | cut(d=',',f=1) | 'sort' | uniq:
    sys.stdout.write(line)

是的，当然。

看看这些库，它们可以帮助你不再编写shell脚本(Plumbum的座右铭)。

铅 军士 上海

另外，如果你想用基于Python的东西替换awk, sed和grep，那么我推荐pyp -

“The Pyed Piper”，或pyp，是一个linux命令行文本操作 工具类似于awk或sed，但使用标准的python字符串和 列表方法以及自定义函数进化为快速生成 在紧张的生产环境中产生的结果。

我刚刚发现了如何结合bash和ipython的最佳部分。到目前为止，这似乎比使用subprocess等更舒服。你可以很容易地复制现有bash脚本的大部分内容，例如以python的方式添加错误处理:) 这是我的结果:

#!/usr/bin/env ipython3

# *** How to have the most comfort scripting experience of your life ***
# ######################################################################
#
# … by using ipython for scripting combined with subcommands from bash!
#
# 1. echo "#!/usr/bin/env ipython3" > scriptname.ipy    # creates new ipy-file
#
# 2. chmod +x scriptname.ipy                            # make in executable
#
# 3. starting with line 2, write normal python or do some of
#    the ! magic of ipython, so that you can use unix commands
#    within python and even assign their output to a variable via
#    var = !cmd1 | cmd2 | cmd3                          # enjoy ;)
#
# 4. run via ./scriptname.ipy - if it fails with recognizing % and !
#    but parses raw python fine, please check again for the .ipy suffix

# ugly example, please go and find more in the wild
files = !ls *.* | grep "y"
for file in files:
  !echo $file | grep "p"
# sorry for this nonsense example ;)

请参阅IPython文档，了解系统shell命令并将其用作系统shell。

我喜欢Python的一个原因是它比POSIX工具更加标准化。我必须反复检查每个比特是否与其他操作系统兼容。在Linux系统上编写的程序在OSX的BSD系统上可能无法正常工作。对于Python，我只需要检查目标系统是否有足够现代的Python版本。

更棒的是，用标准Python编写的程序甚至可以在Windows上运行!

以下是我的一些经验之谈:

外壳:

Shell可以很容易地生成只读代码。把它写下来，当你回头看的时候，你永远也不会知道你又做了什么。这很容易做到。 shell可以用管道在一行中做大量的文本处理、分割等。 当涉及到集成不同编程语言的程序调用时，它是最好的粘合语言。

python:

如果你想要Windows的可移植性，请使用python。 当您必须处理的不仅仅是文本，比如数字的集合时，Python可能会更好。为此，我推荐python。

我通常选择bash来处理大多数事情，但当我有一些必须跨越窗口边界的东西时，我就使用python。

Pythonpy是一个工具，可以方便地访问awk和sed的许多特性，但使用python语法:

$ echo me2 | py -x 're.sub("me", "you", x)'
you2

我在PyPI: ez上发布了一个包。 使用pip install ez进行安装。

它在shell中打包了通用命令，我的库使用了与shell基本相同的语法。例如，cp(源，目标)可以同时处理文件和文件夹!(书纸的包装。shutil副本。Copytree，它决定什么时候使用哪个)。更妙的是，它可以支持像R!

另一个例子:没有os。Walk，使用fls(path, regex)递归地查找文件并使用正则表达式进行过滤，它将返回带有或没有全路径的文件列表

最后一个例子:你可以结合它们来编写非常简单的脚本: Files = fls('.'，'py$');文件,myDir (cp)

一定要去看看!我花了几百个小时来编写/改进它!

截至2015年和Python 3.4的发布，现在有一个相当完整的用户交互shell: http://xon.sh/或https://github.com/scopatz/xonsh

演示视频没有显示正在使用的管道，但是在默认shell模式下支持管道。

Xonsh(“conch”)非常努力地模仿bash，因此您已经获得了肌肉记忆，例如

env | uniq | sort -r | grep PATH

or

my-web-server 2>&1 | my-log-sorter

仍然可以正常工作。

本教程相当冗长，似乎涵盖了人们通常在ash或bash提示符时所期望的大量功能:

Compiles, Evaluates, & Executes! Command History and Tab Completion Help & Superhelp with ? & ?? Aliases & Customized Prompts Executes Commands and/or *.xsh Scripts which can also be imported Environment Variables including Lookup with ${} Input/Output Redirection and Combining Background Jobs & Job Control Nesting Subprocesses, Pipes, and Coprocesses Subprocess-mode when a command exists, Python-mode otherwise Captured Subprocess with $(), Uncaptured Subprocess with $[], Python Evaluation with @() Filename Globbing with * or Regular Expression Filename Globbing with Backticks

在ShellPy库中可以使用python而不是bash。

下面是一个从Github下载Python用户头像的例子:

import json
import os
import tempfile

# get the api answer with curl
answer = `curl https://api.github.com/users/python
# syntactic sugar for checking returncode of executed process for zero
if answer:
    answer_json = json.loads(answer.stdout)
    avatar_url = answer_json['avatar_url']

    destination = os.path.join(tempfile.gettempdir(), 'python.png')

    # execute curl once again, this time to get the image
    result = `curl {avatar_url} > {destination}
    if result:
        # if there were no problems show the file
        p`ls -l {destination}
    else:
        print('Failed to download avatar')

    print('Avatar downloaded')
else:
    print('Failed to access github api')

如您所见，所有在grave重音(')符号内的表达式都在shell中执行。在Python代码中，您可以捕获此执行的结果并对其执行操作。例如:

log = `git log --pretty=oneline --grep='Create'

这一行首先在shell中执行git log——pretty=oneline——grep='Create'，然后将结果赋值给log变量。结果具有以下属性:

从已执行进程的Stdout中Stdout整个文本

Stderr从已执行进程的Stderr得到的整个文本

Returncode执行的返回码

这是该库的总体概述，更详细的描述和示例可以在这里找到。