exécution d'une ligne de commande contenant Pipes et affichage du résultat sur STDOUT

Question

Comment appeler une commande shell depuis Python qui contient un pipe et capturer la sortie ?

Supposons que la commande soit quelque chose comme :

cat file.log | tail -1

L'équivalent Perl de ce que j'essaie de faire serait quelque chose comme :

my $string = `cat file.log | tail -1`;

Answer 1

Utiliser un subprocess.PIPE, comme expliqué dans la section de la docs sur les subprocessus "Remplacer le pipeline de l'obus" :

import subprocess
p1 = subprocess.Popen(["cat", "file.log"], stdout=subprocess.PIPE)
p2 = subprocess.Popen(["tail", "-1"], stdin=p1.stdout, stdout=subprocess.PIPE)
p1.stdout.close()  # Allow p1 to receive a SIGPIPE if p2 exits.
output,err = p2.communicate()

Ou, en utilisant le sh module la tuyauterie devient composition des fonctions :

import sh
output = sh.tail(sh.cat('file.log'), '-1')

Answer 2

import subprocess
task = subprocess.Popen("cat file.log | tail -1", shell=True, stdout=subprocess.PIPE)
data = task.stdout.read()
assert task.wait() == 0

Notez que cela ne capture pas stderr. Et si vous voulez capturer stderr aussi, vous devrez utiliser task.communicate() ; appel task.stdout.read() y luego task.stderr.read() peut se bloquer si le tampon pour stderr se remplit. Si vous voulez les combiner, vous devriez pouvoir utiliser 2>&1 dans le cadre de la commande shell.

Mais étant donné votre cas exact,

task = subprocess.Popen(['tail', '-1', 'file.log'], stdout=subprocess.PIPE)
data = task.stdout.read()
assert task.wait() == 0

évite de devoir utiliser le tuyau.

Answer 3

Ceci :

import subprocess
p = subprocess.Popen("cat file.log | tail -1", shell=True, stdout=subprocess.PIPE, stderr=subprocess.PIPE, stdin=subprocess.PIPE)
#for shell=False use absolute paths
p_stdout = p.stdout.read()
p_stderr = p.stderr.read()
print p_stdout

---

Ou ceci devrait fonctionner :

import os
result = os.system("cat file.log | tail -1")

Answer 4

Un autre moyen similaire à Popen serait :

command=r"""cat file.log | tail -1 """
output=subprocess.check_output(command, shell=True)

Answer 5

Il s'agit d'une bifurcation de @chown avec quelques améliorations :

• un alias pour import subprocess facilite le réglage des paramètres
• si vous voulez juste la sortie, vous n'avez pas besoin de mettre stderr o stdin lors de l'appel Popen
• pour un meilleur formatage, il est recommandé de décoder la sortie
• shell=True est nécessaire, afin d'appeler un interpréteur pour la ligne de commande

---

#!/usr/bin/python3

import subprocess as sp

p = sp.Popen("cat app.log | grep guido", shell=True, stdout=sp.PIPE)

output = p.stdout.read()
print(output.decode('utf-8'))

---

$ cat app.log 
2017-10-14 22:34:12, User Removed [albert.wesker]
2017-10-26 18:14:02, User Removed [alexei.ivanovich] 
2017-10-28 12:14:56, User Created [ivan.leon]
2017-11-14 09:22:07, User Created [guido.rossum]

$ python3 subproc.py 
2017-11-14 09:22:07, User Created [guido.rossum]