Ruby スクリプトからの読み取り時に `readline()` を使用した `subprocess.Popen` がハングするのはなぜですか?これはどうすれば修正できますか?

Python サブプロセス readlines() がハングします

問題:

subprocess.Popen を使用して Ruby スクリプトの出力を読み取るときストリーミング形式で readline() を実行すると、readline() は無期限にハングし、決してハングしません。

背景:

目標は、Ruby ファイルの出力を 1 行ずつストリーミングし、出力全体をバッファリングせずに出力することです。

from subprocess import Popen, PIPE, STDOUT
import pty
import os

file_path = '/Users/luciano/Desktop/ruby_sleep.rb'

command = ' '.join(["ruby", file_path])

master, slave = pty.openpty()
proc = Popen(command, bufsize=0, shell=True, stdout=slave, stderr=slave, close_fds=True)     
stdout = os.fdopen(master, 'r', 0)

while proc.poll() is None:
    data = stdout.readline()
    if data != "":
        print(data)
    else:
        break

print("This is never reached!")

ruby_sleep.rb スクリプトは、2 秒間の単純なメッセージを出力します。遅延:

puts "hello"

sleep 2

puts "goodbye!"

根本原因:

readline() は、Ruby スクリプトが行を終了せずに (つまり、改行なしで) データを出力するため、ハングしたままになります。これにより、readline() は改行が行を完了するまで無期限に待機します。

解決策:

プラットフォームの可用性に応じて、いくつかの解決策が存在します:

• 向けLinux:

  標準ライブラリの pty を使用して疑似端末 (tty) を開き、Ruby 側で行バッファリングを有効にし、各行が改行で終了するようにします。

  import os
  import pty
  from subprocess import Popen, STDOUT
  
  master_fd, slave_fd = pty.openpty()  # provide tty to enable
                                       # line-buffering on ruby's side
  proc = Popen(['ruby', 'ruby_sleep.rb'],
               stdin=slave_fd, stdout=slave_fd, stderr=STDOUT, close_fds=True)
  os.close(slave_fd)
  try:
      while 1:
          try:
              data = os.read(master_fd, 512)
          except OSError as e:
              if e.errno != errno.EIO:
                  raise
              break # EIO means EOF on some systems
          else:
              if not data: # EOF
                  break
              print('got ' + repr(data))
  finally:
      os.close(master_fd)
      if proc.poll() is None:
          proc.kill()
      proc.wait()
  print("This is reached!")

• Linux ベースの場合プラットフォーム:

  標準ライブラリの pty を使用し、マスター ファイル記述子のアクティビティを監視することを選択して、データが非ブロック方式で読み取られるようにします。

  import os
  import pty
  import select
  from subprocess import Popen, STDOUT
  
  master_fd, slave_fd = pty.openpty()  # provide tty to enable
                                       # line-buffering on ruby's side
  proc = Popen(['ruby', 'ruby_sleep.rb'],
               stdout=slave_fd, stderr=STDOUT, close_fds=True)
  
  timeout = .04 # seconds
  while 1:
      ready, _, _ = select.select([master_fd], [], [], timeout)
      if ready:
          data = os.read(master_fd, 512)
          if not data:
              break
          print("got " + repr(data))
      elif proc.poll() is not None: # select timeout
          assert not select.select([master_fd], [], [], 0)[0] # detect race condition
          break # proc exited
  os.close(slave_fd) # can't do it sooner: it leads to errno.EIO error
  os.close(master_fd)
  proc.wait()
  
  print("This is reached!")

• クロスプラットフォーム オプション:

  使用stdbuf を使用して、非対話モードで行バッファリングを有効にします。

  from subprocess import Popen, PIPE, STDOUT
  
  proc = Popen(['stdbuf', '-oL', 'ruby', 'ruby_sleep.rb'],
               bufsize=1, stdout=PIPE, stderr=STDOUT, close_fds=True)
  for line in iter(proc.stdout.readline, b''):
      print line,
  proc.stdout.close()
  proc.wait()

これらのソリューションはすべて、Ruby 側で行バッファリングを有効にし、各行が改行で終了することを保証し、readline( ) 正しく機能します。

以上がRuby スクリプトからの読み取り時に `readline()` を使用した `subprocess.Popen` がハングするのはなぜですか?これはどうすれば修正できますか?の詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。