Viết stdout Python để nộp ngay lập tức

Khi cố gắng viết thiết bị xuất chuẩn từ tập lệnh Python sang tệp văn bản ( python script.py > log), tệp văn bản được tạo khi lệnh được bắt đầu, nhưng nội dung thực tế không được viết cho đến khi tập lệnh Python kết thúc. Ví dụ:

script.py:

import time
for i in range(10):
    print('bla')
    time.sleep(5)

in ra thiết bị xuất chuẩn cứ sau 5 giây khi được gọi với python script.py, nhưng khi tôi gọi python script.py > log, kích thước của tệp nhật ký sẽ bằng 0 cho đến khi tập lệnh kết thúc. Có thể ghi trực tiếp vào tệp nhật ký, để bạn có thể theo dõi tiến trình của tập lệnh (ví dụ: sử dụng tail) không?

EDIT Hóa ra đó python -u script.pylà mánh khóe, tôi không biết về bộ đệm của thiết bị xuất chuẩn.

Điều này xảy ra bởi vì thông thường khi quá trình STDOUT được chuyển hướng đến một thứ khác ngoài thiết bị đầu cuối, thì đầu ra được đệm vào một số bộ đệm có kích thước cụ thể của hệ điều hành (có thể là 4k hoặc 8k trong nhiều trường hợp). Ngược lại, khi xuất ra một thiết bị đầu cuối, STDOUT sẽ được đệm theo dòng hoặc hoàn toàn không được đệm, vì vậy bạn sẽ thấy đầu ra sau mỗi \nhoặc cho mỗi ký tự.

Nói chung, bạn có thể thay đổi bộ đệm STDOUT với stdbuftiện ích:

stdbuf -oL python script.py > log

Bây giờ nếu bạn tail -F log, bạn sẽ thấy từng đầu ra dòng ngay lập tức khi nó được tạo.

Cách xả dòng rõ ràng khác sau mỗi lần in sẽ đạt được như nhau. Có vẻ như sys.stdout.flush()sẽ đạt được điều này trong Python. Nếu bạn đang sử dụng Python 3.3 hoặc mới hơn, printhàm cũng có một flushtừ khóa thực hiện điều này : print('hello', flush=True).

Điều này sẽ làm công việc:

import time, sys
for i in range(10):
    print('bla')
    sys.stdout.flush()
    time.sleep(5)

Vì Python sẽ đệm stdouttheo mặc định, ở đây tôi đã sử dụng sys.stdout.flush()để xóa bộ đệm.

Một giải pháp khác là sử dụng công tắc -u(không có bộ đệm) của python. Vì vậy, sau đây sẽ làm quá:

python -u script.py >> log

Sự thay đổi về chủ đề sử dụng tùy chọn riêng của python cho đầu ra không có bộ đệm sẽ được sử dụng #!/usr/bin/python -ulàm dòng đầu tiên.

Với #!/usr/bin/env pythonđối số bổ sung đó sẽ không hoạt động, do đó, một cách khác, người ta có thể chạy PYTHONUNBUFFERED=1 ./my_scriipt.py > output.txthoặc thực hiện theo hai bước:

$ export PYTHONUNBUFFERED=1
$ ./myscript.py

Bạn nên chuyển flush=Trueđến printhàm:

import time

for i in range(10):
    print('bla', flush=True)
    time.sleep(5)

Theo tài liệu, theo mặc định, printkhông thực thi bất cứ điều gì về việc xả nước:

Cho dù đầu ra được đệm thường được xác định bởi tệp, nhưng nếu flushđối số từ khóa là đúng, luồng sẽ bị xóa.

Và tài liệu cho syscác strems nói:

Khi tương tác, các luồng tiêu chuẩn được đệm dòng. Mặt khác, chúng được đệm theo khối như các tệp văn bản thông thường. Bạn có thể ghi đè giá trị này bằng -utùy chọn dòng lệnh.

Nếu bạn bị mắc kẹt với một phiên bản cổ của trăn, bạn phải gọi flushphương thức của sys.stdoutluồng:

import sys
import time

for i in range(10):
    print('bla')
    sys.stdout.flush()
    time.sleep(5)