Làm thế nào tôi có thể theo dõi chiều dài của hàng đợi chấp nhận?

Tôi có một giả thuyết: đôi khi các kết nối TCP đến nhanh hơn máy chủ của tôi accept(). Họ xếp hàng cho đến khi hàng đợi tràn ra và sau đó có vấn đề.

Làm thế nào tôi có thể xác nhận điều này đang xảy ra?

Tôi có thể theo dõi độ dài của hàng đợi chấp nhận hoặc số lần tràn không? Có một quầy tiếp xúc ở đâu đó?

Để kiểm tra xem hàng đợi của bạn có bị tràn hay không, hãy sử dụng netstat hoặc nstat

[centos ~]$ nstat -az | grep -i listen
TcpExtListenOverflows           3518352            0.0
TcpExtListenDrops               3518388            0.0
TcpExtTCPFastOpenListenOverflow 0  0.0

[centos ~]$ netstat -s | grep -i LISTEN
    3518352 times the listen queue of a socket overflowed
    3518388 SYNs to LISTEN sockets dropped

Tham khảo: https : // perf sync.com/2015/12/26/investigating-linux-network-issues-with-netstat-and-nstat/

Để theo dõi kích thước hàng đợi của bạn, hãy sử dụng lệnh ss và tìm các ổ cắm SYN-RECV.

$ ss -n state syn-recv sport = :80 | wc -l
119

Tham khảo: https://blog.cloudflare.com/syn-packet-handling-in-the-wild/

Sysdig sẽ cung cấp một số thông tin này ở cuối mỗi tòa nhà accept, làm queuelenđối số. Nó cũng hiển thị chiều dài của hàng đợi như queuemax.

7598971 21:05:30.322229280 1 gunicorn (6451) < accept fd=13(<4t>127.0.0.1:45882->127.0.0.1:8003) tuple=127.0.0.1:45882->127.0.0.1:8003 queuepct=0 queuelen=0 queuemax=10

Theo như tôi biết, nó không cung cấp cơ chế nào để biết chính xác khi nào hoặc bao nhiêu lần hàng đợi đã tràn. Và sẽ rất khó để tích hợp điều này với giám sát định kỳ bằng collectdhoặc tương tự.

Những gì bạn đang tìm kiếm là mục nhập trong đầu ra của lệnh sysctl -a như vậy :::

net.ipv4.tcp_max_sync_backlog = 4096

Trong trường hợp ví dụ trên, tồn đọng của các kết nối trạng thái SYN là tối đa 4096. Bạn có thể tăng mức đó dựa trên lượng RAM trong máy chủ của bạn. Tôi coi tồn đọng 32K là một khởi đầu tốt để điều chỉnh các máy chủ web được tải nặng.

Ngoài ra, hãy đảm bảo các mục sau KHÔNG được đặt thành Một (1) ::

net.ipv4.tcp_abort_on_overflow = 0

Nếu không, nó chắc chắn sẽ bỏ các gói nếu có tràn tồn đọng.

Bạn có thể dễ dàng kiểm tra thông qua

"sysctl -a | egrep tồn đọng"

"sysctl -a | egrep tràn"

Ngoài ra, bạn có thể tìm thấy nhãn "bị rớt" bên dưới

"ifconfig -a"

đầu ra của lệnh. Điều đó cho thấy có bao nhiêu gói đã bị hủy cho mỗi giao diện cùng với các dữ liệu và lỗi khác, v.v.

Để ghi nhật ký các gói bị rơi, có một bài viết về paywall trên RHEL 7 ::

https://access.redhat.com/solutions/1191593

Để nghiên cứu thêm, bạn có thể đọc:

http://veithen.io/2014/01/01/how-tcp-backlog-works-in-linux.html

Nó nêu ở đây theo Sách / Minh họa TCP / IP của Steven:

"Giới hạn hàng đợi áp dụng cho tổng [[]] số lượng mục nhập trên hàng đợi kết nối không hoàn chỉnh [Vách] và [Rắc] số lượng mục trên hàng đợi kết nối đã hoàn thành [Rắc]."

Do đó cũng nói rằng:

"Hàng đợi kết nối đã hoàn thành hầu như luôn trống vì khi một mục nhập được đặt trên hàng đợi này, lệnh gọi của máy chủ chấp nhận trả về và máy chủ sẽ ngắt kết nối hoàn thành khỏi hàng đợi."

Do đó, hàng đợi chấp nhận có vẻ hoàn toàn trống rỗng và bạn sẽ phải điều chỉnh máy chủ Web Apache (có thể trong trường hợp này) để chấp nhận nhanh hơn các kết nối được đặt trên hàng đợi "tổng hợp".