Quá nhiều kết nối cơ sở dữ liệu trên Amazon RDS

Chúng tôi đang gặp sự cố với người dùng đang chạy truy vấn / lượt xem trong Drupal đôi khi khiến trang web của chúng tôi bị đóng băng. Việc đóng băng xảy ra do truy vấn làm cho số lượng kết nối cơ sở dữ liệu lên tới hơn 400 và về cơ bản bất cứ lúc nào trang web vượt quá 100 kết nối cơ sở dữ liệu, trang web sẽ chậm lại và không phản hồi.

Chúng tôi đang chạy Amazon RDS bằng MySQL Red Hat Linux

Chúng tôi có một EC2 đủ lớn trên máy chủ ứng dụng giao diện người dùng và RDS đủ lớn.

Cách chúng tôi đang khắc phục vấn đề này bây giờ là tìm truy vấn vi phạm và tiêu diệt nó. Khi truy vấn bị hủy ... các kết nối cơ sở dữ liệu của chúng tôi giảm xuống khoảng 20, đó là số tiền bình thường bạn thấy khi theo dõi số liệu thống kê trang web.

Có cách nào để ngăn chặn truy vấn vi phạm và giết nó trước khi nó chạy quá lâu và tiêu tốn các kết nối không? Tôi đang cố gắng tự động hóa việc tiêu diệt truy vấn xấu trước khi nó xảy ra, hoặc ít nhất nhận ra sau 30 giây đó là một truy vấn xấu và giết nó.

Dưới đây là một thủ tục được lưu trữ để tiêu diệt các CHỌN chạy dài

DELIMITER $$

DROP PROCEDURE IF EXISTS `test`.`Kill_Long_Running_Selects` $$
CREATE PROCEDURE `test`.`Kill_Long_Running_Selects` (time_limit INT,display INT)
BEGIN

    DECLARE ndx,lastndx INT;

    DROP TABLE IF EXISTS test.LongRunningSelects;
    CREATE TABLE test.LongRunningSelects
    (
        id INT NOT NULL AUTO_INCREMENT,
        idtokill BIGINT,
        PRIMARY KEY (id)
    ) ENGINE=MEMORY;
    INSERT INTO test.LongRunningSelects (idtokill)
    SELECT id FROM information_schema.processlist
    WHERE user<>'system user' AND info regexp '^SELECT' AND time > time_limit;

    SELECT COUNT(1) INTO lastndx FROM test.LongRunningSelects;
    SET ndx = 0;
    WHILE ndx < lastndx DO
        SET ndx = ndx + 1;
        SELECT idtokill INTO @kill_id
        FROM test.LongRunningSelects WHERE id = ndx;
        CALL mysql.rds_kill(@kill_id);
    END WHILE;

    IF lastndx > 0 THEN
        IF display = 1 THEN
            SELECT GROUP_CONCAT(idtokill) INTO @idlist FROM test.LongRunningSelects;
            SELECT @idlist IDs_KIlled;
            SELECT CONCAT('Processes Killed : ',lastndx) Kill_Long_Running_Selects;
        END IF;
    END IF;

END $$

Để tiêu diệt các CHỌN chạy dài hơn 30 giây, bạn chạy nó

CALL test.Kill_Long_Running_Selects(30,0);

Nếu bạn muốn xem các kết nối bị giết, bạn chạy nó

CALL test.Kill_Long_Running_Selects(30,1);

Có lẽ bạn có thể tạo Sự kiện MySQL để gọi Quy trình được lưu trữ này mỗi phút.

Nếu Amazon không cho phép bạn có đặc quyền EVENT , bạn sẽ phải viết một tập lệnh shell bên ngoài trên máy chủ EC2 để kết nối với DB và chạy Thủ tục lưu trữ. Kịch bản shell đó có thể được đưa vào một crontab.

Nếu Amazon không cho phép bạn có các đặc quyền PROCESS và SUPER , bạn có thể cần phải chuyển DB ra khỏi RDS và vào một phiên bản EC2 khác chạy MySQL để thực hiện điều này. Sau đó, bạn có thể tạo Sự kiện MySQL mà không bị hạn chế lưu trữ của Amazon.