Kiểm tra tham số - Khi nào và tại sao bạn sử dụng chúng?

Gần đây tại nơi làm việc, chúng tôi đã có một số ý kiến ​​khác nhau liên quan đến thử nghiệm Tham số . Thông thường chúng tôi sử dụng kiểu TDD (hoặc ít nhất là cố gắng) để tôi hiểu những lợi ích của việc chấp nhận đó. Tuy nhiên, tôi đang vật lộn để xem các bài kiểm tra tham số đạt được mang lại. Để tham khảo, chúng tôi làm việc trên một dịch vụ và đó là các thư viện được hiển thị thông qua giao diện RESTful.

Những gì tôi đã thấy cho đến nay là các thử nghiệm, ít nhất là sử dụng JUnit trong Eclipse:

• Thiếu chi tiết - khi thử nghiệm thất bại, rất khó để xem các tham số khiến thử nghiệm bị lỗi
• Thường phức tạp để tạo
• Có xu hướng được tạo sau khi mã được viết - hoàn toàn không phải là một nhược điểm như vậy nhưng mọi người có đặt ra các thử nghiệm tham số hóa khi họ bắt đầu một đoạn mã không?

Nếu bất cứ ai có bất kỳ ví dụ về nơi họ thực sự hữu ích hoặc thậm chí bất kỳ gợi ý tốt để sử dụng chúng sẽ là tuyệt vời. Tôi muốn chắc chắn rằng tôi không chỉ cố chấp vì cá nhân tôi không chọn sử dụng chúng và xem liệu chúng có phải là thứ chúng tôi nên xem là một phần trong kho vũ khí thử nghiệm của mình không.

Vấn đề với việc kiểm tra bất kỳ phần mềm nào là sự phức tạp sẽ tăng lên khá nhanh. Thực tế là, bạn không thể kiểm tra tất cả các kết hợp tham số có thể được truyền cho các phương thức của mình. Phadke ủng hộ cách tiếp cận Thiết kế Thử nghiệm (DOE), cho phép tạo ra danh sách các giá trị tham số có khả năng cần được kiểm tra.

Ý tưởng là, mặc dù bạn không kiểm tra toàn diện, hầu hết các lỗi đều khiến "vùng lỗi" xảy ra thay vì lỗi điểm cô lập. Phương pháp DOE Phadke chủ trương sử dụng các mảng trực giao lấy mẫu không gian tham số đủ mịn để đánh vào tất cả các vùng lỗi có thể.

Các lỗi riêng biệt có thể sẽ không được xác định, nhưng những lỗi này thường ít hơn các vùng lỗi.

Cách tiếp cận DOE cung cấp cho bạn một cách có hệ thống để chọn các giá trị tham số để thay đổi.

Chúng có thể hữu ích để đảm bảo rằng mã của bạn xử lý không chỉ đường dẫn hạnh phúc, mà cả các trường hợp cạnh. Sau khi bạn biết mã của mình hoạt động với các biến thông thường, hãy tham số hóa trường hợp kiểm tra và đảm bảo null và 0, chuỗi rỗng, số lớn, chuỗi dài, ký tự Unicode kỳ lạ, v.v., cũng hoạt động tốt.

Có ít nhất hai hương vị của các thử nghiệm được tham số hóa, ít nhất là trong JUnit 4.8. Đó là: Các tham số tham số ( @RunWith(Parameterized.class)) yêu cầu nguồn dữ liệu, tạo / đọc các cấu hình tham số được xác định trước và Lý thuyết ( @RunWith(Theories.class)), đưa ra một hoặc nhiều bộ đầu vào có thể cho mỗi loại đối số có thể thực hiện đặc tả của các phương thức đã cho. Có vẻ như ít hơn như thế này:

• chỉ định một số giá trị có thể ( @DataPoints) cho các đối số chuỗi (như null, chuỗi rỗng, chuỗi không trống, chuỗi thực sự dài)
• chỉ định một số giá trị có thể ( @DataPoints) cho các đối số lớp Thú (như null, Dogví dụ, Catví dụ, Birdchẳng hạn)
• chuẩn bị @Theorymà chấp nhận một Stringtham số và một Animaltham số. nó sẽ được thực thi với mọi kết hợp có thể có của các giá trị tham số có thể (trong ví dụ đã cho đó là kết hợp 4 x 4 = 16, bao gồm ( null, null))
• nếu phương thức được kiểm tra không thể chấp nhận một số kết hợp, hãy sử dụng Assume.assumeThatnhập tĩnh để lọc ra các kết hợp không hợp lệ (ví dụ: khi bạn muốn kiểm tra hành vi của phương thức cho các chuỗi không trống, một trong những dòng đầu tiên sẽ là "giả sử không phải là null"

Như đã viết trước đây - sẽ không có ý nghĩa khi kiểm tra mọi kết hợp có thể có của mọi phương thức (nó phát nổ các bộ kiểm tra, tưởng tượng thử nghiệm một phương thức với 5 tham số, mỗi tham số chỉ có 5 giá trị có thể: 5 ** 5 -> hơn 3000 lần chạy thử !), nhưng đối với các phương pháp quan trọng cho nhiệm vụ (như phương thức API) tôi khuyến khích điều đó, chỉ để ở bên an toàn ...

Ví dụ chung:

• Các phương thức với các đối số chuỗi. Sử dụng các thử nghiệm tham số để kiểm tra các đầu vào khác nhau và đầu ra dự kiến ​​của chúng. Thực tế hơn nhiều khi có một danh sách các cặp (đầu vào, dự kiến) so với viết một TC cho mỗi cặp.

• Áp dụng cùng một kịch bản trên các đối số khác nhau. Chúng tôi có một kịch bản làm việc với các Animalđối tượng và có rất nhiều lớp con như Dog, Cat, Bird. Tạo một danh sách các động vật có sẵn và kiểm tra kịch bản trên chúng.

Cụ thể cho dịch vụ web:

• Từ ví dụ chuỗi đối số ở trên. Kiểm tra những gì xảy ra với các đối số khác nhau cùng loại nhưng giá trị khác nhau.

Kiểm tra tham số hoạt động tốt cho các chức năng / tính năng kiểm tra có đầu vào đơn giản khi bạn muốn kiểm tra nhiều loại đầu vào.

Chúng không hoạt động tốt để kiểm tra chức năng khác nhau và đầu vào phức tạp. Chúng không nên được sử dụng như một cấu trúc thuận tiện để viết ít mã hơn.

Một trường hợp tôi sử dụng nhiều thử nghiệm được tham số hóa theo cách TDD-ish là viết trình phân tích cú pháp - Tôi có thể bắt đầu với một danh sách nếu đầu vào và đầu ra dự kiến ​​và sau đó viết mã để nó vượt qua tất cả các trường hợp thử nghiệm.

Nhưng tôi đã thấy một vài điều khủng khiếp của thử nghiệm tham số. Không, Virginia, bộ thử nghiệm của bạn không cần thử nghiệm đơn vị của riêng nó.