Casperjs / PhantomJs vs Selenium

Chúng tôi đang sử dụng Selenium để tự động hóa UIthử nghiệm của chúng tôi . Gần đây, chúng tôi đã thấy phần lớn người dùng của chúng tôi sử dụng Chrome. Vì vậy, chúng tôi muốn biết - ưu và nhược điểm của việc sử dụng PhantomJS vs Selenium:

• Có bất kỳ lợi thế thực sự nào về hiệu suất, ví dụ như thời gian thực hiện các trường hợp thử nghiệm?
• Khi nào nên thích PhantomJS hơn Selenium?

Họ đang tấn công các vấn đề khác nhau. Vì PhantomJS chạy hoàn hảo trên dòng lệnh, nên nó phù hợp làm lớp thử nghiệm khói đầu tiên, cho dù là một phần của quy trình phát triển và / hoặc trong một máy chủ tích hợp liên tục. Selenium nhắm mục tiêu nhiều trình duyệt và do đó rất hữu ích để đảm bảo tính nhất quán của trình duyệt chéo và thực hiện các thử nghiệm rộng rãi trên các hệ điều hành khác nhau.

Nếu ứng dụng web của bạn cần chạy trên nhiều trình duyệt web khác nhau, chỉ chạy thử nghiệm giao diện người dùng với PhantomJS sẽ không mang lại phạm vi kiểm tra nhiều nhất. Tuy nhiên, hoàn toàn ổn khi khởi chạy PhantomJS và thực hiện một số kiểm tra vệ sinh cơ bản trước khi thực hiện các bài kiểm tra chuyên sâu. Hãy tưởng tượng sự điên rồ của việc thử nghiệm một ứng dụng tài chính trong đó màn hình đăng nhập vô tình bị hỏng và không hoạt động!

Lưu ý rằng ranh giới giữa hai người bị mờ đi đôi chút với sự hỗ trợ WebDriver gần đây trong PhantomJS mới nhất. Bây giờ có thể nhanh chóng chạy các thử nghiệm đầu tiên bằng PhantomJS và sau đó (giả sử không có lỗi nghiêm trọng nào) tiếp tục thực hiện các thử nghiệm tương tự một cách triệt để trong thiết lập Selenium.

Với sự tích hợp WebDriver gần đây (như Ariya đã lưu ý), giờ đây bạn có thể sử dụng Selenium để lái PhantomJS.

Điều này là vô cùng mạnh mẽ.

Bạn có thể chạy một tập các thử nghiệm Selenium hoàn toàn tự động (sử dụng PhantomJS làm triển khai WebDriver) thông qua CI của bạn trên máy chủ Unix không đầu trên mỗi lần đăng ký. Sau đó, nếu bạn muốn kiểm tra khả năng tương thích của trình duyệt, bạn có thể chạy thử nghiệm cục bộ bằng cách thay đổi triển khai WebDriver bên dưới thành Chrome, Firefox, v.v.

Tôi hiện đang viết một khung trích xuất web. Tôi có 524 bài kiểm tra lấy dữ liệu từ 250 trang web bằng XPath. Ban đầu khung sử dụng trình phân tích cú pháp HTML, HTMLCleaner, nhưng tôi hiện đang điều tra bằng Selenium vì tôi muốn hỗ trợ Javascript. Tôi đã chạy thử nghiệm các trình điều khiển HtmlUnit, Chrome, Firefox và PhantomJS . Dưới đây là so sánh về thời gian thực hiện và số lần thất bại cho mỗi phương pháp:

                    Failures    Time (secs) 
HtmlCleaner         0           82  
HtmlUnit            169         102 
Google Chrome       38          562 
Firefox             46          1159    
PhantomJS           40          575

Một vài bình luận:

• Trong một số trường hợp, "thất bại" có thể không phải là thất bại, có thể là các trình trích xuất bị lỗi vì Javascript đang viết lại DOM. Tôi đang trong quá trình phân tích những thất bại để tìm ra nguyên nhân.

• Điều đó nói rằng, HtmlUnit là trình điều khiển Selenium nhanh nhất nhưng nó cũng không đáng tin cậy. Sự không đáng tin cậy này không chỉ liên quan đến Javascript, có vấn đề khi xử lý HTML "lộn xộn, bẩn thỉu" trong thế giới thực bởi vì một cái gì đó dường như bị phá vỡ trong thuật toán cân bằng thẻ. Một số vấn đề đã được nêu ra về vấn đề này nhưng chúng chưa được khắc phục - xem HTML-UNIT 1423 và HTML-UNIT 1046 .

• Firefox là trình điều khiển Selenium chậm nhất, mặc dù tôi đang vô hiệu hóa tải hình ảnh và bảng định kiểu. Điều này là do tốc độ tải và khởi tạo chậm nhất, khiến nó chậm hơn đáng kể so với Chrome và mỗi lần trích xuất không cần tải lại trình điều khiển (trong các thử nghiệm tôi tạo ra một nhóm 5 trình điều khiển để giảm thiểu độ trễ truy xuất URL cho tất cả trình điều khiển web Selenium).

• PhantomJS đạt được độ chính xác tốt hơn Firefox, thấp hơn một chút so với Chrome, nhưng trong khoảng một nửa thời gian của Firefox. Hơn thế nữa, tôi có thể chạy nó trên hộp dev của mình, nó không "chiếm lấy máy của tôi" bằng cách khởi chạy nhiều trình duyệt để tôi có thể bắt tay vào công việc.

Tôi rất muốn giới thiệu PhantomJS.

Tận dụng sức mạnh của cả Selenium và PhantomJS PhantomJS có khả năng trình duyệt không đầu, do đó, sử dụng nó như một trong những trình duyệt có selenium (Ngoài các trình duyệt truyền thống như IE, Chrome, v.v.) Ưu điểm của phương pháp này:

1. Có thể được sử dụng để thực hiện Sanity cho các ứng dụng web trong CI (Mặc dù các máy đại lý không có IE hoặc chrome), các thử nghiệm sẽ chạy hiệu quả.
2. Một số nhóm phát triển sử dụng phương pháp này để có được kết quả nhanh chóng và tiêu tốn ít thời gian và tài nguyên hơn.
3. Tính năng lớn nhất của ph Phantom JS là chụp màn hình, chạy thử nghiệm song song bằng cách sử dụng đa luồng, điều này sẽ giúp giảm đáng kể thời gian thực hiện của bạn.

những thách thức tôi gặp phải khi sử dụng PhantomJS:

Ứng dụng của tôi đã định giá ứng dụng web:

1. Tại một số điểm định vị hoạt động tốt trên trình duyệt chrome không hoạt động trên ph PhantomJS.
2. Đôi khi trong khi thực hiện nhấp đúp hoặc nhấp chuột theo ngữ cảnh bằng selen, tôi phải kiểm tra thêm để xác minh các thao tác tại nơi đầu tiên không nhấp.
3. Cache và cookie kiên trì. Sau khi thực hiện đăng xuất và sau đó đăng nhập dữ liệu vẫn còn trong bộ nhớ cache. | Vì vậy, chúng tôi thực hiện thử nghiệm trên chrome.
4. Một trong những vấn đề quan trọng nhất tôi tìm thấy "Sự cố tải lên tệp". Chúng tôi không thể tải lên một tệp trong trình duyệt ph PhantomJs trong ứng dụng của chúng tôi. Chúng tôi đã thử nhiều thứ javascriptexcutor, jqueries nhưng không có cái nào hoạt động cả. Vì vậy, chúng tôi cũng thực hiện thử nghiệm này trên Chrome. Lưu ý: Chúng tôi đã sử dụng các hàm javascript rộng rãi trong khung của chúng tôi để tương tác với phần tử web cho PhantomJS. Một điều chắc chắn là thời gian thực hiện rất ít trong PhantomJS. Vì vậy, nó phụ thuộc vào mức độ ưu tiên của khách hàng cho dù anh ta muốn Chức năng / Hiệu suất sau đó đi cùng với nó. Nếu bạn muốn kiểm tra kịch bản từ đầu đến cuối thì hãy chọn chrome.