Số lượng người tham gia lý tưởng để đánh giá phương pháp tiếp cận phát triển / kiến ​​trúc phần mềm


7

Đối với luận án của tôi, tôi đã tạo ra một cách tiếp cận phát triển (bao gồm các lược đồ, mẫu ứng dụng và mã nguyên mẫu) để giúp phát triển và điều chỉnh các ứng dụng cho một nền tảng cụ thể dễ dàng hơn.

Tôi đã thực hiện các cuộc phỏng vấn với các nhà phát triển của nền tảng đó để đánh giá cách tiếp cận của tôi. Cho đến nay đã có 5 người được phỏng vấn và phản hồi mà tôi nhận được từ họ là đủ cho phạm vi của tôi, tôi nói.

Tuy nhiên, trong luận án của tôi, tôi muốn biện minh cho quyết định của mình rằng 5 người đánh giá là đủ. Có nghiên cứu khoa học hoặc bài báo nào đề xuất một số lượng người đánh giá nhất định cho cách tiếp cận khá lý thuyết như vậy không?

Tôi biết công việc của Nielsen về đánh giá khả năng sử dụng heuristic nói rằng với 5 người tham gia, bạn phát hiện ra khoảng 75% tất cả các vấn đề trong kiểm tra khả năng sử dụng phần mềm / kiểm tra giao diện người dùng .

Nhưng như tôi đã nói, cách tiếp cận của tôi không phải là sản phẩm phần mềm cụ thể phải được đánh giá, mà chỉ là chính mô hình, đó là lý do tại sao tôi đang tìm kiếm nghiên cứu trong lĩnh vực đó.


nó dường như có liên quan đến sự phức tạp của phần mềm và "phạm vi bảo hiểm" của người dùng khi chọn các chức năng của phần mềm (tương tự như "phạm vi kiểm tra" ngoại trừ người dùng, không phải mã, được xem là người kiểm tra). bạn có thể có một người dùng chọn tất cả các chức năng và có "độ bao phủ" cao hoặc có nhiều người dùng không "bao quát" tất cả các chức năng đó. vì vậy bạn có thể muốn chuyển sang một góc khác tập trung vào tất cả các chức năng của mã của bạn và những chức năng nào thực sự bị "chạm" (đã kiểm tra).
vzn

Là các cuộc phỏng vấn của bạn về bản chất hoặc định lượng?
Raphael

Họ đã định tính hơn.
saschoar

Câu trả lời:


5

"Có nghiên cứu khoa học hay bài báo nào đề xuất một số lượng người đánh giá nhất định cho cách tiếp cận khá lý thuyết như vậy không?"

Có một phương pháp thống kê để tính toán kích thước mẫu chính xác cho một thí nghiệm.
Phương pháp này được gọi là "phân tích công suất" [1]. Nó tính toán kích thước mẫu tối thiểu cần thiết để xác minh rằng kết quả của một thử nghiệm có ý nghĩa thống kê. Cách tiếp cận này giả định rằng bạn có ít nhất hai nhóm. Nhóm kiểm soát và nhóm thử nghiệm (nghĩa là nhóm kiểm soát sử dụng nền tảng mà không cần sửa đổi, nhóm thử nghiệm sử dụng nền tảng với các sửa đổi của bạn).

Vì vậy, trong khi có một quy trình khoa học để tính toán kích thước mẫu chính xác, phương pháp này có thể là quá mức cần thiết cho nghiên cứu của bạn. Nielsen [2] nói rằng đánh giá heuristic chỉ là một phương pháp "rẻ và nhanh" để đánh giá dễ dàng. Như vậy, tôi tin rằng bạn có thể chứng minh kích thước mẫu là 5 bằng cách trích dẫn Nielsen. Tuy nhiên, nếu bạn muốn chuẩn hóa quy trình đánh giá của mình và sử dụng phương pháp thống kê, tôi khuyến khích bạn xem xét phân tích sức mạnh.

Bạn có thể quan tâm đến công cụ trực tuyến này để tính toán sức mạnh .


  1. http://en.wikipedia.org/wiki/Statistic_power
  2. http://www.nngroup.com/topic/heuristic-ev Assessment /
Khi sử dụng trang web của chúng tôi, bạn xác nhận rằng bạn đã đọc và hiểu Chính sách cookieChính sách bảo mật của chúng tôi.
Licensed under cc by-sa 3.0 with attribution required.