Tôi đang tìm kiếm các công cụ sẽ giúp tôi và nhóm của tôi chú thích các bộ huấn luyện. Tôi làm việc trong một môi trường với các tập hợp dữ liệu lớn, một số trong đó không có cấu trúc hoặc bán cấu trúc. Trong nhiều trường hợp có đăng ký giúp tìm ra một sự thật có căn cứ. Tuy nhiên, trong nhiều trường hợp, một bộ giám tuyển là cần thiết, ngay cả khi nó chỉ để đánh giá. Một yếu tố phức tạp là một số dữ liệu không thể rời khỏi tiền đề.
Chúng tôi đang tìm cách chú thích một nhiệm vụ phát hiện đối tượng, nhưng tôi dự đoán một nhiệm vụ phân đoạn hình ảnh, một nhiệm vụ phân loại văn bản và một nhiệm vụ phát hiện tình cảm trong tương lai gần.
Điều tôi đang tìm kiếm là một hệ thống có thể giúp một nhóm tạo chú thích, tốt nhất là theo cách thúc đẩy các chú thích bằng cách hiển thị tiến trình của nhóm, tiến trình cá nhân tương đối và có lẽ là thỏa thuận chú thích cá nhân.
