Câu hỏi được gắn thẻ «tfidf»

Tôi đang chuyển đổi một tập hợp các tài liệu văn bản thành các vectơ từ cho mỗi tài liệu. Tôi đã thử điều này bằng TfidfVectorizer và HashingVectorizer Tôi hiểu rằng HashingVectorizerkhông xem xét IDFđiểm số như thế TfidfVectorizernào. Lý do tôi vẫn làm việc với một HashingVectorizersự linh …

11 nlp  scikit-learn  text-mining  tfidf 

Khi bạn huấn luyện mô hình word2vec (ví dụ sử dụng gensim), bạn cung cấp một danh sách các từ / câu. Nhưng dường như không có cách nào để xác định trọng số cho các từ được tính ví dụ bằng TF-IDF. Là cách thông thường để nhân các …

11 machine-learning  nlp  word2vec  language-model  tfidf 

Cách tốt nhất / chính xác để kết hợp phân tích văn bản với các tính năng khác là gì? Ví dụ: tôi có một bộ dữ liệu với một số văn bản nhưng cũng có các tính năng / danh mục khác. Công cụ vector TF-IDF của SKlearn biến …

8 python  scikit-learn  pandas  tfidf