Khoa học dữ liệu

Hãy xem xét một mạng lưới thần kinh: Đối với một tập hợp dữ liệu nhất định, chúng tôi chia nó thành tập huấn luyện, xác nhận và kiểm tra. Giả sử chúng ta làm điều đó theo tỷ lệ 60:20:20 cổ điển, sau đó chúng ta ngăn chặn quá …

17 machine-learning  neural-network  cross-validation 

Tôi đang cố gắng tính toán dung lượng bộ nhớ cần thiết cho GPU để đào tạo mô hình của mình dựa trên ghi chú này từ Andrej Karphaty: http://cs231n.github.io/convolutional-networks/#computational-considerations Mạng của tôi có 535.752 kích hoạt và 19.072.984 tham số (trọng số và độ lệch). Đây là tất cả …

17 deep-learning  tensorflow 

Giả sử tôi có khung dữ liệu 5 * 3 trong đó cột thứ ba chứa giá trị thiếu 1 2 3 4 5 NaN 7 8 9 3 2 NaN 5 6 NaN Tôi hy vọng tạo ra giá trị cho quy tắc dựa trên giá trị bị thiếu …

17 pandas 

Tôi đang làm việc về nhận dạng giọng nói với Tensorflow và dự định đào tạo LSTM NN với bộ dữ liệu sóng lớn. Vì hiệu suất tăng, tôi dự định sử dụng tfrecords. Có một số ví dụ trên internet (Inception for ex.) Trong đó các tệp tfrecords được …

17 python  tensorflow 

Tôi gặp một số khó khăn trong việc thu hút sự lan truyền trở lại với ReLU và tôi đã thực hiện một số công việc, nhưng tôi không chắc liệu mình có đi đúng hướng hay không. Hàm chi phí: trong đó là giá trị thực và là giá …

17 neural-network  backpropagation 

Tôi có các tính năng thưa thớt mang tính dự đoán, tôi cũng có một số tính năng dày đặc cũng mang tính dự đoán. Tôi cần kết hợp các tính năng này với nhau để cải thiện hiệu suất tổng thể của trình phân loại. Bây giờ, điều là …

17 machine-learning  classification  predictive-modeling  scikit-learn  supervised-learning 

Tôi có 3 lớp với bản phân phối này: Class 0: 0.1169 Class 1: 0.7668 Class 2: 0.1163 Và tôi đang sử dụng xgboostđể phân loại. Tôi biết rằng có một tham số được gọi là scale_pos_weight. Nhưng làm thế nào nó được xử lý cho trường hợp 'đa kính' …

17 classification  xgboost  multiclass-classification  unbalanced-classes 

Tôi đang làm một dự án về vấn đề nhận dạng tác giả. Tôi đã áp dụng chuẩn hóa tf-idf để đào tạo dữ liệu và sau đó đào tạo một Svm về dữ liệu đó. Bây giờ khi sử dụng trình phân loại tôi cũng nên bình thường hóa …

17 machine-learning  neural-network  deep-learning 

Sự khác biệt giữa val_lossvà losstrong quá trình đào tạo ở Keras là gì? Ví dụ Epoch 1/20 1000/1000 [==============================] - 1s - loss: 0.1760, val_loss: 0.2032 Trên một số trang web tôi đọc rằng khi xác thực, bỏ học không hoạt động.

17 machine-learning  deep-learning  keras 

Tôi đã cố gắng làm cho các gói này hoạt động được một thời gian nhưng không thành công. Về cơ bản lỗi là: GraphViz's Executables not found EDIT : Tôi đã không đăng một thiết bị đầu cuối logvới lỗi ban đầu. Tôi đang sử dụng Ubuntuvì vậy tôi …

17 python 

Tôi đang xây dựng một quy trình công việc để tạo các mô hình học máy (trong trường hợp của tôi, sử dụng các gói pandasvà sklearngói của Python ) từ dữ liệu được lấy từ một cơ sở dữ liệu rất lớn (ở đây, Vertica bằng SQL và pyodbc), …

16 machine-learning  python  pandas  scikit-learn 

Tôi biết rằng máy ảnh phục vụ như một giao diện cấp cao cho TensorFlow. Nhưng đối với tôi, máy ảnh có thể tự thực hiện nhiều chức năng (nhập dữ liệu, tạo mô hình, đào tạo, đánh giá). Hơn nữa, một số chức năng của TensorFlow có thể được …

16 keras  tensorflow 

Tôi đã trải qua một bài viết trên blog kaggle. Lặp đi lặp lại, tác giả đề cập đến 'Điểm LB' và 'Độ phù hợp LB') là một thước đo cho hiệu quả của học máy (cùng với điểm xác nhận chéo (CV)). Với một nghiên cứu về ý nghĩa …

16 machine-learning  accuracy 

Tôi đang bắt đầu học Machine learning từ trang web Tensorflow. Tôi đã phát triển một sự hiểu biết rất thô sơ về dòng chảy mà một chương trình học sâu theo sau (phương pháp này khiến tôi học nhanh thay vì đọc sách và các bài báo lớn). Có …

16 machine-learning  deep-learning  tensorflow 

Trong NLP, có khái niệm Gazetteercó thể khá hữu ích để tạo chú thích. Trong khả năng hiểu biết của tôi: Một công báo bao gồm một tập hợp các danh sách chứa tên của các thực thể như thành phố, tổ chức, các ngày trong tuần, v.v. Những danh …

16 nlp  named-entity-recognition