Khoa học dữ liệu

Nhiệm vụ 'học máy' của tôi là tách lưu lượng truy cập Internet lành tính khỏi lưu lượng độc hại. Trong kịch bản thế giới thực, hầu hết (nói 90% trở lên) lưu lượng truy cập Internet là lành tính. Vì vậy, tôi cảm thấy rằng tôi nên chọn một …

48 machine-learning  dataset  unbalanced-classes 

Tôi là nghiên cứu sinh tiến sĩ địa vật lý và làm việc với lượng lớn dữ liệu hình ảnh (hàng trăm GB, hàng chục nghìn tệp). Tôi biết svnvà gitkhá rõ và đánh giá cao lịch sử dự án, kết hợp với khả năng dễ dàng làm việc cùng …

46 bigdata  databases  binary  version-control 

Tôi sử dụng RStudio cho lập trình R. Tôi nhớ về các IDE rắn từ các ngăn xếp công nghệ khác, như Visual Studio hoặc Eclipse. Tôi có hai câu hỏi: Những IDE khác ngoài RStudio được sử dụng (vui lòng xem xét việc cung cấp một số mô tả …

46 r  tools  rstudio  programming 

Các thực tiễn phổ biến / tốt nhất để xử lý dữ liệu thời gian cho ứng dụng học máy là gì? Ví dụ: nếu trong tập dữ liệu có một cột có dấu thời gian của sự kiện, chẳng hạn như "2014-05-05", làm thế nào bạn có thể trích …

45 machine-learning  time-series  feature-selection 

Tôi hiện đang làm việc như một nhà khoa học dữ liệu tại một công ty bán lẻ (công việc đầu tiên của tôi là DS, vì vậy câu hỏi này có thể là kết quả của sự thiếu kinh nghiệm của tôi). Họ có một lượng lớn các dự …

44 data-wrangling 

Một LSTM xếp chồng có bao nhiêu tham số? Số lượng tham số áp đặt giới hạn thấp hơn về số lượng ví dụ đào tạo cần thiết và cũng ảnh hưởng đến thời gian đào tạo. Do đó biết số lượng tham số là hữu ích cho các mô …

43 deep-learning  rnn 

Động lực Tôi làm việc với các bộ dữ liệu có chứa thông tin nhận dạng cá nhân (PII) và đôi khi cần chia sẻ một phần của bộ dữ liệu với các bên thứ ba, theo cách không phơi bày PII và khiến chủ nhân của tôi phải chịu …

42 data-cleaning  anonymization 

Tôi nghĩ cả hai, PReLU và Leaky ReLU là đụ( x ) = tối đa ( x , α x ) với α ∈ ( 0 , 1 )f(x)=max(x,αx) with α∈(0,1)f(x) = \max(x, \alpha x) \qquad \text{ with } \alpha \in (0, 1) Keras, tuy nhiên, có cả hai chức …

42 neural-network 

đã đọc một chút về LSTM và việc sử dụng chúng cho chuỗi thời gian và điều đó thật thú vị nhưng khó khăn cùng một lúc. Một điều tôi gặp khó khăn với sự hiểu biết là cách tiếp cận để thêm các tính năng bổ sung vào danh …

42 machine-learning  neural-network  deep-learning  time-series 

Tôi muốn sử dụng một mạng lưới thần kinh để phân loại hình ảnh. Tôi sẽ bắt đầu với CaffeNet được đào tạo trước và đào tạo nó cho ứng dụng của mình. Làm thế nào tôi nên chuẩn bị các hình ảnh đầu vào? Trong trường hợp này, tất …

41 neural-network  image-classification  preprocessing  convnet 

Có vẻ như sự tương đồng cosin của hai tính năng chỉ là sản phẩm chấm của chúng được thu nhỏ bởi sản phẩm có độ lớn. Khi nào độ tương tự cosine tạo ra một thước đo khoảng cách tốt hơn so với sản phẩm chấm? Tức là sự …

41 classification 

Tôi đã nhận được ValueError khi dự đoán dữ liệu thử nghiệm bằng mô hình RandomForest. Ma cua toi: clf = RandomForestClassifier(n_estimators=10, max_depth=6, n_jobs=1, verbose=2) clf.fit(X_fit, y_fit) df_test.fillna(df_test.mean()) X_test = df_test.values y_pred = clf.predict(X_test) Lỗi: ValueError: Input contains NaN, infinity or a value too large for dtype('float32'). Làm cách nào …

41 python  random-forest  pandas 

Tôi thường đọc rằng trong trường hợp các mô hình Deep Learning, thực tế thông thường là áp dụng các đợt nhỏ (thường là một đợt nhỏ, 32/64) trong một số kỷ nguyên đào tạo. Tôi thực sự không thể hiểu được lý do đằng sau này. Trừ khi tôi …

40 machine-learning  deep-learning 

Tôi đã đọc bài đăng trên blog này có tiêu đề: Thế giới tài chính muốn mở hộp đen của AI , nơi tác giả liên tục gọi các mô hình ML là "hộp đen". Một thuật ngữ tương tự đã được sử dụng ở một số nơi khi đề …

40 machine-learning  terminology 

Tôi là một Rlập trình viên ngôn ngữ. Tôi cũng thuộc nhóm những người được coi là Nhà khoa học dữ liệu nhưng đến từ các ngành học thuật khác ngoài CS. Điều này thể hiện rất tốt vai trò của tôi với tư cách là Nhà khoa học dữ …

40 machine-learning  bigdata  statistics  programming  c