Tôi có nên sử dụng giao thức MQTT?

Tôi đang lên kế hoạch để bắt đầu thực hiện trường hợp sử dụng IoT dưới đây.

Ca sử dụng

Các thiết bị IoT sẽ gửi 100k tin nhắn / phút đến cổng thông qua các bộ lặp và cổng sẽ chuyển các tin nhắn lên đám mây. Tôi muốn theo dõi các nhân viên trong một tổ chức. Các cảm biến sẽ được cố định trên thẻ ID của họ. Cảm biến sẽ gửi dữ liệu liên quan đến vị trí (khoảng 15KB / tin nhắn) đến cổng thông qua các bộ lặp. Đó là cho mục đích phân tích. Sau khi dữ liệu được chuyển lên đám mây, tôi sẽ thực hiện một số phân tích và lưu trữ vào DB và hiển thị trên trang web. Dựa trên dữ liệu phân tích này, tôi sẽ hiển thị vị trí hiện tại của người dùng và cả vị trí di chuyển của người dùng trong một khoảng thời gian nhất định (1 giờ trước hoặc 2 giờ hoặc 1 ngày).

Tôi sẽ thực hiện một số xử lý dữ liệu và gửi nó đến giao diện người dùng / DB.

Tôi đã trải qua những điều cơ bản về IoT và kiến ​​trúc của nó. Sau đó, tôi quyết định sử dụng kiến ​​trúc stack "SMACK" (Spark, Mesos, Akka, Cassandra, Kafka).

Tôi quyết định sử dụng "Kafka client client" trong cổng để xuất bản các tin nhắn lên đám mây.

Tôi có nên sử dụng giao thức MQTT để chuyển tin nhắn đến Kafka không? Hoặc MQTT không cần thiết cho trường hợp sử dụng ở trên?

Nếu có, lợi ích của việc sử dụng MQTT với kiến ​​trúc "SMACK" là gì?

Bạn không phải sử dụng MQTT. Các máy khách Kafka được cài đặt trên thẻ ID nhân viên có thể gửi dữ liệu tới nhà môi giới kafka trên đám mây trực tiếp. Vì vậy, trong khi bạn đang sử dụng Kafka cho cổng, bạn thực sự có thể sử dụng kafka cho chính các cảm biến.

Kafka và MQTT không thể thay thế cho nhau, chúng có các mặt mạnh khác nhau (tiêu thụ năng lượng, tiêu thụ băng thông, thông lượng ...) nhưng tôi nghĩ bạn biết điều đó, giả sử từ sự phức tạp của ngăn xếp của bạn. Kafka có thể xử lý 100k tin nhắn / phút.

Nếu bạn quyết định sử dụng MQTT, đây là một bài đăng trên blog về cách IBM sử dụng MQTT và Kafka trong cùng một dự án. Dự án của họ cũng là về tính di động, vì vậy tôi nghĩ rằng nó thực sự có thể giúp ích.

Quản lý thiết bị IoT với Kafka và MQTT

Hầu như không có vấn đề với hầu hết mọi nhà môi giới MQTT để xử lý tải này, đặc biệt là đối với các tin nhắn qos = 0 (có thể trong trường hợp của bạn). Chúng tôi có tải liên tục cho nhà môi giới của chúng tôi với 100.000 tin nhắn đến (0,5KB) mỗi giây (+ SSL). Vấn đề có thể xuất hiện từ phía giao thông, không phải từ pps.

Về kiến ​​trúc hệ thống của bạn, lời khuyên cá nhân của tôi - hãy cố gắng làm cho nó đơn giản nhất có thể. Và có nghĩa là đơn giản - chỉ một vài thành phần / dịch vụ trung gian. Nếu bạn có thể kết nối trực tiếp hai dịch vụ - hãy làm điều đó. Bạn sẽ luôn có khả năng làm cho nó phức tạp hơn khi bạn sẽ bắt đầu thêm các tính năng.