Câu hỏi được gắn thẻ «apache-kafka»

Tôi đã được yêu cầu đánh giá RabbitMQ thay vì Kafka nhưng thật khó để tìm ra lý do rằng nó làm điều gì đó tốt hơn Kafka. Có ai biết nếu nó thực sự tốt hơn về thông lượng, độ bền, độ trễ, hoặc dễ sử dụng?

331 rabbitmq  apache-kafka  message-queue 

Mặc dù tôi đã đi qua Kafka trước đây, nhưng gần đây tôi mới nhận ra Kafka có thể được sử dụng như (cơ sở) của một CQRS , cửa hàng sự kiện . Một trong những điểm chính mà Kafka hỗ trợ: Sự kiện chụp / lưu trữ, tất …

219 cqrs  event-sourcing  apache-kafka  dddd 

Có cách nào để thanh lọc chủ đề trong kafka? Tôi đã đẩy một tin nhắn quá lớn vào chủ đề tin nhắn kafka trên máy cục bộ của mình, bây giờ tôi đang gặp lỗi: kafka.common.InvalidMessageSizeException: invalid message size Tăng fetch.sizekhông phải là lý tưởng ở đây, vì tôi …

185 apache-kafka  purge 

Tôi đang bắt đầu học Kafka cho mục đích giải pháp doanh nghiệp. Trong các bài đọc của tôi, một số câu hỏi xuất hiện trong đầu tôi: Khi một nhà sản xuất đang tạo ra một thông điệp - nó sẽ chỉ định chủ đề mà nó muốn gửi …

185 apache-kafka  kafka-consumer-api  kafka-producer-api 

Tôi đang cố gắng sử dụng Kafka. Tất cả các cấu hình được thực hiện đúng nhưng khi tôi cố gắng tạo thông báo từ bảng điều khiển, tôi tiếp tục gặp lỗi sau WARN Error while fetching metadata with correlation id 39 : {4-3-16-topic1=LEADER_NOT_AVAILABLE} (org.apache.kafka.clients.NetworkClient) Phiên bản Kafka: 2.11-0.9.0.0

172 apache-kafka  producer 

Tôi còn khá mới với Kafka. Tôi đã thực hiện một chút thử nghiệm với nó, nhưng một vài điều không rõ ràng đối với tôi về sự bù đắp của người tiêu dùng. Từ những gì tôi đã hiểu cho đến nay, khi một người tiêu dùng bắt đầu, …

169 java  distributed-computing  apache-kafka 

Một trong những điều đầu tiên tôi nghĩ đến khi sử dụng dịch vụ mới (chẳng hạn như kho dữ liệu không phải RDBMS hoặc hàng đợi tin nhắn) là: "Tôi nên cấu trúc dữ liệu của mình như thế nào?". Tôi đã đọc và xem một số tài liệu …

168 apache-kafka 

Trong Kafka, tôi chỉ muốn sử dụng một nhà môi giới duy nhất, một chủ đề duy nhất và một phân vùng duy nhất có một nhà sản xuất và nhiều người tiêu dùng (mỗi người tiêu dùng nhận được bản sao dữ liệu của riêng họ từ nhà môi …

134 partitioning  apache-zookeeper  producer-consumer  apache-kafka  broker 

Tôi gửi tin nhắn chuỗi tới Kafka V. 0.8 bằng Java Producer API. Nếu kích thước thư khoảng 15 MB, tôi nhận được a MessageSizeTooLargeException. Tôi đã cố gắng đặt message.max.bytesthành 40 MB, nhưng tôi vẫn nhận được ngoại lệ. Các tin nhắn nhỏ hoạt động mà không có vấn …

118 java  apache-kafka 

Làm cách nào để tìm phiên bản kafka trong linux? liệu có cách nào để tìm phiên bản kafka đã cài đặt ngoài việc đề cập đến phiên bản trong khi tải xuống không?

107 apache-kafka 

Apache Kafka: Hệ thống nhắn tin phân tán Apache Storm: Xử lý tin nhắn theo thời gian thực Làm thế nào chúng ta có thể sử dụng cả hai công nghệ trong một đường ống dữ liệu thời gian thực để xử lý dữ liệu sự kiện? Về đường ống …

102 apache-storm  apache-kafka  data-integration 

Gần đây tôi đã bắt đầu học Kafka và kết thúc với những câu hỏi này. Sự khác biệt giữa Người tiêu dùng và Luồng là gì? Đối với tôi, nếu bất kỳ công cụ / ứng dụng nào sử dụng thông điệp từ Kafka là người tiêu dùng trong …

100 apache-kafka  kafka-consumer-api  apache-kafka-streams 

Đã đóng cửa . Câu hỏi này cần được tập trung hơn . Nó hiện không chấp nhận câu trả lời. Bạn muốn cải thiện câu hỏi này? Cập nhật câu hỏi để câu hỏi chỉ tập trung vào một vấn đề bằng cách chỉnh sửa bài đăng này . …

97 apache-kafka  message-queue  messaging  key-value  messagebroker 

Tôi cần xóa chủ đề testtrong Apache Kafka 0.8.1.1. Như được trình bày trong tài liệu ở đây , tôi đã thực hiện: bin/kafka-topics.sh --zookeeper localhost:2181 --delete --topic test Tuy nhiên, điều này dẫn đến thông báo sau: Command must include exactly one action: --list, --describe, --create or --alter Làm …

94 apache-kafka 

KeyedMessage<String, byte[]> keyedMessage = new KeyedMessage<String, byte[]>(request.getRequestTopicName(), SerializationUtils.serialize(message)); producer.send(keyedMessage); Hiện tại, tôi đang gửi tin nhắn mà không có bất kỳ khóa nào như một phần của các tin nhắn có khóa, nó vẫn hoạt động với delete.retention.ms? Tôi có cần gửi khóa như một phần của tin nhắn không? …

93 apache-kafka  kafka-consumer-api