Dojo
话题
新佳
订阅
极道
元认知
元逻辑
元设计
元编程
元语言
Kafka消息系统教程
Redis、Kafka 与 RabbitMQ 对比
当为微服务使用异步通信时,通常使用消息代理。代理确保不同微服务之间的通信可靠和稳定,消息在系统内得到管理和监控,并且消息不会丢失。您可以选择一些消息代理,它们的规模和数据功能各不相同。 这篇博文将比较三种最流行的代理:RabbitMQ、Kafka
Apache Flink与Kafka Streams区别? - Gunnar
Apache Flink与Kafka Stream都能实现流处理,但在一些重要方面有所不同。下面是从用户的角度出发的,不涉及实现细节: 支持的流平台不同 作为的Apache Kafka项目的
如何探测不健康 Kafka 消费者并将其自动重启?
在 Cloudflare,我们采取措施确保我们在基础设施的各个层面都能抵御故障。这包括 Kafka,我们将其用于关键工作流程,例如发送对时间敏感的电子邮件和警报。 我们学到了很多关于保持利用 Kafka 的应用程序健康的知识,因此它们可以始终运行。
将数据库更改复制到消息队列很棘手 (evanjones.ca)
假设我们有一个将其状态存储在数据库中的程序,我们希望其他程序在发生变化时做一些事情。例如,我们可能想在银行余额下降到某个阈值以下时发送电子邮件通知。这是应用程序使用Kafka等消息队列的一个非常常见的原因。不幸的是,当组件发生故障时,这种实现并不工作。我怀疑有很多真实的应用会
Kafka 如何实现低延迟? - foojay
大多数 Apache Kafka 基准测试似乎测试的是高吞吐量而不是低延迟。Kafka 传统上用于高吞吐量而不是对延迟敏感的消息传递,但它确实具有低延迟配置:(主要是设置 linger.ms=0 并减少缓冲区大小)。在这个配置中,您可
Apache Kafka在实时物流、运输行业运用
物流、航运和运输需要实时信息来构建高效的应用程序和创新的业务模型,通过数据流支持相关的决策、建议和警报。 这篇博文探讨了 Kafka在USPS、瑞士邮政、奥地利邮政、DHL 和 Hermes 等公司的几个真实案例研究,用例包括云原生中间件现代化、跟
使用Flink实现Exactly-Once分布式事务 - Devora
分布式有状态流处理具有挑战性,尤其是在处理故障和恢复方面。在流处理中,最常被问到的问题之一是“我的流处理系统是否保证每条记录都被处理一次且仅一次,即使在处理过程中遇到一些故障?” 通过“ exactly-once(精确一次)”语义,我的意思是每个传
一切都使用 Postgres
如何降低复杂性并加快行动速度? 使用 Postgres 作为消息队列跳过锁定
Bitcask - 日志结构的快速 KV 存储
Bitcask 是最高效的嵌入式键值 (KV) 数据库之一,旨在处理生产级流量。向世界介绍 Bitcask 的论文称它是一个用于快速键/值数据的
Apache Kafka能用于工作流编排引擎吗?
BPMN或类似的流程图很适合于业务流程的建模。业务和技术团队很容易理解可视化的内容。它记录了业务流程,便于以后的修改和重构。各种工作流引擎解决了自动化问题:BPMS,RPA工具,ETL和iPaaS数据集成平台,或数据流。 这篇博文探讨了几个案例,其
使用Kafka 和 Spring Boot 实现并发编程
本文将教您如何使用 Spring Boot 和 Spring for Kafka 为 Kafka 消费者配置并发。Spring for Kafka 的并发与Kafka 分区和消费者组密切相关。消费者组中的每个消费者都可以从多个分区接收消息。组内的消费者使用单个线程,而消费者组使用多个线程来消
Kafka的关键配置min.insync.replicas
Kafka的关键配置min.insync.replicas :用户消息生产的客户端配置,表示消息生产者认为写入成功之前确认收到记录的代理数量。 - acks==0 — 发送请求时认为写入成功 - 无需等待响应。 - acks==1 — 当领导者收到记录并
ActiveMQ 与 Kafka 的比较 | redhat
将 ActiveMQ 与 Kafka 进行比较类似于将关系数据库与 NoSQL 进行比较。 ActiveMQ 不像 Kafka 那样适合云。但这并不意味着 ActiveMQ 不再有任何用例。仍然有大量业务用例需要保证信息的交付。
为什么 Apache Kafka 不需要 Fsync 来保证安全?
Apache Kafka 不需要 fsyncs 来确保安全,因为它在其复制协议中包含恢复。它是一个真实世界的分布式系统,使用异步日志写入 + 恢复,并内置一些额外的额外安全性。异步日志写入使其能够在各种硬件和各种工作负载上提供强大的性能。
在没有 zookeeper 的情况下运行 Kafka
Kafka在其 Kafka Raft Metadata 模式中使用 Raft 共识算法进行领导者选举,从而消除了对 ZooKeeper 管理集群元数据的依赖。Raft算法是一种共识协议,旨在确保分布式系统中状态机的容错复制。 在 Kafka 对 R
盛宝银行基于数据网格的分布式领域驱动架构最佳实践
这篇博客文章概述了如何 盛宝银行 通过采用一种
《KIP-932:Queues for Kafka》于7天前发布。
Kafka的队列Queues 是目前讨论的最热门的新功能! 传统的队列系统是这样一种系统: - 多个消费者从同一队列读取(pub-sub) - 一个特定的消费者从一个特定的生产者读取(点对点) 消息通常被存储,直到它们被消
使用 Knative、Quarkus 和 Kafka 在 OpenShift 上实现无服务器
在 OpenShift 上构建和运行 Quarkus 无服务器应用程序,并通过 Knative Eventing 集成它们。我们将使用 Kafka 在应用程序之间交换消息。Knative 支持各种事件源。Kafka 只是可用选项之一。 源码 Git
上页
下页
关闭