Udemy在Apache Kafka上引入热重试和冷重试

22-07-21 302 banq

Udemy Payments Team中关于如何使用 Apache Kafka  的非阻塞重试来构建容错事件传递系统的概述 Udemy 平台上有超过 4600 万学生和 64400 万课程注册,... 详细

Apache Kafka重试和维护重试事件的顺序

22-07-21 268 banq

重试非常重要,尤其是在 微服务 系统中,这些服务必须经常协作才能处理请求。如果一个服务只中断了几秒钟会发生什么?其他服务应该在放弃之前向客户抛出错误或重试多次。 举个简单的例子:通过http链式... 详细

最好的工程师像投资者一样思考,而不是打工人 - Lin

22-07-21 245 banq

方法比技术细节更重要 大学期间我住在图书馆。 “我学习的教科书理论越多,我就会成为一名更好的工程师,”我想。 然而,当我开始工作时,我注意到业内最优秀的工程师不一定比应届毕业生了解更多的理论。 他... 详细

Cloudflare使用Apache Kafka处理1万亿条消息

22-07-21 246 banq

Cloudflare 自 2014 年以来一直在生产中使用 Kafka。从那时起,我们已经取得了长足的进步,目前跨多个数据中心运行 14 个不同的 Kafka 集群,大约有 330 个节点。在他们之... 详细

Dewdrop:开源事件源框架

22-07-21 225 banq

Dewdrop 是一个自以为是的、简单而强大的框架,用于在 Java 中实现 事件溯源 。Dewdrop 的想法是通过将所有复杂的事件读取、写入和编组深入到框架中,使您的团队能够专注于根据 Ag... 详细

幽默:程序员的两次泪奔时刻

22-07-17 473 1 banq

程序员职业生涯两次落泪时刻: 1、大学毕业后 2、多年后成为专家 我是 . 详细

比较企业应用开发中使用手工编程与特定领域建模的工作量

22-07-19 250 1 banq

我们与 Juha-Pekka Tolvanen 一起报告了一项研究,该研究分析了由公司内部创建的特定领域建模解决方案的生产力影响,该解决方案用于开发基于 Web 的企业应用程序。与传统编程的比较表明... 详细

分布式系统的仲裁模式

22-07-19 236 banq

任何 分布式系统 的常量之一是失败。我们构建的系统能够抵御故障。假设我们想要复制到集群中的不同节点以实现高可用性和容错。我们需要问的下一个问题是—— 我们集群中有多少节点需要确认他们从原始服... 详细

Rocketgraph:用Golang编写的Firebase的开源替代品

22-07-19 328 1 banq

Rocketgraph 是一个完整的后端。在几分钟内使用 Postgres 数据库、身份验证、GraphQL API、实时订阅开始您的项目。 Rocketgraph 提供以下功能: 身份验证:... 详细

DataBathing:将查询传输到 Spark 代码的框架

22-07-19 218 banq

DataBathing可以将 SQL 解析为 JSON,以便我们可以将其转换为其他数据存储! 沃尔玛团队已经成功地从 Hive SQL 驱动转变为数据工程的代码驱动。我们每天都在使用 Spark(... 详细

Jellysmack如何将数据科学作业编排推向生产就绪水平?

22-07-19 216 banq

自从数据科学进入 IT 游戏并开始构建大量模型和项目以来,对工作编排的需求已经上升。由于 Jellysmack 的业务主要集中在帮助视频创作者在观众和质量方面增长,我们的许多团队都依赖从 YouTu... 详细

保险公司如何实施Tableau治理策略?- Lily

22-07-19 215 banq

Policygenius 是美国领先的在线保险市场。我们的使命是帮助人们在一个地方轻松了解他们的选择、比较报价和购买保单,从而帮助他们获得正确的保险。 背景 在过去四年中,随着业务的... 详细

Qovery/Replibyte:将真实生产数据放入你的开发数据库

22-07-19 213 banq

Replibyte 是一种速度极快的工具,可以在您的数据库中植入生产数据,同时保证敏感数据的安全。 特点: 支持 PostgreSQL、MySQL 和 MongoDB 的数据转储和恢复 用... 详细

danthelion/trino-minio-iceberg-example:使用Minio、Trino、iceberg搭建数据工程演示案例

22-07-19 270 banq

这个项目演示了使用Minio、Trino(具有众多连接器)等工具通过 Docker 在我们的机器上部署 MVP 版本来运行一些分析查询. 数据湖 “Data Lakehouse”一词是由 D... 详细

形象生动可视化Kafka工作情景的工具

22-07-19 193 banq

Apache Kafka 是一个分布式事件流平台。使用softwaremill这个工具(点击标题),您可以模拟数据如何通过复制的 Kafka 主题流动,从而更好地了解消息处理模型。. 详细