stream流处理模式

     

云运维:应用架构即代码 - Gregor

114

自动化是云计算的重要组成部分。随着抽象出更多的基础设施管理,云自动化的角色也转向用应用程序方式管理。用代码方式而不是YAML配置方式管理云自动化将是未来趋势.

Java 中将列表转换为Long[]数组两种方法

221

1、使用List.toArray()方法: .

Unchecked开源工具让你永远告别Java异常检查

497 1 4K

Unchecked将 Java 的检查出异常”破解为“未检查出任何异常Exception”。 当你遭遇Except.

使用物化视图实时查询微服务

402 4K

分布式系统 架构 由于其灵活性.

Java中的流畅接口和构建模式之间的区别

252 2K

流畅接口Fluent Interface 是一种 .

Apache Flink 是实时流处理的行业标准

381

在 Decodable,我们长期以来一直认为 .

Rust 可组合性比较差

415 3K

我爱锈。我希望他们能花更多时间让它真正适用于非 hello-world 用例。 迭代 .

JEP 431:序列化集合

473 3K

序列化集合:有顺序的集合、有序集合。有序集合是其Collection元素具有定义的顺序的集合。 集合中都有一个明确定义的第一个元素、第二个元素等等,直.

CDC变更数据捕获实施模式

574 5K

在本文中,我想讨论实现 CDC 的几种不同方法,以及一些关键应用程序是什么以及 CDC 如何融入现代数据流 .

批处理与事件流区别?

413

随着数据成为现代企业中越来越重要的一部分,组织经常发现自己需要处理大量数据。处理数据的两种常见方法是批处理和事件流。 .

数据管道设计模式

1105 6K
通常,数据是分步处理、提取和转换的。因此,一系列数据处理阶段可以称为数据流水线。 选择哪种 .

Apache Kafka在实时物流、运输行业运用

949 5K

物流、航运和运输需要实时信息来构建高效的应用程序和创新的业务模型,通过数据流支持相关的决策、建议和警报。 这篇博文.

cdc-file-transfer:从Windows同步文件到Linux的传输工具

974

这个存储库包含用于将文件从 Windows 同步和流式传输到 Linux 的工具。它们基于内容定义分块 (CDC),特别是  .

关于如何以及为什么需要函数式编程? - Merrick

776 3K

让我们从一个例子开始:在  .

2023年流Stream预测 - tspann

826

Apache Pulsar、Apache Flink SQL as a Service、Apache Pinot等流Stream架构技术预测: .

Apache Flink与Kafka Streams区别? - Gunnar

1722

Apache Flink与Kafka Stream都能实现流处理,但在一些重要方面有所不同。 下面是从用户的角度出发的,不涉及实现细节: .

Java流比pyspark性能提高了几十倍 - Reddit

876 2K

我试图在一些大 CSV 文件的每一行上运行一些自定义逻辑,大约 10 GB数据。 尝试过 python 数据帧、python 中的多处理、pyspar.

如何将Rust的“struct”转换为数据流?

934

当且仅当原始结构派生Serialize和Deserialize特征时,可以使用 .

在 Data Lakehouse 中统一批处理和流处理

582 3K

最近,我们在 ALTEN 的一位客户表示希望开始从他们的操作系统中提取和集中数据。从分析的角度来看,他们的信息环境处于未开发状态。这为创建集中式分析平台留下.

有状态流处理和流数据库两种数据处理方式比较

1082 3K

长期以来,在有状态流处理器和流数据库之间进行选择一直是一个有争议的问题。 一个流处理应用程序是一个DAG(直接无环图),其中每个节点是.

Java两张常用备忘录图

1321 1
1、Java正则表达式备忘录,一张图网尽正则表达式: .

oskardudycz/EventSourcing.JVM:JVM语言中事件溯源的示例和教程

768

事件溯源是一种 设计模式 ,其.

使用 Postgres、Debezium 和 Kafka 流式传输数据

2707 1

通过流处理,我们可以在数据可用时持续处理数据 我们以事件流的形式从事件源(例如数据库)实时捕获数据,并将数据移动到目标系统(例如数据仓库和数据库)。<.

Apache Wayang :跨平台数据处理系统

850

Wayang 使用户能够在多个数据处理平台上运行数据分析。为此,Wayang 在现有平台之上提供了一个抽象,以便在任何平台集之上运行数据分析任务。因此,用户.

Golang的流式代码 - 0x46

778 3K

Go 1.18 刚刚发布,这意味着 Go 现在正式支持泛型。出于好奇,我决定研究创建一个实现类似于 Java 流的库。我的简单实现的目标是支持使用两个操作处.

在Go中使用泛型实现最小值和最大值函数 - gosamples

1247 2K

从slice中获取最小值和最大值是开发人员在日常编码中编写的一些最简单的函数。 问题是,当你想从int和float64s这个slice中获取最小值或最.

在Golang中使用泛型实现“slice包含”检查函数

1430

检查一个数组是否包含一个给定的值是一个流行的编程函数,在许多编程语言中都是原生实现的。 在Go中,我们必须自己实现它,但由于新的泛型功能,我们可以编写.

在Golang中使用泛型从任何map中获取键的slice

2233 2K

在Go 1.18之前,当你想从Go中的map中提取一个键列表时,你必须编写代码来迭代map并将键添加到一个slice中。 从1.18起,有了新的泛型功.

在Golang中使用泛型实现slice排序 - gosamples

1865

排序是新泛型功能的一个非常自然的用例。 在Go中对slice进行排序是以前每次有新的slice类型时都要重新编写的事情之一。有时你会为两种不同的类型使.