1.Nifi概念和入门2024 年 七月 14 号 发布在 技术, 大数据Apache NiFi 是一个易于使用,功能强大且可靠的系统,用于处理和分发数据。可以自动化管理系统间的数据流。它使用高度可配置的指示图来管理数据路由、转换和系统中介逻辑,支持从多种数据源动态拉取数据。NiFi 原来是 NSA 的一个项目,目前已经代码开源,是 Apache 基金会的顶级项目之一。阅读全文
Flink流批一体方案2024 年 四月 4 号 发布在 技术, 大数据实现批处理的技术许许多多,从各种关系型数据库的 sql 处理,到大数据领域的 MapReduce,Hive,Spark 等等。离线数仓阅读全文
实时计算平台业务指标试算2024 年 三月 14 号 发布在 生活极溯准备开展指标试算业务,通过配置多个指标,通过 flink 去读取 clickhouse 大量历史事件,根据主维度计算指标,给每一条事件追加指标结果值,再将结果写回 clickhouse。阅读全文