书签栏
一、官方网址
- 官网：https://nifi.apache.org
- 工具名称：Apache NiFi
二、核心功能
- 可视化流设计：在 Web 界面上拖拽处理器构建数据流，实时查看每条链路的状态。
- 数据血缘追踪：自动记录每个数据文件的完整流转历史，支持回溯与审计。
- 背压与优先级：内置背压控制、数据缓冲与优先级队列，保障流处理稳定可靠。
- 丰富处理器库：数百个处理器覆盖文件、数据库、消息队列、HTTP 等协议与系统。
- 集群与高可用：支持水平扩展的集群部署及边缘端 MiNiFi 采集代理。
三、适用场景
- 物联网与日志数据的实时采集清洗
- 跨机房、跨云的数据可靠传输
- 数据入湖前的格式转换与路由分发
四、使用优势
- 实时性强，边传边处理
- 数据血缘完整，合规审计友好
- 界面直观，运维可视化程度高
五、注意事项
- 以流式处理为主，复杂批量转换需配合其他引擎
- 集群规模扩大后需关注内存与磁盘配置