Datorios发布Apache Flink®的Lineage分析器

Datorios是一家领先的实时业务运营数据可观察性和数据质量技术开发商,推出了适用于Apache Flink®的Datorios Lineage分析器。图片{ width=60% }


在位于德克萨斯州奥斯汀市举行的Current 2024会议上宣布,Lineage分析器为流数据基础设施运营商提供了更深入、更完整的洞察力,用于驱动实时业务运营和实时人工智能的数据处理管道性能。

数据血统指的是信息从其起点经过各种管道而移动时的生命周期和路径。随着企业对基于数据驱动的实时自动化和人工智能的依赖增加,并使用Apache Flink创建这些系统,Lineage分析器为Apache Flink提供的洞察力对确保准确性和可用性至关重要。它加速了Apache Flink开发人员和运营商的开发、故障排除和优化。

数据血统还在确保数据处理符合政府标准的许多行业中发挥着至关重要的作用。通过保持如何在Flink作业内部传输和转换数据的清晰记录,企业可以向审计员和监管机构提供必要的透明度。这对于证明实时数据处理工作流程的完整性和准确性至关重要。

Lineage分析器提供了一套全面的功能,旨在帮助开发人员跟踪他们的管道中的数据,监控转换,并确定数据更改发生的位置。与其他数据血统工具不同,其他数据血统工具仅显示对数据进行操作的进程列表,Lineage分析器提供了对进程内步骤的洞察力,这使得数据更改的原因变得清晰。这使组织能够进行更彻底的审计和轻松故障排除。

Lineage Analyzer的主要功能包括:

  • 数据血统可视化 - 查看交互式作业图,这是提供实时处理管道构成概览的有向无环图(DAGs)。
  • 数据流细节 - 深入研究作业图,探索数据流操作符的详细视图。
  • 数据跟踪 - 浏览随着操作符流动的实际数据记录,并实时观察数据转换。
  • 低性能开销 - 与其他血统工具不同,Linear Analyzer在Flink作业外部运行,为您提供所需的可见性,而不会影响您的实时系统性能。

“今天的业务创新者正在超越使用AI聊天机器人回答问题;他们正在创建使用AI采取行动的自主代理。”Datorios的首席执行官兼联合创始人Ronen Korman说。“在这些系统的成功上承载着如此重大的任务,企业无法承受停机时间或错误;Lineage分析器帮助他们避免这些问题,并充满信心前行。”

要了解更多信息,请访问Datorios的博客,或加入该公司的Slack频道。



感谢阅读!如果您对AI的更多资讯感兴趣,可以查看更多AI文章:GPTNB

Datorios发布Apache Flink®的Lineage分析器

https://www.gptnb.com/2024/09/21/2024-09-20-auto3-S9IycL/

作者

ByteAILab

发布于

2024-09-21

更新于

2025-03-21

许可协议