为了实现持续的 Spark 可观察性和监控,IBM® Databand 通过 Spark 工作负载采用了无缝 Databricks 整合功能。
IBM Databand 可在更广泛的管道上下文中提供 Spark 可观察性,以便提早检测数据事件并更快地加以解决。
Databand 收集特定 Spark 的元数据,例如任务指标以及跨 Python 和 Scala/Java Spark 应用程序的 Spark 执行日志。这包括在 watsonx.data、EMR、Databricks 和 Dataproc 上部署 Spark 的高级跟踪功能。