本文介绍通过运维中心可以查看作业概览,监控任务运行状态,管理流式作业和查看审计日志,便于对作业的管理和运维

前提条件

已创建项目,详情请参见新建项目

查看作业概览

  1. 使用阿里云账号登录Databricks数据洞察控制台
  2. 在Databricks数据洞察控制台页面,选择所在的地域(Region)。
    创建的集群将会在对应的地域内,一旦创建后不能修改。
  3. 在左侧导航栏,单击项目空间
  4. 项目空间页面,单击待操作项目所在行的运行记录
  5. 单击上方的概览页签。
    展示当前项目下的作业数量、作业类型分布图和最近24小时作业状态分布情况 。

管理作业运行记录

  1. 使用阿里云账号登录Databricks数据洞察控制台
  2. 在Databricks数据洞察控制台页面,选择所在的地域(Region)。
    创建的集群将会在对应的地域内,一旦创建后不能修改。
  3. 在左侧导航栏,单击项目空间
  4. 项目空间页面,单击待操作项目所在行的运行记录
    下方列表展示当前项目下所有作业的运行情况。还可以通过条件搜索具体的作业。
    • 单击详情,可查看所选作业的详细信息,包括作业实例信息、提交日志、YARN容器列表、审计日志和数据流监控。
    • 单击启动停止,可启动或是停止所选的作业。

管理流式作业

  1. 使用阿里云账号登录Databricks数据洞察控制台
  2. 在Databricks数据洞察控制台页面,选择所在的地域(Region)。
    创建的集群将会在对应的地域内,一旦创建后不能修改。
  3. 在左侧导航栏,单击项目空间
  4. 项目空间页面,单击待操作项目所在行的运行记录
  5. 单击上方的流式作业页签。
    • 单击详情,可查看所选Spark Streaming作业的详细信息,包括作业实例信息、提交日志、YARN容器列表、审计日志和数据流监控。
    • 单击编辑,可编辑所选作业,详情请参见管理作业
    • 单击启动停止,可启动或是停止所选的作业。

查看审计日志

  1. 使用阿里云账号登录Databricks数据洞察控制台
  2. 在Databricks数据洞察控制台页面,选择所在的地域(Region)。
    创建的集群将会在对应的地域内,一旦创建后不能修改。
  3. 在左侧导航栏,单击项目空间
  4. 项目空间页面,单击待操作项目所在行的运行记录
  5. 单击上方的审计日志页签。
    可以查看对当前项目空间执行的操作详情。