-
监控
-
impala资源使用
- 实时资源
- 历史资源使用宽表
-
hive资源使用
- 实时资源
- 历史资源使用宽表
-
SLA监控
- ods核心表监控
- 数仓核心表
- 个人资产
- others已经加入到SLA的待补充
-
关键业务任务跑批
- 关键报表
- 其他关键跑批
- badquery监控
- 报表监控
-
时序调度
- 时序算法研究
- 关键任务优化
-
数仓2.0
- 脚本相似性算法研究
- 数仓表优化
-
知识管理
- 数仓框架(diagram)
- 数仓知识范围收集
-
BA关怀计划
-
双边沟通机制
- 双周会
- 定期业务大数据使用报告
-
impala培训相关
- 题库整理
- 针对性培训(每月一次,11月定于11-22)
- 双周会收集到的各种需求(https://paipaidai-my.sharepoint.cn/:x:/g/personal/chenyongguo_ppdai_com/EeoEScNttGlDvvXvnlgqEOcBxmdhVde_Ol3Hk-VAt-jojw?e=3SF8l8)
-
业务认可的目标
- 1:SLA 100%
- 2:业务的核心关键跑批时效
- 3:benchmark 定时跑批时间(周平均)
- 4:核心报表失败率
- 5 : 非数仓的production跑批中的ods使用数量
- 6:bad query
-
大数据目标
- 1:ad-hoc平均查询耗时
- 2:ETL作业等待耗时
- 3:报表数量
- 4:报表查询平均耗时
- 5:存储量
- 6:数仓99%,报表99%知识整理完毕,并录入知识管理平台