项目上线记录
第一次上线-0327
第二次上线-0409
本次上线海豚调度系统
暴漏问题:
1、临时提出的datax需求,数据从hive数据库到GoldenDB,写出的JSON无法执行,耽误1个小时
2、手动编写JSON任务,从GoldenDB到hive数据库无法执行,耽误半个小时
原因及反思:
1、原因:hive数据库不支持多条数据的插入,无法执行
反思:提前多做几套模板JSON,暴露出问题,不至于临时解决
2、原因:手写出的JSON任务,其中格式不低
反思:严格遵守JSON格式来书写,别瞎写
第三次上线-0421
本次优化系统的业务、首页
暴漏问题:
1、首页接口访问超时
原因及反思:
1、原因:测试环境数据量少,生产环境数据量达百万,代码查询没有做分页,首页展示10条就够了,数据库的表没有加主键和联合索引
反思:数据库提前做主键和联合索引,首页的查询做分页,只查10条
