为银行做一个数据仓库需要多久

为银行做一个数据仓库需要多久,第1张

6个月。光大银行顺利实现数据仓库平台归一化,6个月完成海量数据迁移工程,创造了金融数仓迁移速度的新纪录。数据仓库长期储存在计算机内,有组织、可共享的数据集合,是为决策支持系统提供基础数据的分析型数据库。

数据库设计比Java代码开发慢很多,如果数据库是设计好的,Java只纯开发接口的话,也就是写35个SQL语句多些时间,但是为了保证正确性,代码要重构的漂亮,需要大量的测试,这个比较花时间,用一个星期也不为过。

我这几天写东西,前端写界面花了好几天,前端要做好,漂亮不容易,但是Java使用Spring+ SpringMVCQ+MyBatis,使用RESTful风格写接口,Java代码也就用了大概4小时,但是数据库设计和URL设计花的时间是写代码的2倍左右。

当然Java写代码花的时间少,前提是已经对Java搭建服务器端的开发环境很熟悉和有一套模版了,这个需要很多积累,基本都是直接上手写功能接口代码了,环境搭建对于我来说不花多少时间。

1、会进行需求剖析,然后做工作流规划,比如这个使命是什么时分跑的、依靠于哪些事务。工作流规划完成后进行数据采集和数据同步。

2、数据开发,咱们供给了WEB-IDE,支撑SQL、MR、SHELL和

PYTHON等。然后咱们供给了冒烟测验的场景,测验完成后发布到线上,让它每天守时进行主动调度,并进行数据质量监控。以上步骤都完成后,就能把咱们的数据环流到事务系统库,或者用QuickBI、DataV这些东西进行页面展示。

3、咱们规划的使命是离线的,每天会在12点的时分把规划的使命变成一个实例快照。目前咱们的使命依靠在业内也是最先进的。

现在最常见的需求就是每天有日报,每周要写周报,每月要写月报。为了节省资源,就可以运用日报的数据直接转成周报或月报。


欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/sjk/6633160.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2023-03-26
下一篇 2023-03-26

发表评论

登录后才能评论

评论列表(0条)

保存