项目简介:我在实习公司为一个物流公司做BI里关于OLAY部分的工作,使用分析数据的工具是SQL Server。这个公司在此之前已经完成了SSIS的部分,建立了一个数据仓库,现在我需要根据这个数据仓库来完成SSAS,也就是OLAY的部分。
我理解中要实现SSAS需要事先创建好数据仓库,并且在数据仓库中要有事实表和维度表,但实际情况是他们建立的数据仓库中仅仅包含了事实表,而维度表需要我在事实表中先寻找相应的外键,然后再回到他们的关系数据库里寻找可以匹配的“维度”。
补充:他们原本的BI数据仓库与关系数据库是放在一个数据库中,一共900多张表,显得很乱。。
以下是部分的数据仓库表,我选择了其中一个作为例子:
仓库货物出入表(事实表):ID(主键),仓库ID,客户CODE,入库数量,出库数量,剩余数量...(仓库ID,客户CODE用来关联仓库和客户的两个维度,后面三个则是度量值)
仓库表(维度表):仓库ID(主键),仓库名称,仓库地点...
客户表(维度表):客户ID,仓库ID(主键),客户CODE(主键),客户名称,客户所在城市...(这里把仓库ID和客户CODE作为复合主键)
于是我按照微软官方的SSAS教程,一步步进行配置,因为客户表是双主键,所以在数据源视图里,我把两个字段都进行了关联。但是在最后部署的时候发现有错误:
#####错误 12 服务器: 已取消当前 *** 作,因为事务中的另一个 *** 作失败。#####
这个错误我根本查不到在哪里有问题,于是我还做了相应的实验:
我按照微软的格式,在物流公司同一个数据库下,建立了测试的事实表和维度表,通过部署后发现没有问题。——说明软件、数据库均没有问题。
1.同一数据库下,复制三张表格,删除了不必要的列,部署出错。
2.同一数据库下,复制三张表格,删除所有数据,填入一些简单的测试数据,部署成功。——数据之间的问题。
3.同一数据库下,复制三张表格,删除了客户表数据,并填入一些简单的测试数据,部署成功——应该是客户表中的数据问题,4.因为另外两张表都是原表,如果另外两张表有问题就不会部署成功了。
5.同一数据库下,复制三张表格,删除了客户表数据,并添加了一条原本和事实表相关联的数据,部署成功。——猜测:客户表中不能有不关联的数据?
6.同一数据库下,复制三张表格,删除了客户表数据,添加了一条原本和事实表相关联的数据,一条原本和事实表不关联的数据,部署失败。
那么问题来了:如果因为客户表里面有不关联的数据而报错,那么在仓库表中同样有和事实表不关联的数据,为什么仓库表没有问题?而且在6报错的信息与之前的错误信息不同:
#####
错误 7 内部错误: *** 作未能成功,已终止。
错误 10 OLAP 存储引擎中存在错误: 由于处理过程中遇到的错误数达到为 *** 作定义的最大允许错误数,处理 *** 作结束。
错误 11 OLAP 存储引擎中存在错误: 处理“t Dc Inventory Snapshot”分区时出错,该分区属于 BI1 数据库的“AAD”多维数据集的“t Dc Inventory Snapshot”度量值组。
错误 12 服务器: 已取消当前 *** 作,因为事务中的另一个 *** 作失败。
#####
这几天都在搞这个项目,自己又完全不懂,如果我以上有什么概念理解问题,请大神不要鄙视。。
数据库管理员负责各系统数据的灾备工作,研究事务所的数据和信息安全。下面是我整理的数据库管理员工作的基本职责说明。
数据库管理员工作的基本职责说明1
职责
1、负责数据库管理系统的运维管理,完成数据库安装、监控、备份、测试、恢复等基本工作,从而保证数据库管理系统的稳定性、安全性和高性能
2、监视监控数据库的警告日志,定期做备份审查、归档和删除
3、监控数据库的日常会话情况,及时发现异常会话进程并积极采取有效处理措施予以解决,从而避免对业务运营造成影响
4、监控数据库的碎片和剩余表空间情况,及时掌握表空间的扩展速度以及剩余空间分布情况,根据变化动态调整数据库的存储方案以优化资源使用若有需要提前做出存储介质扩容的方案规划和未来存储需求计划
5、关注数据库管理系统SQL Server版本的升级信息和与SQL Server相关的漏洞补丁信息,在测试环境中确认不会对业务运营造成影响的前提下实施生产环境下的SQL Server版本升级和补丁补漏,并对整个升级补漏过程进行监控和日志审查,确认升级补漏真正成功完成
6、制定数据库备份计划,制定灾难恢复计划中的数据恢复相关要求并定期演练,确保灾难出现时能对数据库数据进行有效恢复
7、对数据库的备份策略要根据业务要求和实际情况进行更改,对数据库的日常备份作业执行进行监控和状态确认,对数据库的备份数据进行验证和介质存放管理,与数据库的设计厂商保持联络和维持技术沟通
8、制定数据库用户管理要求,建立数据库底层结果和访问模型,制定数据库性能监控标准和指标对通过数据库管理系统进行的任何针对数据库对象的更改进行统一管理
9、使用SQL语句对数据库进行管理维护和性能优化
10、当发现不同用户需求之间互相抵触进而造成进程死锁时,进行处理的同时协助相关人员协调用户需求,配合应用系统的数据库设计人员对系统资源进行合理分配
11、负责数据库管理系统的管理用户批准和其对应的管理权限设置,采取措施防止数据库被未经授权的访问和破坏
12、协助有关部门配合相关岗位完成U9系统的项目实施和应用升级、治木软件系统的项目实施和应用升级
13、完成信息部经理交代的有关任务,协助公司各部门完成相关的工作
任职要求
1、本科以上学历,计算机相关专业,具备专业的计算机应用知识,年龄不限,性别不限,有SQL Server认证者(MCSA)优先
2、熟悉SQL Server数据库平台下的数据备份/数据恢复,了解数据库性能监控和优化,掌握SQL代码编写,对数据库安全性有一定认识,理解数据库设计,理解索引设计、索引维护和查询引擎, 懂得容量监控与规划
3、思维清晰,具备优秀的沟通理解能力逻辑推算及动手能力强,有独档一面的工作能力,且能承受较大的工作压力
数据库管理员工作的基本职责说明2
职责:
1.负责数据库的安装配置及升级改造,性能监控及优化,故障诊断和排除,数据迁移,数据库备份、复制、镜像等容灾方案的制定和实施,以及数据库的安全管理、帐户权限管理
2.维护线上业务核心数据库的7*24安全、稳定运行
3.负责数据库的架构规划、评估、实施,实现高可用、可扩展架构
4.熟悉MySQL的运行机制和体系架构, 精通/熟悉SQL,熟悉数据库设计与优化
5.对数据库新增内容进行数据分析和挖掘
任职要求:
1.熟悉数据库管理工具,如Navicat等轻量化管理工具
2.熟练使用MySql,Oracle等数据库相关工具
3.参与MYSQL脚本管理、SQL Advisor、数据质量管理等工具与平台的开发与实现
4.至少熟悉java或Python中的一种开发语言
数据库管理员工作的基本职责说明3
职责:
1、负责公司数据库日常运行监控、管理和性能分析,并进行故障处理和优化。
2、快速处理解决数据库系统运行中出现的故障和问题,保证业务数据安全、可用
3、负责Oracle数据库的日常运行维护、备份恢复、升级优化、扩容迁移和安全管理工作
4、为架构/开发团队提供Oracle数据库相关的技术支持服务,包括对象设计、SQL编写规范制定、指导、审核等
5、负责Oracle数据库平台架构和高可用方案的规划设计工作,并通过分析业务发展趋势,做出相应的容量规划
6、负责Oracle数据库的业务数据分析与挖掘、性能分析与系统优化、问题跟踪与管理
7、负责系统软、硬件的部署、监控以及调优,包括 JVM 的调优、中间件调优、底层硬件设备的优化
8、撰写并维护工作相关的数据库设计文档
任职要求:
1、计算机或者相关专业本科毕业,5年以上ORACLE数据库维护和优化经验
2、有大型在线交易系统和企业应用系统(例如:ERP、SRM、WMS等)数据库规划设计和优化经验
3、熟练安装搭建数据库服务器及集群系统、双机热备,包括SQL Server和Oracle
4、精通 Oracle数据库原理和运行机制,具有丰富的管理与调优经验
5、精通RAC、Data Guard、OGG配置管理以及故障排除
6、熟悉linux ,AIX环境下数据库运行维护熟悉VERITAS SF文件系统
7、精通Oracle数据库11g/12c分库,分表,SQL解析,数据路由等。
8、为人正直,工作责任心强,良好的沟通和为人处事的能力、良好的团队合作精神
9、持有OCP证书
10、拥有Ansible、python经验者或拥有OCM等证书者优先考虑。
数据库管理员工作的基本职责说明4
职责:
1、负责公司数据库架构规划、容量规划、系统调优
2、负责数据库日常运维、故障处理,备份恢复、性能调优及补丁升级等
3、规划、设计、评审和优化数据库设计方案
4、配合研发制定数据库技术方案,分库分表策略,数据迁移方案
5、指导开发人员完成数据库建模、数据库索引优化,数据库 *** 作语句优化
任职要求:
1、计算机相关专业本科及以上学历
2、五年以上DBA相关经验
3、精通MySQL数据库的在Linux下的安装布署、开发维护、管理及性能调优
4、熟悉MySQL存储引擎InnoDB、能够进行SQL语句和读写分离的优化分析/设计,并具有高并发下读写分离维护经验。
5、熟悉MySQL事务和锁,能进行锁分析和分析优化
6、熟悉其他至少两种关系型数据库SQL Server/Oracle/Postgresql
7、熟悉ETL概念及过程,有一定的存储过程或ETL相关的开发经验
8、熟悉Linux,熟悉脚本编写,有自动化经验掌握至少一门脚本语言(Shell、Python、Perl)
9、熟悉java开发优先考虑。
10、熟悉NoSql优先考虑。
数据库管理员工作的基本职责说明5
职责:
1、负责系统数据库(Oracle、Mysql为主)的数据库规划、部署、优化、故障排查日常运维及管理工作
2、负责数据库的存储规划管理,协助系统规划设计、防火墙等网络安全设备的安装调试、故障排除、安装、配置、升级与迁移
3、负责公司项目数据备份策略制定、实施等相关信息安全工作
4、负责制定和实施数据库备份恢复策略
5、负责数据库监控,性能检查和优化工作
6、负责诊断、故障检测和解决任何数据库相关的问题,配合其他数据库相关管理和维护工作。
7、配合开发人员及其他项目组开展日常技术支持、故障排查、系统日常维护
任职资格:
1、熟悉数据库结构设计,对系统架构和数据库理论有较好的理解
2、熟悉Oracle或Mysql数据库体系结构和性能优化
3、熟悉SQL优化原理,具备较好的SQL优化能力
4、熟悉一种或者多种主流的UNIX/LINUX系统
欢迎分享,转载请注明来源:内存溢出
评论列表(0条)