大数据运维工程师需要的技能有:具备一定的服务器知识、有提供方案的能力、需要对数据具有高度的敏感性、需要掌握一些脚本语言。
技能:
大数据运维工程师具备一定的服务器知识。在大数据的传输过程中,离不开服务器的知识。大数据运维工程师掌握服务器知识,才能对服务器进行合理的配置,在服务器出现故障的时候能够自如地应对。
大数据运维工程师需要具有提供方案的能力。大数据运维工程师需要对数据进行分析,然后再根据分析的结果,为公司制定具有可行性的方案,这样才能体现出数据分析的实际价值。
大数据运维工程师需要对数据具有高度的敏感性。高度的敏感性可以帮助大数据运维工程师透过现象发现数据背后隐藏的更有价值的内容。
大数据运维工程师需要掌握一些脚本语言。常见的脚本语言Shell、PHP、COBOL等,大数据运维工程师最少需要熟练掌握其中一种。以上就是大数据运维工程师需要掌握的一些常见技能。
大数据运维工程师的主要职责:
1、承担团队的日常管理,如值班安排、工作分配、日常考评等。
2、组织制订、完善与本部门相关的管理制度、标准 *** 作手册 SOP维护 *** 作MOP和应急预案等。
3、组织制定中心基础设施保养计划,做好相关计划的实现、控制及优化工作。
4、审核、报批、组织实施各类变更申请、事报告工作,做好相关应急工作的指挥与处理。
5、组织开展数据中心基础设施运行维护相关培训、训练与演练。
6、协助商务部与外包服务商洽谈相关维护服务合同,监督服务实施并要求进行审核与考评,确保相关基础设施的稳定运行。
7、负责数据中心基础设施资源统计、容量预警工作,做好每月用水用电统计、PUE统计与分析。
8、配合数据中心进驻客户的场地选址、平面布局、改造实施、进驻管理等支持协调工作。
9、基础设施月报、环境报告的编写和提交。
10、数据中心基础设施的持续优化和改善。
11、负责上级主管领导交办的其它工作。
a 保存验证者ID文件及其口令 验证者标识符文件(certid及所有组织单元的ID文件)是Domino系统中最重要的的文件。特别是certid,所有其它的ID文件都是由它创建的。如果丢失了这个文件或忘记了它的口令,就无法在创建新的服务器和用户了。因此,从系统建立之初就要注意保存验证者ID文件及其口令。一定要将它保存在安全的地方并作备份,不要将它放在共享的网络驱动器上;将口令记录下来,但不要将口令告诉无关的人员。注意不要将口令设为“password”或其它易猜的单词。 b 定期运行Compact、Fixup和Updall任务 Compact、Fixup和Updall任务是服务器自身的维护性任务。Compact用于释放数据库中的无用空间;Fixup检测无效的文档和损坏的数据库,并尝试修复它们;Updall重建视图索引和全文索引。这三个任务至少每周要运行一次。可以按以下步骤设置它们的运行时间。 1) 在Domino管理员客户端中打开要管理的服务器 2) 在“配置”标签下,展开“服务器”-“程序”,点击“添加程序” 3) 在“基本”标签下, “程序名”中输入任务的名称,即Compact、Fixup或Updall “命令行”中输入所需的命令行选项 “运行的服务器”中输入运行此任务的服务器的层次名 4) 在“日程安排”标签下,将日程安排设为“启用”,并按需要设置任务启动的时间 如果到了Compact、Updall和Fixup所安排的运行时间,而系统正在执行其它任务,这三个任务可能不被执行。因此,在设置时间安排时,应当尽量避免和其它任务以及定时代理重合。可以在服务器的控制台上输入命令“show schedule”来查看其它程序的时间安排,输入命令“tell amgr schedule”来查看定时代理的时间安排。 每个任务都有自己的命令行选项。例如,“updall -R”将会重建已有的索引,而不加“-R”选项时则只是更新已有的索引。必需选择适当的选项以完成所需的任务。每个任务的选项列表都可以在《Domino 5 管理员帮助》数据库中找到。 c 创建拒绝访问群组 禁止某些用户访问服务器是十分必要的。当用户离开公司时,需要确保他们不能使用原来的Notes ID文件来访问服务器。管理员可以将这些用户的层次名加入拒绝访问群组来保证这一点。创建拒绝访问群组的步骤如下: 1) 在Domino管理员客户端中打开要管理的服务器 2) 在“个人和群组”标签下,点击“拒绝访问群组”,点击“添加群组”按钮 3) 在“群组名称”中输入一个名字,如DenyGroup;将“群组类型”选为“仅禁止存取列表” 4) 在“成员”中输入或选择要禁止访问的用户名 5) 保存并退出此文档 6) 在“配置”标签下打开要拒绝用户访问的服务器文档 7) 在“安全性”标签下“拒绝访问的服务器”中输入上面创建的拒绝访问群组名称,在此例中是DenyGroup。 提示:创建了拒绝访问群组之后,管理员删除用户时可以将用户名自动地加入此群组中,这样,不需手工 *** 作就可以保证每个被删除的用户不再能访问服务器。 d 了解服务器上的应用 要确定服务器所支持的数据库的类型。服务器是主要用于一两个大型数据库,还是用于多个小的应用数据库?服务器上的应用设计怎样?是否使用了对性能有较大影响的方式,如在视图中使用日期/文档名称 创建人: 创建日期: 信息技术部 DOMINO 服务器日常维护SOP 版本: 67223722doc 4/16/2013 2 of 4 时间查询?如果应用数据库的设计不合理,管理员所能做的调整不可能起太大作用。 管理员还需要留意服务器的日志(Lognsf)。服务器日志中的信息是了解服务器及用户活动的关键。特别是日志中的“其它事件”视图,大部分需要观察的信息都包含在其中。每天都应当浏览lognsf,从中找出错误信息和异常信息,判断服务器是否正常运行。 e 去掉不必要的服务器任务 缺省情况下,Domino服务器会自动启动一组服务器任务,其中有些任务用户可能不会用到。去掉这些不必要的任务可以节省系统资源,有利于其他任务和应用的运行。 服务器上自动启动的任务列表在服务器的notesini文件中。用任一文本编辑器打开Domino程序目录中的notesini文件,找到“ServerTasks=”行,删除其中不需要的任务名称,则下一次启动服务器时,这些任务就不会再启动了。例如,如果不使用Notes的日历和日程安排功能,可以将“calconn”和“sched”任务去掉。 在指定时间运行的服务器任务也可以考虑去掉。在服务器的notesini文件中,找到“ServerTasksAtY=”行,其中Y是代表时间的数字(1代表凌晨1点,5代表凌晨5点,以此类推),删除其中不需要的任务名称。例如,如果不使用共享邮件,则“ServerTasksAt2=, Object Collect mailobjnsf”行中的“Object Collect mailobjnsf”可以去掉。下一次重新启动服务器后,这些被去掉的任务就不会再定时运行了。 关于每个服务器任务的名称和用途,可参阅《Domino 5管理员帮助》中“Domino服务器任务”主题。 f 监视存取控制列表(ACL) 管理员必须保证每个用户对每个数据库都有适合其需要的访问权限。存取控制列表(ACL)是服务器安全性的核心,如果用户能够访问到他不应接触的信息,则会威胁到服务器的安全和信息的安全。 要想方便地查看每个用户对每个数据库的权限,可以打开服务器上的“目录 (R5)”数据库,查看“存取控制列表”-“按级别”视图。“目录 (R5)”数据库的文件名是catalognsf,它是由服务器自动创建并更新的,如果在服务器上未找到catalognsf,可以在服务器控制台上输入命令“load catalog”来立即创建它。 某些关键数据库的ACL必须被严格监控,这包括通讯录(namesnsf)、目录(catalognsf)、服务器日志(lognsf)及所有包含重要信息的数据库。 进一步来说,管理员需要查看哪些用户对数据库具有管理者(Manager)权限。由于管理者可以改变数据库的ACL及其他设置,只应给予需要管理这些设置的用户这一权限。建议最好使用群组来设置管理者权限。例如,可以创建名为DomainManagers的群组,将系统管理员的名字加入其中,然后在数据库的ACL中将DomainManagers设为管理者。这样,即使系统管理员有所变动,也只需修改该群组的定义。 在服务器上安装新数据库时,需要注意其ACL的缺省设置,特别是Default和Anonymous的权限设置。对于重要的数据库,最好不要让Default和Anonymous的权限高于“不能存取者”。当服务器可以从Web上进行访问时, Anonymous或Default的权限高于“不能存取者”时会更为危险。 g *** 作系统和Domino的补钉程序 各种 *** 作系统都会发布一些补钉程序,用于修补所发现的错误和漏洞。管理员应该留意这些补钉程序,并将需要的补钉程序及时安装在服务器上。智慧幼儿园信息管理平台是专门为幼儿园场景打造的无感个性化园区,它主要是基于可穿戴物联网平台,可以实时获取学生运动、睡眠、区角活动、兴趣爱好、社交等个性化数据,为家长及老师提供学生全方位的个性化成长数据。
比如运动信息获取,智能穿戴物联通过手环实时监测记录手环的活动状态,并根据底层的运动数据通过计步算法进行处理得出对应计步数据。数据通过OnLE协议上传至服务器,在云平台可以实时查看1min前的所有运动量记录,当前实时运动量会在下1min上传。
通过公众号绑定手环的微信,通过微信小程序,可以查看运动量状态,以及对之前一段时间内的运动量进行比较。同时,可以对该手环在集体中运动量程度进行分析。在云平台上,可以查看所有时间的运动量数据,在数据分析中,还能够查看该手环在一段时间内的运动情况分析,以及该手环在集体中的运动情况分析。
欢迎分享,转载请注明来源:内存溢出
评论列表(0条)