如何成为一名合格的现代化物联网开发人员

如何成为一名合格的现代化物联网开发人员,第1张

一、什么是大型网站运维

首先明确一下,全文所讲的”运维“是指:大型网站运维,与其它运维的区别还是蛮大的;然后我们再对大型网站与小型网站进行范围定义,此定义主要从运维复杂性角度考虑,如网站规范、知名度、服务器量级、pv量等考虑,其它因素不是重点;因此,我们先定义服务器规模大于1000台,pv每天至少上亿(至少国内排名前10),如sina、、,renrencom等等;其它小型网站可能没有真正意义上的运维工程师,这与网站规范不够和成本因素有关,更多的是集合网络、系统、开发工作于一身的“复合性人才”,就如有些公司把一些合同采购都纳入了运维职责范围,还有如IDC网络规划也纳入运维职责。所以,非常重要一定需要明白:运维对其它关联工种必须非常了解熟悉:网络、系统、系统开发、存储,安全,DB等;我在这里所讲的运维工程师就是指专职运维工程师。

我们再来说说一般产品的“出生”流程:

1、首先公司管理层给出指导思想,PM定位市场需求(或copy成熟应用)进行调研、分析、最终给出详细设计。

2、架构师根据产品设计的需求,如pv大小预估、服务器规模、应用架构等因素完成网络规划,架构设计等(基本上对网络变动不大,除非大项目)

3、开发工程师将设计code实现出来、测试工程师对应用进行测试。

4、好,到运维工程师出马了,首先明确一点不是说前三步就与运维工作无关了,恰恰相反,前三步与运维关系很大:应用的前期架构设计、软/硬件资源评估申请采购、应用设计性能隐患及评估、IDC、服务性能安全调优、服务器系统级优化(与特定应用有关)等都需运维全程参与,并主导整个应用上线项目;运维工程师负责产品服务器上架准备工作,服务器系统安装、网络、IP、通用工具集安装。运维工程师还需要对上线的应用系统架构是否合理、是否具备可扩展性、及安全隐患等因素负责,并负责最后将产品(程序)、网络、系统三者进行拼接并最优化的组合在一起,最终完成产品上线提供用户使用,并周而复使:需求->开发(升级)->测试->上线(性能、安全问题等之前预估外的问题随之慢慢就全出来了)在这里提一点:网站开发模式与传统软件开发完全不一样,网站一天开发上线1~5个升级版本是家常便饭,用户体验为王嘛,如果某个线上问题像M$需要1年解决,用户早跑光了;应用上线后,运维工作才刚开始,具体工作可能包括:升级版本上线工作、服务监控、应用状态统计、日常服务状态巡检、突发故障处理、服务日常变更调整、集群管理、服务性能评估优化、数据库管理优化、随着应用PV增减进行应用架构的伸缩、安全、运维开发工作:

a、尽量将日常机械性手工工作通过工具实现(如服务监控、应用状态统计、服务上线等等),提高效率。

b、解决现实中服务存在的问题,如高可靠性、可扩展性问题等。

c、大规模集群管理工具的开发,如1万台机器如何在1分钟内完成密码修改、或运行指定任务?2000台服务器如何快速安装 *** 作系统?各分布式IDC、存储集群中数PT级的数据如何快速的存储、共享、分析?等一系列挑战都需运维工程师的努力。

在此说明一下其它配合工种情况,在整个项目中,前端应用对于网络/系统工程师来说是黑匣子,同时开发工程师职责只是负责完成应用的功能性开发,并对应用本身性能、安全性等应用本身负责,它不负责或关心网络/系统架构方面事宜,当然软/硬件采购人员等事业部其它同事也不会关心这些问题,各司其职,但项目的核心是运维工程师~!所有其它部门的桥梁。

上面说了很多,我想大家应该对运维有一些概念了,在此打个比方吧,如果我们是一辆高速行驶在高速公路上的汽车,那运维工程师就是司机兼维修工,这个司机不简单,有时需要在高速行驶过程中换轮胎、并根据道路情况换档位、当汽车速度越来越快,汽车本身不能满足高速度时对汽车性能调优或零件升级、高速行进中解决汽车故障及性能问题、时刻关注前方安全问题,并先知先觉的采取规避手段。这就是运维工作~!

最后说一下运维工程师的职责:”确保线上稳定“,看似简单,但实属不容易,运维工程师必须在诸多不利因素中进行权衡:新产品模式对现有架构及技术的冲击、产品高频度的升级带来的线上BUG隐患、运维自动化管理承度不高导致的人为失误、IT行业追求的高效率导致流程执行上的缺失、用户增涨带来的性能及架构上的压力、IT行业宽松的技术管理文化、创新风险、互联网安全性问题等因素,都会是网站稳定的大敌,运维工程师必须把控好这最后一关,需具体高度的责任感、原则性及协调能力,如果能做到各因素的最佳平衡,那就是一名优秀的运维工程师了。

另外在此聊点题外话,我在这里看到有很多人要sina、、,51com等聊自已的运维方面的经验,其实这对于它们有点免为其难:

a、各公司自已网络架构、规模、或多或少还算是公司的核心秘密,要保密,另外,对于大家所熟知的通用软件、架构,由于很多公司会根据自已实际业务需要,同时因为原版性能、安全性、已知bug、功能等原因,进行过二次开发(如apache,php,mysql), *** 作系统内核也会根据不同业务类型进行定制的,如某些应用属于运算型、某些是高IO型、或大存储大内存型。根据这些特点进行内核优化定制,如sina就在memcache上进行过二次开发,搞出了一个MemcacheDB,具体做得如何我们不谈,但开源了,是值得称赞的,国内公司对于开源基本上是索取,没有贡献;另外,服务器也不是大家所熟知的型号,根据业务特点,大部份都是找DELL/HP/ibm进行过定制;另外,在分布式储存方面都有自已解决方案,要不就是使用现成开源hadoop等解决方案,或自已开发。但90%都是借鉴googleGFS的思想:分布式存储、计算、大表。

c、如上面所讲,目前大型网站运维还处于幼年时期理念和经验都比较零散,没有成熟的知识体系,可能具体什么是运维,大家都要先思索一番,或压根没想过,真正讨论也只是运维工作的冰山一角,局限于具体技术细节,或某某著名网站大的框架,真正运维体系化东西没有,这也许是目前网上运维相关资料比较少的原故吧。或者也是国内运维人员比较难招,比较牛的运维工程师比较少见的原因之一吧。

二、运维工作师需要什么样的技能及素质

做为一名运维工程师需要什么样的技能及素质呢,首先说说技能吧,如大家上面所看到,运维是一个集多IT工种技能与一身的岗位,对系统->网络->存储->协议->需求->开发->测试->安全等各环节都需要了解一些,但对于某些环节需熟悉甚至精通,如系统(基本 *** 作系统的熟悉使用,nix,windows)、协议、系统开发(日常很重要的工作是自动运维化相关开发、大规模集群工具开发、管理)、通用应用(如lvs、ha、webserver、db、中间件、存储等)、网络,IDC拓朴架构;

技能方面总结以下几点:

1、开发能力,这点非常重要,因为运维工具都需要自已开发,开发语言:c/c++(必备其中之一)、perl、python、php(其中之一)、shell(awk,sed,expect等),需要有过实际开发经验,否则工作会非常痛苦。

2、通用应用方面需要了解: *** 作系统(目前国内主要是linux、bsd)、webserver相关(nginx,apahe,php,lig>

3、系统、网络、安全,存储,CDN,DB等需要相当了解,知道其相关原理。

个人素质方面:

1、沟通能力、团队协作:运维工作跨部门、跨工种工作很多,需善于沟通、并且团队协作能力要强;这应该是现代企业的基本素质要求了,不多说。

2、工作中需胆大心细:胆大才能创新、不走寻常路,特别对于运维这种新的工种,更需创新才能促进发展;心细,运维工程师是网站admin,最高线上权限者,一不小心就会遗憾终生或打入十八层地狱。

3、主动性、执行力、精力旺盛、抗压能力强:由于IT行业的特性,变化快;往往计划赶不上变化,运维工作就更突出了,比如国内各大公司服务器往往是全国各地,哪里便宜性价比高,就那往搬,进行大规模服务迁移(牵扯的服务器成百上千台),这是一个非常头痛的问题;往往时间非常紧迫,如限1周内完成,这种情况下,运维工程师的主动性及执行力就有很高的要求了:计划、方案、服务无缝迁移、机器搬迁上架、环境准备、安全评估、性能评估、基建、各关联部门扯皮,7X24小紧急事故响应等。

4、其它就是一些基本素质了:头脑要灵光、逻辑思维能力强、为人谦虚稳重、亲和力、乐于助人、有大局观。

5、最后一点,做网站运维需要有探索创新精神,通过创新型思维解决现实中的问题,因为这是一个处于幼年的职业(国外也一样,但比国内起步早点),没有成熟体系或方法论可以借鉴,只能靠大家自已摸索努力。

三、怎样才算是一个合格的运维工程师

1、保证服务达到要求的线上标准,如999%;保证线上稳定,这是运维工程师的基本责职所在。

2、不断的提升应用的可靠性与健壮性、性能优化、安全提升;这方面非常考验主动性、和创新思维。

3、网站各层面监控、统计的覆盖度,软件、硬件、运行状态,能监控的都需要监控统计,避免监控死角、并能实时了解应用的运转情况。

4、通过创新思维解决运维效率问题;目前各公司大部份运维主要工作还是依赖人工 *** 作干预,需要尽可能的解放双手。

5、运维知识的积累与沉淀、文档的完备性,运维是一个经验性非常强的岗位,好的经验与陷阱都需积累下来,避免重复性范错。

6、计划性和执行力;工作有计划,计划后想法设法达到目标,不找借口。

以上只是技术上的一些层面,当然个人意识也是很重要的。

四、运维职业的迷惘、现状与发展前景

运维岗位不像其它岗位,如研发工程师、测试工程师等,有非常明确的职责定位及职业规划,比较有职业认同感与成就感;而运维工作可能给人的感觉是哪方面都了解一些,但又都比上专职工程师更精通、感觉平时被关注度比较低(除非线上出现故障),慢慢的大家就会迷惘,对职业发展产生困惑,为什么会有这种现象呢?除了职业本身特点外,主要还是因为对运维了解不深入、做得不深入导致;其实这个问题其它岗位也会出现,但我发现运维更典型,更容易出现这个问题;

针对这个问题我谈一下网站运维的现状及发展前景(也在思考中,可能不太深入全面,也请大家斧正补充)

运维现状:

2、技术层次比较低;主要处于技术探索、积累阶段,没有型成体系化的理念、技术。

3、体力劳动偏大;这个问题主要与第二点有关系,很多事情还是依靠人力进行,没有完成好的提练,对于大规模集群没有成熟的自动化管理方法,在此说明一下,大规模集群与运维工作是息息相关的如果只是百十来台机器,那就没有运维太大的生存空间了。

4、优秀运维人才的极度缺乏;目前各大公司基本上都靠自已培养,这个现状导致行业内运维人才的流动性非常低,非常多好的技术都局限在各大公司内部,如google50万台机器科学的管理,或者国内互联公司top10的一些运维经验,这些经验是非常有价值的东西并决定了一个公司的核心竞争力;这些问题进而导致业内先进运维技术的流通、贯通、与借签,并最终将限制了运维发展。

5、很多优秀的运维经验都掌握在大公司手中;这不在于公司的技术实力,而在于大公司的技术规模、海量PV、硬件规模足够大,如可怕的流量、51com海量数据~~~~这些因素决定了他们遇到的问题都是其它中/小公司还没有遇到的,或即将遇到。但大公司可能已有很好的解决方案或系统。

发展前景:

1、从行业角度来看,随着中国互联网的高速发展(目前中国网民已跃升为全球第一)、网站规模越来越来大、架构越来越复杂;对专职网站运维工程师、网站架构师的要求会越来越急迫,特别是对有经验的优秀运维人才需求量大,而且是越老越值钱;目前国内基本上都是选择毕业生培养(限于大公司),培养成本高,而且没有经验人才加入会导致公司技术更新缓慢、影响公司的技术发展;当然,毕业生也有好处:白纸一张,可塑性强,比较认同并容易融入企业文化。

2、从个人角度,运维工程师技术含量及要求会越来越高,同时也是对公司应用、架构最了解最熟悉的人、越来越得到重视。

3、网站运维将成为一个融合多学科(网络、系统、开发、安全、应用架构、存储等)的综合性技术岗位,给大家提供一个很好的个人能力与技术广度的发展空间。

4、运维工作的相关经验将会变得非常重要,而且也将成为个人的核心竞争力,具备很好的各层面问题的解决能力及方案提供、全局思考能力等。

5、特长发控和兴趣的培养;由于运维岗位所接触的知识面非常广阔,更容易培养或发挥出个人某些方面的特长或爱好,如内核、网络、开发、数据库等方面,可以做得非常深入精通、成为这方面的专家。

6、如果真要以后不想做运维了,转到其它岗位也比较容易,不会有太大的局限性。当然了,你得真正用心去做。

7、技术发展方向、网站/系统架构师。

物联网的安全威胁远未见顶,物联网应用的最终追求是万物互联,实现信息共享,并通过搭建高度自动化和智能化的系统,为人们的日常生活提供便利。随着物联网在社会生活中的普及,应用场景不断丰富,安全风险也将随之增加。

专家建议,不同的物联网参与方可根据自身特点,有针对性地部署防护措施:物联网设备提供商要保障终端安全,引入安全开发流程提升终端安全性,并在产品上市前进行安全评估;物联网平台提供商应重点关注平台安全和设备、移动端与自身的连接是否安全。因为在平台安全中,物联网终端数据大多包含隐私信息,数据安全变得尤为重要。

“无论是家庭还是企业用户,都应把安全作为一个重要的关注点。选购产品时优先考虑采用有安全网关的产品。”专家说。用户在购买智能产品后,应该尽可能修改初始口令以及弱口令,加固用户名和密码的安全性。同时,修改默认端口为不常用端口,增大端口开放协议被探测的难度,并及时升级设备固件。

物联网平台指AloT产业链中负责连接的网络,承担着将终端设备、边缘、云端连接起来的职责。随着AloT产业发展,物联网设备数量快速增加,设备种类、设备应用场景日益丰富,更灵活的无线网络连接能力将是市场的必然选择。

目前全球有超过 600 多家物联网平台,物联网平台参与主体数量有很多,主要可以区分为通信厂商、互联网厂商、IT 厂商、工业厂商、物联网厂商、新锐企业。每种类型平台功能特点略有不同。
通信厂商主要包括运营商和通信设备供应商。如ctwing物联网市场,联通物联,中移物联,主要特点是汇聚电信能力和互联能力,向合作伙伴提供统一规范的服务。以ctwing为例,将物联网与5G、AI 、边缘计算、区块链、大数据等新技术深度融合,并基于中国电信CTWing50打造的物联网一站式购物平台,成为中国电信物联网产业生态的汇集地,提供丰富的5G、芯片模组、应急消防、安防监控、追踪定位、智慧能源、智慧农业、智慧养老等细分行业的产品服务,为合作伙伴提供产品快速上架通达省市的渠道。
互联网厂商主要包括阿里巴巴、腾讯、百度、京东等企业,这类企业在生态构筑和 AI 技术上有优势。如阿里云提供云管边端等基础产品接入及技术赋能、行业解决方案合作与实施、软硬件销售、营销推广、需求对接等快速商业变现通道。
IT 厂商主要包括浪潮、IBM、中国通服等企业,这类企业在 IT 方面有深刻理解。如用友利用物联网、AI、数字孪生等技术搭建的平台,拥有精智物联平台、精智云盒、精智时序数据库YonTimesDB+流式计算引擎、精智数据魔方、精智工业大脑等产品。
工业厂商则包括富士康、三一集团、施耐德电气、西门子、徐工集团等工业企业为主,平台以工业垂直能力为主。如通用电气是连接机器、数据、人员以及其他资产,使用分布式计算、大数据分析、资产数据管理和 M2M 通信的领先技术,提供广泛的工业微服务,使企业能够提供生产力。
物联网厂商平台主要根植于物联网时代,为物联网而生的平台企业,主要包括创通联达、联想懂的通信、涂鸦智能、小匠物联、萤石云等。如联想采用互联网云平台架构设计,依托物联网、机器视觉识别等技术,接入感知设备采集用户侧数据,建立统一的数据中心和设备管理中心,形成统一的应用服务中台,提升了设备状态感知。
新锐企业大多由 IT、OT、CT 领域经验丰富的专家建立,往往专注在某个领域。如瀚云工业物联网平台面向制造业数字化、网络化、智能化需求,构建基于海量数据采集、汇聚、分析的服务体系,支撑制造资源泛在连接、d性供给、高效配置。

从事物联网方面的工作:
物联网硬件生产、销售,物联网应用软件开发,物联网应用系统集成;
职位:
生产、销售、程序员、工程师
物联网应用技术:
大数据的采集、传输、处理、反馈

物联网(The Internet of Things,简称IOT)的概念是把所有物品通过射频识别等信息传感设备与互联网连接起来,实现智能化识别和管理。

国际电信联盟2005年一份报告曾描绘“物联网”时代的图景:当司机出现 *** 作失误时汽车会自动报警;公文包会提醒主人忘带了什么东西;衣服会“告诉”洗衣机对颜色和水温的要求等等。

物联网把新一代IT技术充分运用在各行各业之中,具体地说,就是把感应器嵌入和装备到电网、铁路、桥梁、隧道、公路、建筑、供水系统、大坝、油气管道,家用电器等各种物体中,然后将“物联网”与现有的互联网整合起来,实现人类社会与物理系统的整合。

具体的说就是在农业、物流、能源、环保、医疗等重要领域都将推进物联网规模化应用。物联网将加速向各领域渗透应用,催生出无人零售、精准医疗、智能制造等大量新模式新业态,生产生活的“痛点”“难点”正在破题,一系列“独角兽”企业有望诞生。

扩展资料:

物联网在农业、工业、服务业、公共事业中均有很好的应用前景:

一、物联网在农业中的应用

1、农业标准化生产监测:是将农业生产中最关键的温度、湿度、二氧化碳含量、土壤温度、土壤含水率等数据信息实时采集,实时撑握农业生产的各种数据。

2、动物标识溯源:实现各环节一体化全程监控、达到动物养殖、防疫、检疫、和监督的有效结合,对动物疫情和动物产品的安全事件进行快速、准确的溯源和处理。

3、水文监测:包括传统近岸污染监控、地面在线检测、卫星遥感和人工测量为一体,为水质监控提供统一的数据采集、数据传输、数据分析、数据发布平台,为湖泊观测和成灾机理的研究提供实验与验证途径。

二、物联网在工业中的应用

1、电梯安防管理系统:该系统通过安装在电梯外围的传感器采集电梯正常运行、冲顶、蹲底、停电、关人等数据,并经无线传输模块将数据传送到物联网的业务平台。

2、输配电设备监控、远程抄表:基于移动通信网络,实现所有供电点及受电点的电力电量信息、电流电压信息、供电质量信息及现场计量装置状态信息实时采集,以及用电负荷远程控制。

3、企业一卡通:基于RFID—SIM卡,大中小型企事业单位的门禁、考勤及消费管理系统;校园一卡通及学生信息管理系统等。

三、物联网在服务产业中的应用

1、个人保健:人身上可以安装不同的传感器,对人的健康参数进行监控,并且实时传送到相关的医疗保健中心,如果有异常,保健中心通过手机提醒体检。

2、智能家居:以计算机技术和网络技术为基础,包括各类消费电子产品、通信产品、信息家电及智能家居等,完成家电控制和家庭安防功能。

3、智能物流:通过GPRS/3G网络提供的数据传输通路,实现物流车载终端与物流公司调度中心的通信,实现远程车辆调度,实现自动化货仓管理。

4、移动电子商务:实现手机支付、移动票务、自动售货等功能。

5、机场防入侵:铺设传感节,覆盖地面、栅栏和低空探测,防止人员的翻越、偷渡、恐 袭击等攻击性入侵。

四、物联网在公共事业中的应用

1、智能交通:通过cPs定位系统,监控系统,可以查看车辆运行状态,关注车辆预计到达时间及车辆的拥挤状态。

2、平安城市:利用监控探头,实现图像敏感性智能分析并与110、l19、l12等交互,从而构建和谐安全的城市生活环境。

3、 城市管理:运用地理编码技术,实现城市部件的分类、分项管理,可实现对城市管理问题的精确定位。

4、环保监测:将传统传感器所采集的各种环境监测信息,通过无线传输设备传输到监控中心,进行实时监控和快速反应。

5、医疗卫生:远程医疗、药品查询、卫生监督、急救及探视视频监控。

参考资料来源:百度百科——物联网

参考资料来源:人民网——我国在物联网前沿领域实现领跑

用通俗的话来讲,物联网就是让所有的东西都“连”起来,关键要有三件东西:感应处理终端,传输通道,控制处理平台。这样就可以让本来没有生命的东西能“感应”并“处理”信息,通过传输的网络传送到指定的地方或人那里,反过来还可以进行控制和指挥。以下面上海移动在建设无线城市中,将技术转化成城市中的生活应用的案例来解释会更加清楚地理解这个概念,由于物联网覆盖更多地要依赖无线技术通目前的通信网络,所以移动物联网将会更加符合未来发展方向:
案例一:你想知道孩子在幼儿园里开心吗?打开手机,点击“宝宝在线”,孩子的一颦一笑尽收眼底。“宝宝在线”在松江、闵行地区4所幼儿园试点后,受到家长热烈欢迎,订制这项服务的家庭超过500户,使用率接近100%。
案例二:在普陀的中环百联,借助中国移动上海公司“智能停车”系统,人们将可以用手机查看附近的停车场有无空位,用手机在中环百联的“虚拟商城”里“逛商店、买东西”。
案例三:将感应器与无线网关或无线座机连接,一旦家里发生煤气泄漏等险情,告警指令会第一时间发送到你手机。移动物联网最新应用“宜居通”,大大提高了城市安保的“智能”水平,目前已在普陀、闵行、松江、嘉定等地试点,未来三年计划覆盖全市。包括“宜居通”在内,中国移动上海公司已经拥有50万物联网终端用户。
不用等到2015年,这样的生活场景已经出现在我们的身边,一个个移动互联的信息化触角,正由点连成线,由线连成面,勾勒出一个智慧城市、一个智慧满溢的生活。而在中国移动上海公司看来,这个智慧城市就是以“无所不在”的网络,打造“无所不有”、“无所不能”的智慧生活。
在“十二五”无线城市蓝图里,中国移动上海公司提出,以无线城市助力上海智慧城市建设,围绕强政、兴业、惠民,使“无线城市”成为“政务管理的好帮手”、“推广行业信息化的好平台”、“民生服务的好工具”。


欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/dianzi/13439401.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2023-08-06
下一篇 2023-08-06

发表评论

登录后才能评论

评论列表(0条)

保存