必须是高效的分布式系统。物联网产生的数据量巨大,仅中国而言,就有5亿多台智能电表,每台电表每隔15分钟采集一次数据,一天全国智能电表就会产生500多亿条记录。这么大的数据量,任何一台服务器都无能力处理,因此处理系统必须是分布式的,水平扩展的。为降低成本,一个节点的处理性能必须是高效的,需要支持数据的快速写入和快速查询。
2实时处理
必须是实时处理的系统。互联网大数据处理,大家所熟悉的场景是用户画像、推荐系统、舆情分析等等,这些场景并不需要什么实时性,批处理即可。但是对于物联网场景,需要基于采集的数据做实时预警、决策,延时要控制在秒级以内。如果计算没有实时性,物联网的商业价值就大打折扣。
3高可靠性
需要运营商级别的高可靠服务。物联网系统对接的往往是生产、经营系统,如果数据处理系统宕机,直接导致停产,产生经济有损失、导致对终端消费者的服务无法正常提供。比如智能电表,如果系统出问题,直接导致的是千家万户无法正常用电。因此物联网大数据系统必须是高可靠的,必须支持数据实时备份,必须支持异地容灾,必须支持软件、硬件在线升级,必须支持在线IDC机房迁移,否则服务一定有被中断的可能。
4高效缓存
需要高效的缓存功能。绝大部分场景,都需要能快速获取设备当前状态或其他信息,用以报警、大屏展示或其他。系统需要提供一高效机制,让用户可以获取全部、或符合过滤条件的部分设备的最新状态。
5实时流式计算
需要实时流式计算。各种实时预警或预测已经不是简单的基于某一个阈值进行,而是需要通过将一个或多个设备产生的数据流进行实时聚合计算,不只是基于一个时间点、而是基于一个时间窗口进行计算。不仅如此,计算的需求也相当复杂,因场景而异,应容许用户自定义函数进行计算。
6数据订阅
需要支持数据订阅。与通用大数据平台比较一致,同一组数据往往有很多应用都需要,因此系统应该提供订阅功能,只要有新的数据更新,就应该实时提醒应用。而且这个订阅也应该是个性化的,容许应用设置过滤条件,比如只订阅某个物理量五分钟的平均值。
7和历史数据处理合二为一
实时数据和历史数据的处理要合二为一。实时数据在缓存里,历史数据在持久化存储介质里,而且可能依据时长,保留在不同存储介质里。系统应该隐藏背后的存储,给用户和应用呈现的是同一个接口和界面。无论是访问新采集的数据还是十年前的老数据,除输入的时间参数不同之外,其余应该是一样的。
8数据持续稳定写入
需要保证数据能持续稳定写入。对于物联网系统,数据流量往往是平稳的,因此数据写入所需要的资源往往是可以估算的。但是变化的是查询、分析,特别是即席查询,有可能耗费很大的系统资源,不可控。因此系统必须保证分配足够的资源以确保数据能够写入系统而不被丢失。准确的说,系统必须是一个写优先系统。
9数据多维度分析
需要对数据支持灵活的多维度分析。对于联网设备产生的数据,需要进行各种维度的统计分析,比如从设备所处的地域进行分析,从设备的型号、供应商进行分析,从设备所使用的人员进行分析等等。而且这些维度的分析是无法事先想好的,而是在实际运营过程中,根据业务发展的需求定下来的。因此物联网大数据系统需要一个灵活的机制增加某个维度的分析。
10支持数据计算
需要支持数据降频、插值、特殊函数计算等 *** 作。原始数据的采集可能频次挺高,但具体分析时,往往不需要对原始收据进行,而是数据降频之后。系统需要提供高效的数据降频 *** 作。设备是很难同步的,不同设备采集数据的时间点是很难对齐的,因此分析一个特定时间点的值,往往需要插值才能解决,系统需要提供线性插值、设置固定值等多种插值策略才行。工业互联网里,除通用的统计 *** 作之外,往往还需要支持一些特殊函数,比如时间加权平均。
11即席分析和查询
需要支持即席分析和查询。为提高大数据分析师的工作效率,系统应该提供一命令行工具或容许用户通过其他工具,执行SQL查询,而不是非要通过编程接口。查询分析的结果可以很方便的导出,再制作成各种图标。
12灵活数据管理策略
需要提供灵活的数据管理策略。一个大的系统,采集的数据种类繁多,而且除采集的原始数据外,还有大量的衍生数据。这些数据各自有不同的特点,有的采集频次高,有的要求保留时间长,有的需要多个副本以保证更高的安全性,有的需要能快速访问。因此物联网大数据平台必须提供多种策略,让用户可以根据特点进行选择和配置,而且各种策略并存。
13开放的系统
必须是开放的。系统需要支持业界流行的标准SQL,提供各种语言开发接口,包括C/C++,Java,Go,Python,RESTful等等,也需要支持Spark,R,Matlab等等,方便集成各种机器学习、人工智能算法或其他应用,让大数据处理平台能够不断扩展,而不是成为一个孤岛。
14支持异构环境
系统必须支持异构环境。大数据平台的搭建是一个长期的工作,每个批次采购的服务器和存储设备都会不一样,系统必须支持各种档次、各种不同配置的服务器和存储设备并存。
15支持边云协同
需要支持边云协同。要有一套灵活的机制将边缘计算节点的数据上传到云端,根据具体需要,可以将原始数据,或加工计算后的数据,或仅仅符合过滤条件的数据同步到云端,而且随时可以取消,更改策略。有两种方法。
打开设备管理器→网络适配器→右键打开网卡属性→电源管理里面的勾去掉→高级里面中断裁决
关闭能上的话,右键状态栏的无线图标,选择“打开网络和共享中心”,点击显示着连接的SSID的无线网络,
选择“详细信息”,看IPV4网关即可。
物联网中心是中国科学院在物联网领域的总体牵头组织单位和技术研发平台,致力于建成国家级“感知中国”创新基地、中国物联网产业培育中心、集成创新中心和行业应用示范中心。3gNET和3gWAP是我公司3G网络的两个不同APN(Access Point Name接入点名称),无论通过3gNET或是3gWAP都可以登陆互联网(>二维数据可视化支持在使用外部数据源创建场景,通过地图的方式展示您数据属性的状态,方便您查看并管理数据。
前提条件
已根据外部数据源内容,创建完成数据库。
创建二维数据可视化场景
登录物联网平台控制台,单击数据分析 > 实验室。
在实验室功能模板中,定位到空间数据可视化,并单击查看详情。
在空间数据可视化页面二维数据可视化页签下,单击“+”图标创建场景。
在d出对话框中,选择外部平台,单击下一步。
根据参数说明设置场景参数,并单击确定。

表 1 参数说明
参数 说明
场景名称 设置您的场景项目名称,支持中文字和英文字符,不超过12个字符。
数据源信息 您在物联网平台数据分析 > 数据源中创建的外部数据库,详情请参见外部数据源。
数据表信息 选择您数据库下的表。
选择经纬度 根据您的实际需求,从数据表下的字段中选择当经度和纬度的字段。
坐标系 当前支持两种坐标系。
02国测局:中国国测局地理坐标系(GCJ-02)。
84原始:世界标准地理坐标(WGS-84)。
系统进入新建的二维数据可视化场景中,可查看数据分布。

(可选)如果当前地图样式不符合需求,也可以在地图右下角单击“”图标切换地图样式。
配置d框和图标
将地图放大(zoom级别大于16时),显示详细的数据点。
zoom级别小于16时,聚合显示该区域的数据点,需通过滚动鼠标或单击聚合显示的数据点,放大地图。
单击数据点图标,查看数据点信息d框。您可以自定义显示内容和图标。
说明 如果该地理位置同时有多个数据点,单击数据点图标看到数据点列表,单击查看,进入具体数据点d窗。
单击具体数据点气泡图标,由d框方式显示数据点的详细信息。您可以自定义显示内容和图标。

单击d窗配置,在d出对话框中勾选需要展示的数据点属性。
说明 目前仅支持展示布尔、枚举、数值、文本类型的属性,即该数据点其他类型的属性是不可选的状态。

单击确定使d框配置实时生效。
单击图标配置,在d出对话框中自定义数据点气泡图标的形状和数值。
说明 图标配置设置完成后,将应用于此数据表的所有数据点。

表 2 参数说明
参数 说明
图标形状 选择要展示的图标的形状。
图标数值 有如下两种设置方式。
不显示:属性点气泡图标下不显示数值。
某个数值类型的数据点属性:选中后,数据点气泡图标下会显示该属性的数值。
单击确定使图标配置实时生效。
场景发布后,数据点气泡图标直接以配置好的样式显示,点击数据点气泡图标可d出已配置好的对话框。
查看场景效果
根据您创建场景时设置的经纬度,地图中的数据点会有两种显示情况。
如果该地理位置仅有一个数据点,显示单个数据点d框。
您可以单击数据点气泡图标,在d框中查看已配置好的该数据点的信息。

如果该地理位置有多个数据点,显示聚合d框。
您可以单击数据点气泡图标,查看此处的数据点列表。单击某数据点右侧的查看,d出该数据点的具体信息d框。

更多可视化工具
二维数据可视化服务提供诸多工具,排列在地图上方,来协助您更好的管理数据点和配置场景。

工具 说明
value下拉框 可从下拉框中选择想要在地图中显示的数据字段。
“”图标 通过设置参数,可筛查和过滤数据字段。筛查与过滤参数设置说明如下:
筛查标题设置:输入筛查标题。
筛查字段:从下拉框中选择需要筛查的字段。
热力图 通过热力图,查看数据点的分布以及数据点属性功能显示。详情请参见热力图。
*** 作 说明
编辑 编辑场景信息,参数说明请参见本文上方场景参数说明。
预览 单击进行全屏预览。按Esc键退出全屏。
分享 您可以将链接分享给其他人。支持的两种分享方式:
授权登录访问:通过授权手机号码分享场景,适合单独使用二维数据可视化服务的场景。
免登录访问:生成一个无需登录就能访问的URL,用户通过该URL直接访问已编辑好的二维数据可视化场景,适合需要将二维数据可视化做嵌入集成的用户或企业。
具体 *** 作请参见分享场景。可以的,先把随身WiFi插入电脑USB插口----驱动完成----电脑右下角有无线图标,使用鼠标右键点击一下会d出一个设置页面----底下有切换无线网卡模式,选择切换,完成即可使用无线网卡模式,连接附近的热点
欢迎分享,转载请注明来源:内存溢出
评论列表(0条)