一篇文章带你读懂大数据在智能家居领域的贡献
大数据分为大数据存储和大数据分析,属于两种截然不同的计算机技术领域,大数据存储用于大数据分析。大数据存储重点在于研发可以扩展至PB甚至EB级别的数据存储平台;大数据分析关注在最短时间内处理大量不同类型的数据集。目前无论是大数据存储还是大数据分析,都已经成为帮助企业主业务的关键应用。在智能家居领域,例如家庭数字网络摄像头的云端存储,音视频设备背后的云端流媒体,家庭电量实施云端监测等等,都在大规模使用云存储和分析技术。
智能家居云存储方式
高度智能化的智能家居涉及数据量非常庞大,传统存储技术无法满足,所有云存储技术的逐渐发展与应用也为智能家居的发展迎来了广泛的关注。
下面举例其中一种云存储方式:
新一代的面向智能家居大数据云存储系统主要由逻辑控制模块、用户访问模块、存储模块、文件读/写模块和面向智能家居的大数据云存储模块。
逻辑控制模块:是整个面向智能家居大数据云存储系统的核心,是逻辑处理的枢纽,各业务请求均在该模块中被处理。
用户访问模块是智能家居中的用户和云储存系统交互的纽带,利用该模块可以透明地为用户提供底层实现的各项功能。
存储模块为新一代智能家居云存储系统提供了透明的存取功能。文件读/写模块主要负责将上层逻辑处理和底层存储进行隔离。
逻辑结构:请求处理后传输至存储模块,再由存储模块发送到面向智能家居的大数据云存储模块,在该模块中实现大数据云存储。
每个数据的处理流程:
每一个数据都有一个ETL,就是抽取、转化,然后去加载,包括做数据的清洗。如果数据大批量进来,有些数据可能是有问题的。比如说,好多地址会写得比较模糊,如果要搜索北京这个词的时候,数据仓库里可能只有一个京字,这些都要统一整理成一个,比如说北京,这样后面分析就会简单,比如山东,有人会输入“鲁”字来进行搜索,而不是山东,这就需要在大数据分析前期做好数据清理工作,做规范化,这样后面的数据分析起来就方便很多。
大数据的分布式计算:
通常用于数据分析平台的分布式计算平台内的存储不是我们以往面对的网络附加存储(NAS)和存储区域网络(SAN),而通常是内置的直连存储(NAS)以及组成集群的分布式计算节点,无论是数据部署安全、保护和保存流程都非常复杂。但大数据分析中包含各种快速成长中的技术,简单用分布式技术对其定义也并不准确。
这篇有关于 一篇文章带你读懂大数据在智能家居领域的贡献 的文章,就为您介绍到这里,希望它对您有帮助。如果您喜欢这篇文章,请分享给您的好友。