随着互联网的不断发展,无论是大数据技术还是云计算技术都得到了广泛的应用,而本文我们就通过案例分析来了解一下,大数据与云计算技术的关系分析。
1.什么是云计算
为便于表述,我把传统的集中化的云计算系统(包括计算和存储)称为云计算中心,相对而言,边缘计算节点可并非一定部署在客户侧或者终端。从概念上讲,将数据的存储和计算部署在云计算中央节点之外的,都是边缘计算的范畴,因此数据采集点(如探头)、集成处理设备(如自动驾驶汽车)、属地部署的系统(如企业的内部IT系统)或数据中心(如根据安全要求建立的本地数据存储系统)等,都可以作为边缘计算的节点。
边缘计算节点与云计算中心是一个逻辑的整体。边缘计算节点可以在云计算中心的统一管控下,对数据或者部分数据进行处理和存储,用以节约资源,降低成本,以及提高效率和业务连续性,满足数据本地存储与处理等安全合规的要求。
2.云计算的应用过程
一是边缘计算节点进行数据的初步处理,处理程序相对固定,主要目的是降低传输成本,提高运营效率。在本地将图像等非结构化数据转化为结构化信息,甚至引入人工智能等技术,将很多工作都部署在本地,既可以大大减少对传输资源的依赖和消耗,还能大幅提高本地的数据响应速度。
二是由云计算中心将算法下发到边缘计算节点,由边缘技术节点提供算力对本地的数据进行处理,结果也存放在本地。这样主要是满足安全管控隐私保护方面的要求,同时又能够发挥云服务快速迭代刷新的优势,确保数据处理的规则可以及时更新。
三是将边缘计算节点作为云计算中心系统的延伸,通过分布式计算技术和合理的资源调度管理,把边缘计算节点的算力、存储等资源和云计算中心统一管起来,形成逻辑集中、物理分散的高效运转的云计算平台。
如今边缘计算还处于迅速发展和成长的阶段,不同的应用场景中,边缘计算节点和云计算中心的分工不同,协作模式不同;甚至同样业务场景、同样概念下,技术实现方案也可能大相径庭。云计算中心与边缘计算节点的分工并没有一定之规,协作模式也有很多组合,有的时候边缘计算需要云计算中心强大的计算能力和海量存储的支持,有的时候云计算中心需要边缘计算节点对海量数据及隐私数据进行处理,不同的技术组合衍生出很多新的解决方案,推动云计算的技术发展和应用拓展。