青云QingCloud发布大数据工作台,轻松搞定数据集成与实时计算

文章来源:网络整理编辑:采集侠2022-06-02 11:48

导读:

[青云QingCloud发布大数据工作台,轻松搞定数据集成与实时计算

逐渐增多的联网设备设施,如果不对其产生的海量数据进行治理或分析,仅仅对单独某个企业个体而言,或许都将酿造一场数据灾难。

反之,擅用数据治理并拥有大数据能力的企业,他们的财务表现、做出决策的速度和正确性,都将远远超过竞争对手。

近年工信部密集发布《工业数据分类分级指南(试行)》、《关于工业大数据发展的指导意见》、《关于组织开展2021年大数据产业发展试点示范项目申报工作的通知》等政策通知,旨在提升企业数据治理能力,打造应用繁荣、产业进步的大数据生态体系。

企业们在从传统模式转变到数字化模式一段时间以后,也开始从底层资源需求进阶到数据层需求,他们希望把获取到的数据盘活,对数据价值进行利用,甚至创造新的业务模式。

数据治理的战略地位得到提升。根据赛迪顾问预测,2023年我国大数据产业规模将超过万亿元,2027年将达到1.8万亿。大数据产业链组成丰富,政府机构、技术和产品服务商、场景运营方陆续加入玩家阵营。

青云QingCloud发布大数据工作台,轻松搞定数据集成与实时计算

大数据产业链,来源:前瞻产业研究院

从2014年发布第一款数据产品开始,青云科技便紧跟行业趋势和客户需求,配备近百人的研发团队,持续推出了近30款数据产品和服务,涵盖数据库与缓存、消息队列与中间件、对象存储、大数据服务、数据仓库和BI,为百行千业的客户提供优质服务。

近日,青云正式发布“大数据工作台”产品,目标在于帮助企业打通大数据全链路,从海量数据中提炼出最有价值的信息和知识,辅助业务决策和创新。在物联传媒记者向青云QingCloud大数据产品经理刘雄风的提问沟通中,我们进一步看懂了关于大数据的趋势,以及青云大数据工作台发布的意义所在。

青云QingCloud发布大数据工作台,轻松搞定数据集成与实时计算

一个工厂一天产生2.6亿条数据

互联网时代,大数据分析最常见的用途是了解用户的使用习惯、消费偏好、行为特征等,从而做出个性化推荐。并且互联网大数据对时效没有太高要求,主要是从长期积累中找出关联性。

物联网应用与此不同。数据集成、实时计算分析、统一监控和调度是普遍需求,数据越完整、越全面、反馈实时性越高,企业降本增效的效果就越好。

但物联网数据治理并非易事。

某中国环保行业的领导者,旗下每个工厂分别部署3000多个数据采集点,每个工厂每秒传送数据0.5MB,每天传送数据大小为38GB,数据量为2.6亿条。将情况复制到集团21个工厂,一天的数据量达到54亿条、798GB,保留6个月的数据总量将高达9720亿条、140TB。

数据量大不是唯一特点,很多场景下的数据源更显多样化

某行业领先的工业自动化测试设备与整线系统解决方案商,其数据源涵盖生产相关设备,如机加工设备、SMT设备、AGV、立库、质检等相关设备,以及生产外运营相关的IoT设备,如水电气、空调暖通、给排水、道闸门禁、温湿度传感器终端等,具有非常强的多样性。

再加上各类设备数据的采集频次、数据留存时间各不相同,需要应用不同的采集策略。

另外在工业、能源等诸多对安全、保密性有要求的场景,其网络环境属于高度隔离状态,数据采集点位于企业工控网,不允许外部访问,这将为数据治理带来新的难度。

总而言之,数据治理值得被重视,且相比于安排专门岗位来计算日常的数据产出、支付这项额外的人力成本,仍然可以将精力专注在核心业务开发上。

按照青云的介绍,一般客户数据量达到GB级别,就具备了使用大数据工作台的条件。对于客户关注的成本问题,青云大数据工作台在复杂场景下,每CU(Computing Unit,1CU含计算资源:1核CPU,4GB内存)每秒可以处理3000条至1.5万条数据,每CU计费模式为0.4元/小时,并且目前青云大数据工作台产品处于公测阶段,支持免费开放使用。

客户厌烦具有“割裂感”的产品

站在客户的角度,大数据的价值不是数据本身,而是背后隐藏的对业务有影响的信息和知识。大数据产品的内涵也不在简单堆叠Hadoop、Spark和Flink等产品组件,客户更加希望有独立的实时计算平台,且平台能带来良好的使用体验。

基于这一点,青云在提供大数据工作台产品的基础上,将其与KubeSphere容器平台和IoT平台形成合力,充分发挥各自优势,组建了完善的“大数据工作台+KubeSphere+IoT”三位一体技术方案。

青云QingCloud发布大数据工作台,轻松搞定数据集成与实时计算

“青云大数据工作台+KubeSphere 容器平台+IoT 平台”三位一体技术方案

方案架构上,最上层是物联网平台,中间是大数据平台,最底层是容器平台。

在容器平台层,提供按需使用、弹性伸缩、一键扩容、在线运维的功能保障。

在大数据平台层,结合消息中间件、数据仓库、数据服务等云原生产品组件,从横向数据流方面提供一站式的数据实时处理和输出能力;

在物联网平台层,形成“云、网、边、端”统一管理、统一数据采集和统一边缘控制。

这再次证明青云大数据工作台出于打通大数据全链路的初衷而建立,在整合大数据相关产品及服务后,为客户提供一站式智能大数据开发与治理平台,并具有6点突出特性:

第一,开箱即用。公有云环境下几分钟即可完成环境的创建和部署,即开即用、便捷高效。在私有云的部署一般是半天或一天时间完成,且仍在进行一键部署的优化。

第二,弹性扩容。具备云原生弹性扩容的能力,可以帮助客户合理地节省资源,提高资源的使用率。通过提供细粒度管控,最小资源使用的粒度只需要0.5CU,支持按量、包年包月计费,可以更好地适配不同的需求,价格低廉,安全稳定。

第三,存算分离。与青云的对象存储服务无缝衔接,海量数据可以高效、低成本的存储。同时支持数据计算按需扩容,极具性价比。

本文链接:http://www.soxunwang.com/kjrd/2022/0602/101974.html

声明:
1、此文内容为本网站刊发或转载企业宣传资讯,仅代表作者个人观点,供读者参考。
2、搜讯网所转载的稿件都会明确标注作者和来源,如您不希望被转载请及时与我们联系删除。
3、搜讯网的原创文章,请转载时务必注明文章作者和"来源:搜讯网",不尊重原创的行为搜讯网或将追究责任。
4、本站提供的图文仅供参考,不能作为任何咨询依据,专业问题请咨询专业人士,谨防受骗。

关注搜讯网微信号

扫描加关注!

搜讯网福利发放

最新热点 更多
相关阅读 更多