华人澳洲中文论坛

热图推荐

    全自研存储产品QingStor U10000,青云科技努力撬动“数据金矿”

    [复制链接]

    2022-7-19 21:34:37 34 0

    原标题:全自研存储产品QingStor U10000,青云科技努力撬动“数据金矿”  
    跟着数字经济深化开展,数据已回升为与土地、休息力、资本、技术并列的出产因素。如何让“数据金矿”体现更多的价值已成为行业关注的焦点。  
    对此,青云科技存储产品总监冯相东表现,以后,数字经济时期,海量数据已体现出两个首要的特点:一是不论是发生数据的终端数量仍是发生的数据量级,和十几年前比,均泛起指数级增长。二是自动驾驶、物联网、AR、5G场景面前所发生的数据类型次要以非构造化数据为主,包罗图片、音频、视频以及一些日志类的数据。  
    “海量数据继续减少,愈来愈多的人意想到简略地把这些海量数据存起来,其实并无发扬这些数据的价值,或者说运动的数据是没有多少价值可言的,必需让数据活动起来,让数据残缺地或者相对于残缺地阅历生命周期的不同阶段,在不同阶段为数字化业务发生不同的价值,能力充沛挖掘全部数据的价值。”冯相东强调。  
    在数据活动的残缺链条里,从最后的收集、处置到前面的归档、再利用、烧毁,都会波及到存储与大数据技术、存储与 AI 计算技术的结合,这能让数据更高效地被捕捉、被索引、被剖析和被加工,从而完成数据层面的点石成金。这也是青云存储这些年始终在致力钻研的一个标的目的。  
    青云深耕存储畛域,造成专业和自研两大特征。  
    对于专业,是指专业存储办事专业场景。目前青云存储通过产品的演进,QingStor产品线次要由两款中心产品构成:一是 QingStor NeonSAN,二是 QingStor U10000。QingStor NeonSAN面向的是构造化数据的高机能业务场景的需要,次要面向的场景是云盘、数据库以及虚构化存储资源池场景的运用。QingStor U10000是面向非构造化海量数据存取和利用的业务场景的需要,次要包罗各种影象数据、音视频数据、数据湖、大数据、物联网等场景。产品设计初衷就是帮忙客户更好完成海量数据的价值挖掘,产品的中心特征包罗:同时提供对象、文件、大数据接口,不同协定之间完成数据无损拜候互通;单存储桶反对 100 多亿个对象,而且机能不会随之降落。  
    “两款产品有各自面向的专业场景,有各自专业的分工,咱们没有用一种架构同时知足构造化和非构造化的数据场景。由于从专业技术的视角来看,存储架构是没有银弹的,没有哪种架构能同时做到既能知足极致的机能设计要求,也能知足海量数据吞吐、计算、并发利用的需要,这样的构造是不存在的。青云但愿经过专业的存储分工更好地办事专业的场景。”冯相东指出。  
    自研是青云存储的第二大特征。青云存储 QingStor 的两款中心产品全都是自主设计的,没有承继任何开源的架构。此外,自主研发使得技术百分百可控,不存在技术盲区。  
    值得一提的是,QingStor U10000这款产品是青云在多年存储技术积攒根底上的一次产品片面降级。其承继了以前青云对象存储、文件存储的一切才能,而且在多个维度上完成了产品力的加强和迭代(青云存储以前次要包罗QingStor块存储 NeonSAN、QingStor对象存储、QingStor文件存储)。因此,QingStor U10000其实并非一款全新的产品,而是青云全部存储产品线针对非构造化数据,基于对象、文件存储上的一次产品片面降级。  
    “QingStor U10000的定位是面向海量非构造化数据的一致存储平台,帮忙客户把数据存得稳、算得快、管得好。QingStor U10000比拟于以前的QingStor对象存储和文件存储,除了产品力的片面承继,在一些次要畛域完成了显著的晋升,例照实现数据协定的互通,功用和机能失掉了加强,强化了与算力平台的对接等。”冯相东强调。  
    据引见,QingStor U10000具备撑持海量数据存储的才能,同时包管提供卓着的机能。QingStor U10000在包管线性扩展和高性价比EC集群的根底上,还能为通用场景,包罗海量小文件场景提供卓着的I/O机能。好比,单桶单目录能反对百亿级小文件存储,而且能做到机能不衰减。在技术层面,QingStor U10000采取对比盛行的技术言语——Rust言语,给予存储机能平安方面更优的保障。  
    在多协定无损互通方面,QingStor U10000在技术层面提供了一致的索引架构,而且基于一致的索引架构提供多种档次的才能。这就是说,基于对象接口存进来的数据,基于NFS/SMB存进来的数据,或者经过HDFS大数据公用协定存进来的数据,QingStor U10000都是基于一致的索引架构提供这些数据的元数据办理。此外还提供了多协定存储接笔供选择,而协定互通也让数据剖析更加高效。  
    在算力的无缝对接方面,得益于多年的积攒,QingStor U10000具备丰硕的数据处置的功用特性,可以提供一系列完美的API、SDK,能够轻松地对接大数据平台、数据处置的框架和办事,完成数据和算力的高效结合。  
    最初,数据平安也不容无视,QingStor U10000经过元数据和存储数据的分层设计、多重拜候平安机制、智能预警机制、功用办事的运维监控平台等多个维度保障数据平安。

    发表回复

    您需要登录后才可以回帖 登录 | 立即注册

    返回列表 本版积分规则

    :
    中级会员
    :
    论坛短信
    :
    未填写
    :
    未填写
    :
    未填写

    主题37

    帖子46

    积分218

    图文推荐