2019年大数据分析的存储架构

作者: yoku酱 | 来源:发表于2019-11-13 09:04 被阅读0次

    今天给大家介绍一下关于2019年大数据分析的存储架构详解,首先存储行业的技术专家和分析师预测,IT组织将专注于改进其存储架构,以便在2019年更好地利用数据分析、人工智能和物联网。并指出,改进大数据分析、人工智能、机器学习、物联网的存储架构将成为2019年关注的重点领域。

    行业媒体对2019年企业数据存储预测的存储技术专家和分析师小组进行了调查,许多人表示,企业IT组织将专注于更好的方法来分析、使用和管理数据湖中的所有信息。他们的努力将包括在越来越多的旨在集成、设计和编排数据的工具的帮助下调整大数据的存储架构。

    这些存储技术专家和分析师对2019年预测的样本进行分析,这些预测主要关注大数据、存储系统和数据管理、安全性和其他常规存储趋势的存储架构。在此处可以了解关注云存储以及闪存和新兴内存技术的其他预测。

    数据湖成为“沼泽”

    PureStorage公司产品和解决方案首席技术官兼副总裁ChaddKenney:数据湖很快变成了数据沼泽。它最终成为大量数据的登陆区,而且实际上没有很多人利用该数据湖内的数据集。我预计组织将重点放在部署数据中心,将多个孤岛整合到一个基于闪存的平台中,该平台具有高并发性、高并行性和与横向扩展容量呈线性关系的性能。大数据将通过新的大规模数据中心架构重新焕发活力。

    HitachiVantara公司首席技术官HuYoshida:很多数据具有甚至没有被查看或处理过的价值。到目前为止,人们已经将其摄入数据库或将其转储到数据湖中。但是他们意识到必须整合、清理、丰富和设计数据才能真正发挥作用。如今时机已经成熟。云计算和私营部门正在提供更多工具,我认为人们将开始使用这些工具。能够自定义丰富元数据的对象存储对于智能地集成数据非常重要。其过程就在那里,开放的API也在那里。所有这些都在协同工作,使用户能够更加智能地了解他们的存储和数据。它不仅仅是保护、复制、保护和存档数据。它将更多地关注数据对业务的意义。

    如果你对大数据开发感兴趣,想系统学习大数据的话,可以加入大数据技术学习交流扣扣群:458数字345数字782,欢迎添加,了解课程介绍,获取学习资源

    EnterpriseStrategyGroup高级分析师ScottSinclair:人们拥有大量的文件数据。它是在分解的基础设施中。找到所有数据正在成为一个真正的问题。人们认为元数据是解决问题的一种方法,但理想的元数据解决方案尚未浮出水面。

    451Research公司高级分析师StevenHill:美国的公司只是刚开始感受到欧盟通用数据隐私法规(GDPR)等隐私倡议的影响。而且,随着加州消费者隐私法案计划于2020年生效,企业将需要将可见性和治理扩展到非结构化数据以及传统数据库信息。数据现在既是一种资产又是一种负债,企业确实需要更好地识别和自动化非结构化数据的管理,以保持行业标准,同时继续从其掌握的信息中获取持续价值。

    调整大数据的存储架构

    MoorInsights&Strategy高级分析师SteveMcDowell:对边缘计算的关注主要集中在处理和网络上,边缘计算是IT扩展最热门的领域之一。这种情况在2019年发生了变化,因为部署这些边缘解决方案的人开始了解对托管存储的需求。毕竟,边缘计算只是一个微型数据中心。随着数据饥渴的人工智能应用程序部署到边缘架构中,以及随着5G网络在2019年开始得到认真部署,这种情况就会加速。这个领域的重要参与者必须在2019年拥有存储解决方案。

    StorageIO公司高级顾问分析师GregSchulz:2019年,企业数据存储重点从核心云计算和内部部署数据中心扩展到边缘,以支持传统和新兴工作负载,如物联网、人工智能、深度学习、机器学习和其他分析。边缘存储还意味着更多基于SSD硬盘的非易失性存储器(NVM)技术,包括四层NAND闪存,以及更多存储级存储器(SCM),例如3DXPoint。不同的IT组织可能会采用不同的方式。有些人会扩展他们的工作。其他人将开始寻找或进行概念验证测试。此外,需要关注AWS、Microsoft、RedHat和VMware等公司的服务,以扩展其边缘存储解决方案和系统。

    WesternBull公司数据中心系统高级副总裁兼总经理PhilBullinger:边缘的无线、网络、存储和计算系统的交叉将加速新数据中心架构的创新和部署。包括NVMe、可开放标准的可组合基础设施和结构附加存储新技术,以及针对人工智能和机器学习工作负载量身定制的计算架构,将取代通用系统,因为更强大的端点设备推动了对分布式数据基础设施的新需求。

    思科系统公司首席技术官办公室研发工程师JMichelMetz:我们正处于架构组件在数据中心相互关联的范式转变之中。存储和内存正在合并;计算和内存正在合并;计算和存储正在合并。与此同时,网络和互连已经达到了五年前被认为是科幻小说的水平。在2019年,我希望看到一些非常有趣的科学实验,这些实验来自初创公司,他们希望将原理图分解并将其改造成有趣的组合。例如,我们已经开始看到存储和计算的组合,称为计算存储、存储和网络,以及“可组合”架构变得更加现实。一旦开箱即用,就会有新方法来改变数据中心周围的存储功能。虽然2019年将不会推出现成的解决方案,但人们可以期待在2020年或2021年市场上取得许多突破。

    存储管理趋势

    IBM公司研究员,闪存首席技术官AndyWalls:在存储系统中使用人工智能将在2019年实现。这充分利用了IBM公司和戴尔公司及其他人收集的有关其存储系统的所有数据,并改进分析,以便能够在问题影响客户之前发现问题,并向他们提供信息。在2017年和2018年,对于所有供应商来说,它是早期的,比较简单的事情,例如配置不太正确或者此端口没有正确连接。现在,人们将开始看到有关偶尔发生的一些棘手问题的更多有用信息。

    DragonSlayerConsulting公司总裁MarcStaimer:能够无缝地将冷数据从高性能存储移动到云存储,从对象存储移动到文件存储,而不必为访问这些数据重新分层,这将成为许多存储供应商今年关注的重点。换句话说,它将来不会是分层存储管理(HSM)类型的分层。企业不必将数据重新读取或更改。

    RedHat公司存储副总裁兼总经理RangaRangachari:存储和超融合之间的界限越来越模糊。以前与存储的客户进行的对话最终成为关于超融合的对话。并不是说他们现在开始部署它,但是当看到他们在接下来的12个月、18个月、4个月需要做些什么时,建立超融合环境的需求和愿望变得更加明显。人们开始看到不必独立管理计算和存储的经济效益,并且采用超融合的方式将计算、存储和网络作为一个单独的实体进行管理。

    思科系统公司首席技术官办公室研发工程师JMichelMetz:存储管理正朝着十字路口前进,不同的管理方式开始交叉重叠,包括存储管理计划规范(SMI-S)、NVM快速管理计划(NVMe-MI)、Redfish、Swordfish和一些供应商。2019年将是这些不同格式或者很好地协同工作,或者发生冲突的一年。预计到2019年底会听到关于管理层的斗争,这场斗争可能会变得很糟糕。

    2019年重点关注存储安全

    思科系统公司首席技术官办公室研发工程师JMichelMetz:欧洲、亚洲和北美地区出现的许多数据合规性规定最终将以开放和暴露最终用户的方式实施,而不是保护最终用户。随着物联网隐私成为更多监管和更安全的警报呼叫,存储公司可能会束手无策。物联网是数据安全和隐私的噩梦,最近的欧盟GDPR法规会产生重大意想不到的后果,因为供应商试图在2019年对所有的新威胁发挥重要的作用。

    相关文章

      网友评论

        本文标题:2019年大数据分析的存储架构

        本文链接:https://www.haomeiwen.com/subject/syacictx.html