印刷产品分类:
您当前所在位置:官网首页 > 公司新闻 >

别找啦,一套管好数据的方法就在这里!

  陈森江

  下面的场景

  身为IT部分经理的你

  是否正在遇到?

  “陈工,我是祝工,前次你们引荐的Isilon凯时国际娱乐下载存储咱们现在现已上线了,运用比较简略,体会也很好,咱们现在数据量十分大,后期扩展和设备更新也省去了我数据搬迁的费事,这个点处理了我多年心中的痛啊,现在晚上总算能安心睡个好觉了。”

  “祝工,你满足就好,听到你这么说,我也十分有成就感,现在是不是有什么新的问题啊?”

  “你懂我,哈哈!其实是这样的,我现在碰到了一个比较头疼的问题,除了Isilon外,其实咱们还有4套数据量比较大的文件存储,首要存储项目组文档材料、合同扫描件、发票税控图片、OA的附件,许多人事材料(包括离任人员档案)、内部训练视频、APP运用图片数据,大巨细小加起来也有小300T。”

  “这是要上新存储的节奏啊!”

  “不不不,陈工,你先镇定一下,现在的首要问题不是存储容量和功用,现在运用部分常常会找我要这些数据报表,查找某些数据在哪个物理存储上,或者说部分运用数据因功用问题,需求从一台存储搬迁到另一台存储,这样的问题许多,并且短期内我也不或许收买一套海量存储,把一切数据搬迁到一台存储上,还有投标标准性问题,也不能只招一个品牌存储......”

  ?前面便是我(戴尔科技售前工程师陈森江)最近和用户电话沟通的一个实在场景。

  听完之后,我和他总结了一下,其实祝工的中心需求是一个许多文件类数据的统一办理渠道,即多台异构存储上的数据,在逻辑上有一个统一办理,一起不影响本来物理数据存储架构,还能够给领导看报表,协助运用快速查找数据,还要在不同物理存储之间完结数据的快速搬迁

  怎么办呢?

  我引荐的是戴尔科技的DataIQ

  DataIQ前身是Data Frameworks的Clarity Now,2018年被戴尔科技收买后,经过几个版别的更新,现被更名为DataIQ。

  DataIQ是一个纯软件的异构存储办理渠道,并且以旁路方法接入用户环境,它的整个装置、布置、测验运用等作业都不会影响用户现在的事务和出产

  所以,用户能够在任何时候装置布置DataIQ。

  DataIQ首要有三个功用:

  快速查找

  构成报表

  数据搬迁

  接下来,咱们简略看一下

  DataIQ的架构与运用场景

  在拓扑架构上,DataIQ自身是布置在Linux上的一台Server,支撑S3、NFS、CIFS(SMB)和本地挂载。

  简略来说,无论是哪个品牌的存储、哪种类型,只需经过S3、NFS、CIFS(SMB)协议,以及本地挂载被DataIQ地点的Linux Server挂载(mount),都能被DataIQ进行统一办理,用户也不必忧虑投标收买成果是哪家存储

  在装备过程中,只需被办理的存储注册一个账号给DataIQ Server即可,之后DataIQ Server会扫描并创立索引。假如用户只想做数据快速查找、数据报表,那么存储端需求注册一个只读账号;假如要在不同存储(如NAS存储到目标存储)之间做数据搬迁,那么存储给DataIQ Server挂载的账号需求赋予读写权限

  而拜访DataIQ Server的客户端能够是Windows Client/Linux Client/MacOS client,在拜访方法上能够经过Web浏览器、GUI客户端,也支撑CLI命令行接口,以及Python API和Direct RESTful API拜访。

  假如用户的一些运用是依据Python的,那么许多数据查询,陈述乃至数据搬迁的作业都能够由运用程序主动完结,能够大大减轻IT办理员的日常数据办理作业量。

  最终,咱们来看一看DataIQ的三个典型运用场景,或许其间就有合适你的:

  01左中括号运用场景一:数据查找左中括号

  就如前面咱们的客户祝工说到的相同,运用办理员发现他们其间一个运用的部分数据的延时十分高,他们想知道是不是存储这部分数据的存储,是功用有问题或有其它毛病类原因,所以榜首时间找到了祝工,给他一些示例数据。

  可是要在4套存储中快速找到这些数据地点途径,并不是简单的事。你需求4套存储不同用户的数据一套套挂载检查、查找,并且在上亿数量的文件中查找你想要的其间几个文件,功率是十分低的

  可是有了DataIQ,成果就彻底不同了,祝工只需在DataIQ中查找,几秒种就能出成果

  这到底是怎么做到的?

  DataIQ经过RocksDB将一切存储上的非结构化数据构成索引,并将索引cache到内存中,以完结快速查找。在一些用户的测验中咱们发现,在一个60亿文件数量级的场景(后端存储以SAS或NL-SAS为主),假如经过DataIQ去查找一个文件名,仅需求10-20秒就能够出成果。可是假如一般的Search方法,或许需求几十天才干完结,还不能完结大局查找,要分目录查找。

  所以,结合DataIQ实际运用中愈加丰厚的数据查找的条件,运用起来愈加的丰厚与有用。

  DataIQ界面图

  02左中括号运用场景二:快速报表左中括号

  在一项项目需求中,IT办理员也常常会被领导或运用开发人员问到:

  现在一切存储各自还有多少空间,不同运用目录的文件量到达多少了,巨细有多少,不合法字符有多少?

  不同的项目组各自用了多少空间?

  不同存储介质、不同存储空间的运用本钱大约能计算出来吗?现在的IT投入产出还能成正比吗?

  哪些数据是重复的,能快速做到整理吗?

  能不能针对这些问题出份报表,明日给领导报告?

  … …

  在运用DataIQ之前,存储办理员或许需求经过各种第三方东西或存储办理东西进行熬夜计算,作业琐碎杂乱,可是运用DataIQ这些都是能够主动去完结

  03左中括号运用场景三:数据搬迁左中括号

  在咱们日常存储与数据的运维办理中,因存储硬件功用问题、存储生命周期完毕或数据归档等场景中,IT办理人员都会面对许多的数据搬迁作业,乃至由于运用与IT存储办理人员之间看问题要点的不同,导致两边敌对的状况也常常会呈现。

  这些问题在DataIQ的协助下相同能够很好处理。

  IT办理员能够经过DataIQ分配一个专用的超级用户给运用开发或保护人员,一起依据需求分配好空间运用权限,如高负载运用分配2T全闪空间(如依据戴尔易安信Isilon F800),低负载分配5T SAS空间(如依据戴尔易安信Unity 480),而归档或冷数据分配30T对像存储空间(如戴尔易安信ECS),这样运用人员能够依据运用的需求自己进行数据的搬迁与归档。

  这些操作彻底不需求触摸后端的物理存储,存储办理员只需求做好硬件资源的规划与保护,大大降低了IT存储办理员的作业量与职责

  DataIQ对数据搬迁支撑的对像也十分丰厚,能够支撑NAS存储之间的搬迁,也或许从NAS到S3(反之亦然),也能够从NAS到amazon等。

  DataIQ便是这样一款纯软件的、旁路的异构存储办理渠道(任何时候都不影响出产环境),对戴尔易安信存储空间的办理彻底是免费的(非戴尔科技存储仅按容量收费),这对用户来说,彻底是一个增值服务,你还等等什么呢?

  假如您有任何问题

  欢迎在下方留言

  也能够点击文末阅览原文

  进入官网具体了解

  敬重的读者

  跟着2021新年的到来

  戴尔科技开年榜首“惠”美意来袭

  助企业新的一年牛气冲天!

  多款服务器、作业站、商用笔记本

  等产品限时优惠

  更有0元试用、现金红包

  等活动等你来参加

  快来扫描下方二维码

  或点击文末阅览原文

  了解活动概况

  相关内容引荐:新品:PowerScale里的DataIQ

公司简介

凯时娱人生就是博 ,www.凯时,凯时国际娱乐下载…… 更多>>

欢迎来电来厂咨询