咨询热线: 010-82177889
新闻中心 News
产品中心 / Products
  • 发布时间: 2017 - 07 - 04
    EMC VPLEX FamilyEMC VPLEX 提供连续的数据可用性和数据移动性,来保障业务关键型应用程序的正常运行时间,并创建一个易于管理和重新配置的敏捷基础架构。VPLEX 为成千上万个主动-主动数据中心提供强有力的支持,旨在确保业务关键型应用程序的最高可用性。VPLEX 创建了一种灵活的存储体系结构,可保障整个混合云中的数据和工作负载移动性始终流畅。借助 VPLEX,您可以在线完全无中断地实现存储技术更新,从而使 IT 组织节省大量时间和资源。了解 VPLEX 产品VPLEXEMC VPLEX 提供连续可用性和无中断数据移动性,可帮助贵组织实现以下成果:当面临灾难时,增加您业务关键型应用程序的正常运行时间通过在线技术更新,加快您数据中心的现代化转型带来运营上的敏捷性和灵活性,使您的基础架构满足不断变化的业务需求VPLEX For All-FlashVPLEX For All-Flash 是一款功能齐全的应用装置,面向闪存存储日益增多的数据中心设计,具有以下优势:使用全新 VS6 引擎的闪存性能无需软件许可证即可实现闪存环境的可扩展增长EMC 所有全闪存存储均可提供:XtremIO、VMAX 全闪存和 UNITY 全闪存
  • 发布时间: 2017 - 06 - 22
    Cisco® 4000 Series Integrated Services Routers (ISRs) form an intelligent WAN platform that delivers the performance, security, and convergence capabilities that today’s branch offices need.Product OverviewThe Cisco 4000 Series Integrated Services Routers (ISR) revolutionize WAN communications in the enterprise branch. With new levels of built-in intelligent network capabilities and convergence, the routers specifically address the growing need for application-aware networking in distributed enterprise sites. These locations tend to have lean IT resources. But they often also have a ...
  • 发布时间: 2017 - 06 - 22
    The Cisco® 880 Series Integrated Services Routers (ISRs) combine Internet access, security, voice, and wireless services onto a single, secure device that is simple to use and manage for small businesses and enterprise small branch offices and teleworkers. The Cisco 880 Series delivers features including firewall, content filtering, VPNs, and wireless LANs (WLANs) at broadband speeds to small offices. Easy deployment and centralized management features enable enterprises or service providers to deploy the Cisco 880 Series in small branch offices or small businesses.Product OverviewCi...
  • 发布时间: 2017 - 06 - 22
    Cisco® 890 Series Integrated Services Routers (ISRs) combine Internet access, comprehensive security, and wireless services in a single high-performance device that is easy to deploy and manage. They are well suited for deployment as customer premises equipment (CPE) in enterprise small branch offices and in service provider managed-service environments.Product OverviewCisco 890 Series ISRs deliver integrated security and threat defense, protecting networks from both known and new Internet vulnerabilities and attacks. These powerful, fixed-configuration routers provide secure broadba...
  • 发布时间: 2017 - 06 - 22
    Powerful Cisco IOS® Software-based router for small to medium sites offers flexible connectivity options and simplifies large-scale wireless WAN deployments.Product OverviewThe Cisco® 800M Series Integrated Services Router (ISR) is a modular platform in the Cisco 800 Series ISR product family. Intended for small to medium sites, it provides a flexible array of WAN connectivity options with easy migration among WAN interface types. It runs Cisco IOS® Software and delivers built-in security in a single software image with no additional software licenses required. It...
联系方式

工作日咨询热线:010-82177889

非工作日咨询热线:
13911660080(服务器存储) 13910929352(网络与安全) 13911866909(软件与服务)


中国 · 北京 · 总部


地址:北京市海淀区上地三街9号嘉华大厦D座1101室

管理大数据存储的十大技巧

日期: 2017-06-21
浏览次数: 205

90年代,每一台应用服务器都倾向拥有直连式系统(DAS)。SAN的构建则是为了更大的规模和更高的效率提供共享的池存储。Hadoop已经逆转了这一趋势回归DAS。每一个Hadoop集群都拥有自身的——虽然是横向扩展型——直连式存储,这有助于Hadoop管理数据本地化,但也放弃了共享存储的规模和效率。如果你拥有多个实例或Hadoop发行版,那么你就将得到多个横向扩展的存储集群。

而我们所遇到的最大挑战是平衡数据本地化与规模效率,这是一个鱼与熊掌兼得的话题。

数据本地化是为了确保大数据集存储在计算节点附近便于分析。对于Hadoop,这意味着管理数据节点,向MapReduce提供存储以便充分执行分析。它实用有效但也出现了大数据存储集群的独立操作问题。以下十项是Hadoop环境中管理大数据存储技巧。


管理大数据存储的十大技巧

  

分布式存储

  

传统化集中式存储存在已有一段时间。但大数据并非真的适合集中式存储架构。Hadoop设计用于将计算更接近数据节点,同时采用了HDFS文件系统的大规模横向扩展功能。

 

虽然,通常解决Hadoop管理自身数据低效性的方案是将Hadoop数据存储在SAN上。但这也造成了它自身性能与规模的瓶颈。现在,如果你把所有的数据都通过集中式SAN处理器进行处理,与Hadoop的分布式和并行化特性相悖。你要么针对不同的数据节点管理多个SAN,要么将所有的数据节点都集中到一个SAN。

 

但Hadoop是一个分布式应用,就应该运行在分布式存储上,这样存储就保留了与Hadoop本身同样的灵活性,不过它也要求拥抱一个软件定义存储方案,并在商用服务器上运行,这相比瓶颈化的Hadoop自然更为高效。

  

超融合vs分布式

  

注意,不要混淆超融合与分布式。某些超融合方案是分布式存储,但通常这个术语意味着你的应用和存储都保存在同一计算节点上。这是在试图解决数据本地化的问题,但它会造成太多资源争用。这个Hadoop应用和存储平台会争用相同的内存和CPU。Hadoop运行在专有应用层,分布式存储运行在专有存储层这样会更好。之后,利用缓存和分层来解决数据本地化并补偿网络性能损失。

  

避免控制器瓶颈(Controller Choke Point)

  

实现目标的一个重要方面就是——避免通过单个点例如一个传统控制器来处理数据。反之,要确保存储平台并行化,性能可以得到显著提升。

 

此外,这个方案提供了增量扩展性。为数据湖添加功能跟往里面扔x86服务器一样简单。一个分布式存储平台如有需要将自动添加功能并重新调整数据。

  

重删和压缩

  

掌握大数据的关键是删重和压缩技术。通常大数据集内会有70%到90%的数据简化。以PB容量计,能节约数万美元的磁盘成本。现代平台提供内联(对比后期处理)删重和压缩,大大降低了存储数据所需能力。

 

  

合并Hadoop发行版

  

很多大型企业拥有多个Hadoop发行版本。可能是开发者需要或是企业部门已经适应了不同版本。无论如何最终往往要对这些集群的维护与运营。一旦海量数据真正开始影响一家企业时,多个Hadoop发行版存储就会导致低效性。我们可以通过创建一个单一,可删重和压缩的数据湖获取数据效率。

  

虚拟化Hadoop

  

虚拟化已经席卷企业级市场。很多地区超过80%的物理服务器现在是虚拟化的。但也仍有很多企业因为性能和数据本地化问题对虚拟化Hadoop避而不谈。


管理大数据存储的十大技巧

  

创建弹性数据湖

  

创建数据湖并不容易,但大数据存储可能会有需求。我们有很多种方法来做这件事,但哪一种是正确的?这个正确的架构应该是一个动态,弹性的数据湖,可以以多种格式(结构化,非结构化,半结构化)存储所有资源的数据。更重要的是,它必须支持应用不在远程资源上而是在本地数据资源上执行。

 

不幸的是,传统架构和应用(也就是非分布式)并不尽如人意。随着数据集越来越大,将应用迁移到数据不可避免,而因为延迟太长也无法倒置。

 

理想的数据湖基础架构会实现数据单一副本的存储,而且有应用在单一数据资源上执行,无需迁移数据或制作副本。

  

整合分析

  

分析并不是一个新功能,它已经在传统RDBMS环境中存在多年。不同的是基于开源应用的出现,以及数据库表单和社交媒体,非结构化数据资源(比如,维基百科)的整合能力。关键在于将多个数据类型和格式整合成一个标准的能力,有利于更轻松和一致地实现可视化与报告制作。合适的工具也对分析/商业智能项目的成功至关重要。

  

大数据遇见大视频

  

大数据存储问题已经让人有些焦头烂额了,现在还出现了大视频现象。比如,企业为了安全以及操作和工业效率逐渐趋于使用视频监控,简化流量管理,支持法规遵从性和几个其它的使用案例。很短时间内这些资源将产生大量的内容,大量必须要处理的内容。如果没有专业的存储解决方案很可能会导致视频丢失和质量降低的问题。

  

没有绝对的赢家

  

Hadoop的确取得了一些进展。那么随着大数据存储遍地开花,它是否会成为赢家,力压其它方案,其实不然。

比如,基于SAN的传统架构在短期内不可取代,因为它们拥有OLTP,100%可用性需求的内在优势。所以最理想的办法是将超融合平台与分布式文件系统和分析软件整合在一起。而成功的最主要因素则是存储的可扩展性因素。

本文摘自:EMC官方微信


最新新闻 / News More>
1
2018 - 02 - 01
当前,架设一台IBM服务器、提供应有的internet访问、内部E-mail等功能是诸多公司已经落实的事情。大部分公司会选择将IBM服务器托管给服务器托管公司,但也有一部分公司会选择自行维护。那么,在日常使用IBM服务器的时候应如何维护?首先,要保持环境清洁,定期进行打扫先进的IBM服务器可以说是一个公司网络构建与访问的核心,一旦损坏则会影响公司的网络运营。日常维护的第一个注意要点即要将服务器设置在温度和湿度均适宜的机房中,并且需要定期打扫,擦拭去除灰尘等污染源,且工作人员要切记不可在机房中吃饭、喝饮料等,保持环境清洁。其次,要定期查看事件日志系统管理员要注意定期查看IBM服务器的事件日志,查看包括信息类、警告类和错误类的日志,从中排除服务器可能存在的硬件问题,以免存在的问题不断扩大,最终影响到整台服务器的正常运转。如果必要且时间允许的话,还可以用自带的诊断程序再次进行检查。最后,一旦发现问题要做好报修准备工作一些公司其实并不具备独立维修服务器的能力,所以一旦发现IBM服务器出现异常,一定要在报修前做好相应的准备工作,如获取设备型号、故障发生的原因、记录下不同于平常的操作等,以备维修人员到场后能够有迹可循、顺利维修。应该说,值得相信的IBM服务器之所以备受众多公司青睐,其质量定然是可靠的。但再好的设备,如果日常使用不以为意,那么损坏也只是迟早的问题。因此对于一台IBM服务器的日常维...
2
2018 - 06 - 15
提起手机保养相信出现在人们脑海中的便是贴膜、换壳等各种保养方式,而H3C路由器的保养可能大多数消费者对这一设备会感觉一头雾水。实际上高质量的H3C路由器也是有些许保养秘诀需要使用者来掌握的,本文中小编就针对H3C路由器的保养秘诀进行介绍。秘诀之一、高温环境下要散热许多家用电器如冰箱在工作之时都会散发出热量,H3C路由器在正常工作状态下也是如此。这就要求使用H3C路由器的消费者应当对散热予以关注,尤其是炎热的夏季或者室内温度过高的情况下更要加强对其进行散热保养,以免出现散热不良引发的H3C路由器内置芯片温度过高最终导致网速变慢或者断网的现象。秘诀之二、定期清理浮尘很多使用H3C路由器的消费者都会将其放置在一个固定的位置,长久如此路由器机表及散热孔部位难免会粘附一些浮尘。故而消费者应当定期使用软布擦拭H3C路由器机表的浮尘,针对其散热孔部位的浮尘则应当使用吹风机或者其他设备进行清理。秘诀之三、定期进行重启操作现代人对于网络的依赖性普遍较高,致使H3C路由器基本都是常年开启。殊不知如若让其不间断的工作势必会增加设备的损耗,而且还会因缓存的增加拖慢了网络的速度,因此消费者应当定期对其进行重启操作在释放缓存和加快网络速度的同时也让H3C路由器得到适当的休息。以上即为针对H3C路由器保养秘诀知多少所做的介绍,每一个使用H3C路由器的消费者都有必要掌握这些保养秘诀。售后好的H3C路由器通过默默发...
3
2018 - 08 - 25
众所周知Citrix NetScaler,作为专业生产Citrix技术专家推出的一款高端的应用交付设备,其不仅可以加速应用的性能,更能确保应用持续的可用性和安全可靠性,Citrix NetScaler更是凭借着自身优势,成为优化应用交付的综合解决方案,下面Citrix技术专家针对Citrix NetScaler优势来展开介绍。一、可以整合多个应用案例Citrix技术专家说到Citrix NetScaler在单一平台上,可以整合多个应用案例的优势,让运营商能够简化并优化解决方案的部署,并降低其复杂性和提高效率。另外Citrix技术专家还说到,Citrix NetScaler能使运营商扩展任何网络的应用方案,包括数据平面内的优化、网络地址转换以及流量管理等。二、减少资本和运营支出Citrix技术专家说到Citrix NetScaler,可以大幅度每单位储存容量的成本,移动运营商经常利用Citrix NetScaler的优势来优化网络,以此降低整体的资本和运营支出,售后服务规范Citrix技术专家还提到,Citrix NetScaler可以提供不同平台的可扩展性选择,来满足不同规模的网络,同时Citrix NetScaler还能允许许可证升级到更高级别的吞吐量。三、负载均衡功能强大据Citrix技术专家介绍,Citrix NetScaler通过其负载均衡功能强大的优势,将应用请求发送到适...
4
2018 - 02 - 05
IBM服务器对于一些刚要架设自家公司网站、对外提供网络服务的新公司而言,可以说是必备的服务器产品之一。如何选购或者租用到先进的IBM服务器就变得十分重要,因为这将影响到接下来的一系列使用和提供服务的体验。那么,究竟应该如何选购或者租用IBM服务器?首先,要看服务器的硬件配置在选购IBM服务器之前有一个问题必须要事先了解,那就是不同的需求需要的硬件配置各不相同。所以无论是在采购还是租用IBM服务器之前,首先要做的就是确定公司的定位以及需求,进而找寻IBM服务器最专业的公司进行配置上的匹配,从而租用或者购买到一台适合自己公司的IBM服务器。其次,要选择售后服务良好的公司在自建或者租用服务器后最令人担心的就是售后服务的质量,故而用户在选择时要选择售后服务良好的公司,如此不仅可以在使用IBM服务器的过程中,遇到疑问时及时得到解决,同时架设起来的网站或者其它网络服务也会有更加良好的使用体验。最后,就是要选择有应对大风险能力的服务器公司在这个网络黑客盛行的年代,如果一家公司的服务器无法得到妥善保护,那么不仅仅公司内部数据有可能外泄,设备本身也有可能遭受破坏。因此客户在选择IBM服务器时一定要选择有应对大风险能力的服务器公司,如此一来即使面对大面积的网络攻击,技术人员也可以以最快的速度扑灭,保障用户数据的安全。应该说,选购或者租用IBM服务器的基础就是用户的需求和数据的安全。一台服务器的好坏,与...
5
2018 - 06 - 20
H3C路由器经过技术革新和发展已经不仅仅局限于商用,在现代化的家庭网络之中H3C路由器的身影也十分常见,相信有许多使用者都遇到过无线网络不给力的情况实际与H3C路由器摆放的位置不合适有很大关系。笔者将在下文中针对售后好的H3C路由器摆放技巧进行概述。技巧之一、放在开阔无异物遮挡的位置有许多使用H3C路由器的消费者为了美观性能习惯的将其放置在不起眼的边角位置,致使无线信号被墙壁或者其他异物阻拦影响到网络的速度。因此使用者不能将H3C路由器路由器置于角落里也不要将异物覆盖至路由器的机身,最好能够放置在开阔且又空旷的位置。技巧之二、远离一切能够干扰到无线信号的物品研究发现一些电器类物品或金属制品会影响到H3C路由器的无线信号,诸如微波炉在工作之时便会干扰到无线信号。这就要求使用H3C路由器的消费者在对其进行摆放之时应当尽量远离电器或者金属类制品,以免这些物品削弱或者影响到无线信号。技巧之三、宜高不宜低使用者如若把H3C路由器放置在较低的部位,那么无线信号较易受到高处物品的阻挡或干扰。因此笔者建议使用者最好能把H3C路由器放置在室内相对较高且空旷的位置,这样便能够让整个房间都均匀的被无线信号覆盖也会减少障碍物品对路由器信号的干扰。上述内容便是笔者针对H3C路由器的正确摆放技巧所做的概述。高质量的H3C路由器作为网络的承载体伴随着快速发展的互联网在现代社会中的应用愈加广泛,希望笔者在上面所介...
6
2018 - 08 - 25
Citrix XenApp作为专业生产Citrix技术专家,推出的一款堪称经典的应用虚拟化软件,其凭借能降低管理应用成本、提升访问数据和应用安全性等优势,以及强大的功能在各大企业得到广泛应用,那么Citrix XenApp到底具备哪些功能?下面Citrix技术专家对其功能来展开介绍。一、保护数据和信息安全Citrix技术专家说到采用Citrix XenApp,即使数据没有得到特别授权,也不会离开数据中心,可以极大的降低数据丢失和被盗的风险,满足了合规性和安全要求,Citrix技术专家还强调Citrix XenApp拥有强有力的安全措施,降低了敏感信息暴露的可能性,也增强了备份和储存信息的能力。二、能表现出出色的应用性能Citrix技术专家提到他们多年来一直不断改进的虚拟化专利技术,改善了应用响应速度和用户生产力,特别是Citrix XenApp能够大大降低网络宽带的需求,缓解了网络延时,而据Citrix 技术介绍,即使是大数据量和复杂图形的应用,也能表现出出色的性能,保持用户的活力和生产力。三、随时随地向用户快速交付应用Citrix技术专家说到Citrix XenApp在任何地方任何时间,都能以最快的速度为所有用户交付应用,企业就可以随时随地地在为不在内部网络的员工、外包商以及新建的分支机构等交付应用和更新信息,Citrix技术专家也因此说,Citrix XenApp可以加速实现其...
地址:北京市海淀区上地三街9号嘉华大厦D座1101室
工作日咨询热线:010-82177889
非工作日咨询热线:18613859988/13811709670
邮编:330520
X
3

SKYPE 设置

4

阿里旺旺设置

5

电话号码管理

  • 010-82177889
6

二维码管理

展开