数据解决方案范文
时间:2023-03-28 08:42:57
导语:如何才能写好一篇数据解决方案,这就需要搜集整理更多的资料和文献,欢迎阅读由公务员之家整理的十篇范文,供你借鉴。
篇1
高可用性、高可靠性、高灵活性、高兼容性、高冗错性、高可维护性是该解决方案的优势。“六高”的技术设计决定了该解决方案特有的稳定性能,其可用性达到了99.9%,即平均20年时间,每个电源系统故障的累计时间不大于1分钟。即使遭遇停电、雷击、电网污染、静电等外在因素或设备故障,该解决方案都能做到持续供电,确保用户关键业务的稳定安全,避免给企业造成巨大损失,有效规避企业风险,保障公司资源运作系统的安全。
绿色节能是该解决方案的亮点。艾默生网络能源将各种先进的节能技术和理念融入整体解决方案层面,“能效逻辑”节能策略贯穿其中,从终端主设备到基础设施的级联节能效应,可取得显著的节能效果,并有效节省企业的投资与运作成本。
该解决方案具有“柔性”的特点,主要表现在:不管行业如何革新,客户需求如何改变,艾默生网络能源都能拿出最适合客户的解决方案与产品。这些解决方案和产品不仅能够支持机房系统“向上扩容”,适应数据中心的快速发展,而且能够进行“重新配置”,适应数据中心不同发展阶段的不同需求。
在服务方面,艾默生网络能源拥有广泛的服务网络和精良的服务团队,在中国共计设有29个用户服务中心,以及覆盖全国各地的办事处,来满足广大客户越来越旺盛的需求。无论是在供货、安装、检修、维护等方面,都能够向客户提供标准化、专业化、多元化、一体化的服务。
用户应用体会一:广东电信携手艾默生网络能源打造“亚洲最大IDC”机房动力系统
项目背景:2006年,广东电信与广州天河软件园结缘,开始新建一个亚洲最大规模的IDC机房。2007年初,IDC主体大楼竣工。为让这个“亚太信息引擎”尽快投入运行,项目建设的执行单位广州电信决定以最快的速度、最高的标准、最稳妥的方法,建设一个与亚洲最大IDC相匹配的“动力能源系统”。
解决方案:广州电信应用艾默生网络能源柔性数据中心解决方案。在机房精密空调设备方面,广州电信采用了数十台Deluxe System 豪华型精密空调,统一将它们装配在动力机房,组成中央空调系统,按照4+1方式运行。与此同时,利用机房监控系统,广州电信实现了设备的无人值守、环境的远程监控。在交流不间断电源方面,广州电信将数十台Hipulse系列400kVAUPS组成多套“N+1 UPS并机系统”,为IDC机房内的服务器、网络交换机、存储设备提供洁净、可靠的电源供应。
实施效果:艾默生网络能源柔性数据中心解决方案为“亚洲最大规模IDC”的高效运营奠定了坚实的基础。
用户应用体会二:艾默生网络能源为上海证券交易所新数据中心机房保驾护航
项目背景:上海证券交易所是中国证券市场的最大枢纽,其新建的数据中心机房总面积达2000平方米,是国内大型的数据中心机房,作为国内最核心的金融机构中心,其在全国的重要地位不言而喻,其用电保障也是最高级别。
篇2
数据冗余是导致数据急剧增长的一个主要因素。最初,重复数据删除技术致力于消除像完全备份、电子邮件附件和VMware镜像文件这些特定环境中的数据冗余。不过,客户们逐渐注意到了冗余数据这个问题的普遍性。
企业环境中的测试和开发数据数量激增:复制、备份和归档带来了多个数据副本,分散在企业的各个角落。有时用户为了图个方便,就把数据拷贝到多个位置。
研究估计,如今数据的众多副本要求企业购买、使用及管理的存储量比使用重复数据删除技术之后,实际所需的存储量多2―50倍。考虑到这给企业利润带来的负面影响,许多企业认识到:重复数据删除绝不仅仅是一项应用范围狭小的技术,需要成为整个IT战略当中一个必不可少的有机部分。
哪些企业适用?
遇到下列问题的中小企业客户最适合使用重复数据删除解决方案:
•数据急剧增长,导致存储成本失去控制;
•备份窗口日益缩小或不够充足;
•恢复时间比较长,特别是恢复主备份介质上的旧数据时;
•把磁带发送到灾难恢复站点面临成本、风险和复杂性;
•备份系统和归档系统上数据传输速度慢;
•需要满足电子发现、法规遵循和服务级别协议方面的要求;
•成本高昂的局域网和广域网存在瓶颈。
应当具备的功能
IT决策者们在评估重复数据删除解决方案时,应当关注下列必要功能:
•能够灵活扩展,不需要成本高昂的硬件升级;
•更多的恢复点,恢复时间比较短;
•点击式重复数据删除管理;
•面对不同的厂商、数据类型、来源和平台,重复数据删除解决方案内置了报告功能;
•与所有必要的应用程序紧密集成,尽量缩短最终用户的停机时间;
•提供了单一解决方案的简洁性,易于部署和管理;
•能够迅速、安全地恢复所有位置、应用程序、存储介质和时间点上的关键业务数据;
•磁盘到磁盘到磁带(D2D2T)进行了优化,以提高备份性能、确保可靠的数据恢复;
•快速、全面的搜索功能,有助于恢复;
•内置的灾难恢复功能;
•数据分类;
•经济、高效、即时的电子发现;
•使用通用技术平台;
•单一管理点。
部署面临的挑战
与磁盘到磁盘到磁带备份(D2D2T)或服务器虚拟化一样,评估重复数据删除时,也不该把它作为一项孤立的产品来对待。客户必须考虑到方案在整项数据管理和存储战略这个环境中具有的广泛影响。部署重复数据删除解决方案面临的常见挑战与性能、管理难度加大以及处理后的数据孤岛数量激增有关。
1.性能
对基于硬件设备的重复数据删除解决方案来说,查找及消除冗余数据需要极其高昂的成本。如果对进行重复数据删除处理的数据其环境缺乏了解,解决方案在灵活扩展、适应大多数企业的规模时就会面临严峻挑战。
当数据按顺序写入时,存储系统性能最佳。因而对大多数重复数据删除解决方案来说,比较小的数据集会导致磁盘性能大幅降低。由于多个对象上的小段数据存在“机械”共享,基于硬件设备的重复数据删除会需要使用专门工具对数据进行大规模碎片整理。久而久之,重复数据删除硬件设备上的读取、写入、备份和复制性能就会严重下降,让人不堪忍受。
2.管理难度加大
如今的许多重复数据删除解决方案使用起来让人觉得,整个工作流程完全围绕解决方案的价值;几乎不可能通过D2D2T5工作流程,把数据从重复数据删除硬件设备转移到磁带上。为了获得网络优化带来的优点,企业就需要在远程办事处安装新硬件或新软件。
许多重复数据删除解决方案要求企业集成独特组合的软硬件,或者购买新的独立硬件设备,而这些硬件设备各自都需要人工管理。额外的管理难度抵消了节省存储和网络资源的优点,公司在扩大需要重复数据删除处理的数据量的范围时,更是如此。
3.重复数据删除孤岛
篇3
高密度空间设计
根据摩尔定律所确定的计算机设备热负荷规律,普通的数据中心配置将无法实现有效的管理。 数据中心环境现在需要考虑所安装的解决方案及如何安装和部署这些解决方案。 在最近 10 年中,各公司的数据中心和楼宇配线设施中都大量地增加了网络设备数目,这些设备在增加关键的同时,却使得数据中心的管理变得复杂。 在当今竞争激烈的经济环境中,公司都在期望简化自己数据中心的拓扑结构,以削减成本和创建一个安全、易于管理、始终可用且能够根据不可预知的工作负荷和业务需求变化,进行灵活调整的网络基础架构。
每立方单位体积的性能、功耗和管理费用是当今 IT 基础架构中越来越受人关注的三个主要准则。 数据中心内不断添加的新服务器为已经部署的硬件带来了新的要求。 公司总部和数据中心内的空间限制及用电量限制已使得服务器的衡量标准不再单单是服务器的计算能力。 每立方体积性能正成为服务器的衡量准则。 在更小的空间内提供更多的性能再加上尽可能低的电量消耗已成为当今许多数据中心部署的要求。
无需更改已有基础架构即可实现无缝扩展,已成为所有网络基础架构所必需具有的能力。 核心网络设备容量的快速增长需要易于管理且能够提供最佳运行效率的基础架构解决方案。 这些设计问题的主要影响因素就是需要提高网络基础架构所有部件的密度和可扩展能力。
高密度是结构化布线设计的设计人员和顾问需要面对的强制性要求。 降低布线基础架构物理空间需求的同时保持功能性和灵活性的要求是首要问题。 可提高光纤和双绞线布线系统密度的硬件产品变得越来越普遍,然而,这些新型产品和设计因其特殊的管理性 为我们带来了新的挑战。 尽管这些新产品和设计通过有效的管理方法仍可提高密度,不过,密度的提高变得越来越困难。
安普布线已经认识到同时提高密度和管理性的需求。通过创新的设计流程,安普布线能够为这些环境提供全套的解决方案。设计人员在努力提高布线基础架构设计密度的同时,意识到传统产品和系统设计方法当前存在的限制。
安普布线解决方案
数据中心是以最新技术和高速计算为特点的新经济环境的“神经中枢”。数据中心的作用是集中和整合IT资源,从而为企业提供全天候(每年365天、每周7天、每天24小时)运转的基本设施。数据中心旨在集中和统一IT资源,确保为企业提供一个全年365天、每周7天可用的全天候基础设施。数据中心专门针对关键性数据运算的全天候不间断运转进行了配置,与传统办公室网络的物理层系统相比要求有所不同。
数据中心的要求
100%全天候运行
故障安全级的可靠性和连续监测
电源和网络通信冗余以及路径分隔
物理和网络接入的监控和安全性
分区环境控制
有利于移动、添加和变更(MAC)的智能系统
针对性能、功耗、通信、制冷和机械设备方面的这些挑战,安普布线提供了高效益的数据中心基础设施解决方案,同时把对环境的影响降至最低。系统专门为数据中心和存储区网络设计。对于双绞线和光纤两种媒质,它都采用工厂端接的即插即用(Plug & Go)系统。系统包括铜缆布线的MRJ21解决方案和光纤布线的MPO解决方案。同时提供提高系统安全性能、线缆密度和降低能耗的专用产品。安普布线提供的数据中心系统可以帮助用户达成其对性能、费用和环境影响方面的目标。
安普布线数据中心高密度铜缆MRJ21系统、∑连接系统和光纤MPO系统
作为高密度连接的行业领导者,针对企业级数据中心区别于普通商业建筑的这些特殊或更严格的需求,安普布线设计和开发了高密度铜缆MRJ21双绞线布线系统、∑连接系统和高密度的光纤MPO布线系统。它在减少系统停机时间和设备空间以及布线管理等方面提供了非常好的数据中心解决方案,不但节省机柜、管道的空间,也能提升整个数据中心布线的密度和布线的安装效率。预端接的主干电缆、模块化的耦合器插盒以及集中的连接电缆提供了简单的即插即用的安装,高密度连接器在很小的空间提供更多的端口,高可靠性提供真实的数据传输。
高密度线缆管理系统
安普布线创新的数据中心高密度线缆管理系统就是专门为数据中心及要求高密度和高性能的场所设计的。可帮助您确保机架从安装起直至最后移动、添加或更改一直保持良好的组织状态。系统具有高密度、美观整洁、方便散热等特点,支持水平和垂直两种管理方式,为数据中心有序、整齐的线缆管理提供可靠的解决方案。
该产品可在降低耗电量的同时,达到保证高密度性能、无缝移植及用户灵活性的设计目标。通过采用智能布线方式提高空间和空气流通性能,可以将冷却重点放在需要高散热量的区域,而不必浪费在冷却传统的无源电缆系统上。通过采用预端接系统,能够提供灵活性的优点,使系统能够在数分钟内完成添加、移动和更改操作。
篇4
“最开放的云”:
JCOS云计算管理平台
锐捷的JCOS,是真正的企业级OpenStack云理平台。该平台在教育、医疗、政府、IDC、运营商等多个行业都得到了规模部署。JCOS具有功能完善、性能卓越、兼容广泛、部署快捷等特点,可针对服务器虚拟化、分布式存储、SDN网络、安全、负载均衡等功能提供一站式解决,其部署仅需60分钟。首先,独有的业界最高性能分布式消息队列,让JCOS可以完美支持大规模集群,同时能发挥统一分布式存储机制,实现性能媲美昂贵的专业存储。其次,原生的OpenStack API接口和强大的OpenStack驱动开发能力,不仅让JCOS可以平滑对接主流服务器、存储、网络设备,兼容vmware、Hyper-V、XEN等多种Hypervisor架构,更能对应老旧及非主流设备,充分考虑用户成本负担。
在行业用户参与的实测功能中,JCOS所具备的弹性计算和虚拟化高可用方案成为了用户公认的亮点。当业务访问高峰时,产生突发连接请求,JCOS监控到当前两台虚机已经无法满足访问需求,则自动创建新的虚机以满足高并发访问。当访问高峰过后,自动将新建虚机删除。这充分发挥了ERS弹性资源扩展、DRS分布式资源调度技术所展示的虚拟机动态调度和迁移方面的技术优势。
“最简单的云”:
UDS超融合云一体机
篇5
企业面临数据处理难题,海智网聚打造商业数据平台
许多企业都拥有大量的数据,数据的价值越来越受到企业的重视。但是,如何把这些数据用起来,却成了中国企业普遍面临的难题。
海智网聚网络技术(北京)有限公司CTO、曾担任百度移动互联网无线搜索负责人的胡嵩对此体会颇深。他表示,许多每天跟数据打交道的企业发现自己成了神话里的西西弗斯。即便是像蒙牛、娃哈哈这样的知名企业,总部里八九成都是“表哥”或“表姐”,大量的人力资源消耗在对来自全国报表数据的汇总和完善上。他们每天80% 的时间都在做重复的工作――复制粘贴、格式整理、关联操作各个来源的数据,而最多只有20%的时间分析数据,就像西西弗斯不断重复、永无止境地将石头推向山顶。
每当听说老板要开会,数据部门乃至全公司员工就如临大敌,这意味着加班和无穷无尽的数据比对工作,而辛苦做出的图表,可能因为产品的快速周转,很多数据已经无效,这种情景几乎发生在所有大中型企业里。
到底是数据带来了价值,还是处理数据产生了巨大的成本,反而得不偿失?
胡嵩分析说,互联网时代的新贵们可以充分挖掘技术红利来解决这类问题。比如,中国最大的搜索引擎百度,每天都能产生T级的数据量,百度花了很大的人力物力逐步搭建起一套完善的数据分析平台。
但是,你要看到,整个百度做数据分析的资源加在一起,是一个上百人的研发团队和上千台机器支持。那么,非IT企业、传统制造业企业该怎么办?投入这么大的人力和财力做自己的数据平台值得吗?
两年前,胡嵩决定开发这样一款工具,帮助企业降低使用数据的门槛和成本,让数据物尽其用,让数据使用成为企业轻松具备的技能。
过去两年间,胡嵩一直和来自百度、微软、IBM、EMC、硅谷的工程师们一起潜心打造这款名为“BDP(Business Data Platform)”的商业数据平台,希望为企业打造云计算和大数据时代最顶级、最全面的商业数据平台解决方案,利用移动互联网和大数据技术帮助企业更简单高效地利用数据驱动管理。这个“工具”需要容纳企业各个来源的数据,将来自百度搜索推广、微博运营以及企业内部CRM、ERP等系统的海量数据集中在一起进行多维度的灵活分析,快速得到直观的结果,指导企业各个层级的角色做出正确的商业决策。
BDP商业数据平台甫一问世,便得到许多企业的积极反应,并且获得多家顶级风险投资基金的联合投资。
BDP帮助传统企业分析数据
蒙牛乳业集团的渠道部总监严晓峰是最早采用BDP商业数据平台的人。他抱着试试看的心理在蒙牛渠道部“1+3”项目中,尝试用这个平台对接所有的业务数据并进行梳理。
在“1+3”项目中,蒙牛渠道部每月初对上月业务情况进行回顾总结,并对下三个月进行规划。这个项目一直让严晓峰很头疼,以往各个渠道的巡店人员是通过手机将巡查结果上传到系统,数据处理人员将系统汇总后的巡查数据初步加工,完成后上传至BI系统,渠道部数据分析员通过BI系统导出数据,进行数据处理,得出月会需要用到的指标结果数据。
由于使用Excel处理大量数据时,处理速度很慢,效率极低,得到最后的结果数据需要5个人花费一整周的时间。由于是结果数据,无法将问题定位到具体门店,也无法随时随地知道数据的情况,而且数据通过报表的形式展现,可读性很差,也很难看出趋势变化。
在对接好数据库之后,胡嵩和他的团队协助蒙牛渠道部对所有业务指标进行梳理。从铺货、陈列、促销到费用,严晓峰不需要数据分析员,只需要在BDP商业数据平台上简单拖拽就可以将数据由整体逐层“钻取”到门店,再结合例外报告,将问题精确定位到门店。管理者可以对业务指标进行多层钻取和自主关联分析,对企业的业务观察也能从宏观进入微观。
严晓峰表示,“我用BDP的原因很简单,只要简单的操作就可以实现数据的汇总编辑,然后用数据去指导我们的业务关系。”
另一个勇于尝鲜的传统企业是沃尔沃汽车4S店海之沃。海之沃CEO王坚深切感受到BDP商业数据平台随时随地查看数据的好处,是在一次投资人大会上。当时投资人问起当月销售情况,其他4S店老板纷纷打电话、发短信询问,王坚马上掏出手机报出了数字。投资人又问最近客流情况,大家又是一阵手忙脚乱,他查看BDP上的数据后,说我们客流上升,大家不用查了,估计你们情况差不多。“大家觉得我们的IT水平还挺高。”王坚笑着说。
BDP与新兴商业模式天然互相吸引
除了传统企业,BDP商业数据平台还跟O2O行业这样的新型商业模式天然互相吸引。O2O行业是重度的数据生产者和使用者,要做到精细化运营,必须依赖数据。
58同城旗下的O2O生活服务平台58到家将它的所有订单数据、服务数据都集中到BDP商业数据平台上,把不同的数据源结成整体,然后做关联分析,最后用清晰易懂的图表呈现在手机上,以便于其从业务人员到大区经理再到CEO等数百人都能随时随地看到数据的状态。
篇6
关键词:工业自动化;PLC;人机界面;数据库
1工艺流程及主要测控点
目前,油田配注系统普遍采用“集中配置,分散注入”的工艺流程,即一个配置站对应多个注入站。其过程是在配置站将化学药剂与清水按照一定比例混合,制成符合浓度要求的母液,母液经过熟化后,由外输泵输送至各个注入站,在注入站按照每口井的配比方案加入清水,然后,注入井下。注入站工艺流程为:上游配置站输送来的母液进入母液储罐,经柱塞泵增压后被输送到母液汇管中,再经过单井母液调节阀进入混合器。注水站来的清水经过单井清水调节器进入混合器,在这里与母液充分混合后被注入井下。注入站的测控参数主要包括母液储罐液位、柱塞泵进出口压力、单井压力、单井清水流量等。
2基本原理
采用“VBA+数据库”的方案实现报表查询。VBA(VisualBasicforApplication)是新一代标准宏语言,是基于VisualBasicforWindows发展而来的,语言简单易学,功能强大。VBA是VB的应用程序版本,必须依赖于已有的应用程序,不能独立运行。目前,WIinCC、FactoryTalkViewStudio、Ifix等主流组态软件都支持VBA编程。具体过程是利用组态软件SE的数据记录功能建立数据记录模型,将需要的数据采集并存储在ODBC指定的数据库中。当操作员查询报表时,选择日期后,按下查询按钮,即执行VBA代码,将数据库中的数据读出来,并写入报表模板中,生成指定日期的生产数据报表。
3报表开发过程
3.1添加HMI标签
展开HMI服务器的“HMI标签”,右键点击“标签”,点击“打开”,在打开的标签窗口中点击“新建”,在标签名称栏中输入标签名“DayReport_Date”,类型选择“字符串”,数据源类型选择“内存”,点击“接受”,保存标签。
3.2添加ActiveX控件引用
ActiveX控件是一种基于COM接口的控件,通常不能独立使用,只能在宿主程序中运行,支持COM接口规范的编程环境均可使用它。在报表查询画面中,需要使用日历控件,必须提前在“VisualBasic编辑器”中添加ActiveX控件引用。打开SE,点击“视图”,选择“VisualBasic编辑器”。在打开的窗口中点击“工具”,选择“引用”,在列表栏中勾选“MicroSoftCalendercontrol2007”,点击“确定”,保存设置。
3.3创建并组态画面
打开SE的应用项目浏览器窗口,展开HMI服务器的“图形”,右键点击“显示”,选择“新建”,创建画面“Report”。打开画面“Report”,添加日历控件、按钮、文本、字符串等对象。将日历控件的“Value”属性及字符串的表达式属性与“DayReport_DATE”标签相关联,并设置字体、颜色等其他相关属性。
3.4设计报表模板
根据生产岗位的需求,采用MicosoftOfficeExcel2007设计报表模板“日报表.xlsx”。并将报表模板文件存储在“D:模板”路径下备用(此路径应与VBA代码中指定的路径一致)。
3.5设置数据记录
展开HMI服务器的“数据记录”,右键点击“数据记录模型”,点击“新建”,打开数据记录模型的设置窗口。点击“设置”标签,选择“ODBC数据库”,点击“ODBC数据源”;选择“系统数据源”标签,点击“新建”;选择“系统数据源”,点击“下一步”;选择“MicosoftAccessDriver(*.mdb*.accdb)”,点击“完成”;弹出的“ODBCMicosoftAccess安装”窗口,在“数据源名”栏中输入“Report”,点击“创建”按钮,选择保存数据库的位置,在“数据库名”栏中输入“Report”,点击“确定”。点击“创建表”标签,在数据库中创建表“FloatTable”“StringTable”“TagTable”。点击“路径”标签,勾选“启用ODBC备用路径”。点击“文件管理”标签,设置清除ODBC数据库中保存旧记录的天数。点击“记录触发器”标签,勾选“周期性”,根据需求,在“间隔”栏中设置数据采集周期。点击“模型中的标签”标签,添加需要记录的数据标签。
3.6编制VBA程序
篇7
相信大家都还记得2013年5月10日淘宝十周年晚会上,阿里巴巴集团董事局主席马云在其卸任集团CEO职位的演讲中说到:“大家还没搞清PC时代的时候,移动互联网来了,还没搞清移动互联网的时候,大数据时代来了。”
什么是大数据?
早在1980年,当时著名的未来学家阿尔文·托夫勒便在其著作《第三次浪潮》中热情洋溢地将大数据赞颂为“第三次浪潮的华彩乐章”。不过直到时光抵达2009年,“大数据”才开始成为互联网信息技术行业的流行词汇。
环顾四周,我们都已经切身感受到了当今的信息量正在以前所未有的速度膨胀。当我们的普通民众在上世纪90年代刚刚接触个人计算机的时候,1MB的磁盘,1GB的硬盘已经是不错的配置。然而现在呢?GB、TB都已经无法满足我们丈量数据大小的需要,PB、EB、ZB已经义无反顾地承担起了丈量数据的大任。
随着互联网自媒体的普及,每天都有数以亿计的人在发微博、写微信、更新个人主页、使用社交网站、发表个人评论……全球互联网上每天会有220万TB的新数据产生,90%的数据都是在过去的24个月内创造出来的,如今,这个比例还在不断上升。
在维克托·迈尔-舍恩伯格及肯尼斯·库克耶编写的《大数据时代》中,他们对大数据的表述是:大数据(big data),或称巨量资料,指的是所涉及的资料量规模巨大到无法透过目前主流软件工具,在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。他们对大数据的特性进行了归纳,提出了4V特点,即Volume(数据量大)、Velocity(要求实时性强)、Variety(数据的种类多样)、Value(数据是有价值的)。
而《互联网周刊》则认为“大数据”的概念远不止大量的数据和处理大量数据的技术,或者所谓的“4V特点”之类的简单概念。大数据是涵盖了人们在大规模数据的基础上所能做到的事务,而这些事务在小规模数据的基础上是无法实现的。换句话说,大数据让我们能够以一种前所未有的方式,通过对海量数据进行分析,获得具有巨大价值的产品和服务,或者深刻的洞见,进而最终形成变革世界的力量。
2 大数据应用的现状分析
最早提出世界已经迎来“大数据”时代的机构则是全球知名的咨询公司——麦肯锡。麦肯锡在其研究报告中指出:数据已经渗透到每一个行业和业务职能领域,逐渐成为重要的生产因素;而人们对于海量数据的运用将预示着新一波生产率增长和消费者盈余浪潮的到来。
大家都或多或少地意识到应该能从这些海量的数据中获取些什么,然而究竟我们能获取到什么呢?
一个被广为传播的典型案例是:在2012年初美国的一家Target超市,一位愤怒的父亲突然闯进来对店铺经理咆哮道:“你们竟然给我17岁的女儿发婴儿尿片和童车的优惠券,她才17岁啊!”经理下意识地认为是店里出了问题,也许是误发了优惠券,于是立即向这位父亲道歉。然而经理却没有意识到,其实这是公司正在运行的一套大数据系统得出的分析结论。
Target会从其会员的购买记录中去了解该顾客的性格、类别等一些列业务活动。上面的例子正是Target为适龄女性创建的一套怀孕期变化分析模型,如果相关客户第一次购买了婴儿用品,系统将会在接下去的几年中根据婴儿的生长周期向顾客推荐相关的产品,从而培养和提高客户的忠诚度。
果然,一个月后,该名愤怒的父亲打电话给商铺道歉,因为Target发来的婴儿用品优惠券不是误会,他的女儿确实怀孕了。
利用数据挖掘用户的行为习惯和喜好,在凌乱纷繁的数据背后发掘出更符合用户兴趣和习惯的信息、产品和服务,并对这些目标化的信息、产品和服务进行针对性地调整和优化,这便是大数据能带给商家最诱人的价值之一。
随着社交网络在人们生产生活中地位的快速提升,大量UGC(User Generated Content用户自生成的内容)进入互联网,上述价值的实现也变得越来越明显。
事实上,全球IT业巨头都已经意识到数据的重要意义和“大数据”时代的到来。包括IBM、EMC、惠普、微软在内的全球知名跨国公司都陆续通过收购与“大数据”相关的厂商来实现技术整合。
目前典型的大数据应用领域有:
商业智能。例如:用户行为分析,即结合用户资料、产品、服务、计费、财务等信息进行综合分析,得出细致、精确的结果,实现对用户个性化的策略控制,这在营销网络的流量经营分析中占有越来越举足轻重的地位。个性化推荐,即在各类增值业务中,根据用户喜好推荐各类业务或应用,这已成为运营商和门户提供商服务用户的一个最有效方式之一,比如应用商店的软件推荐、IPTV视频节目的点播推荐、购物或旅游网站的猜你喜欢等。
公共服务。一方面,公共机构可以利用大数据技术把积累的海量历史数据进行挖掘利用,从而提供更为广泛和深度的公共服务,如实时路况和交通引导;另一方面,公共机构也可以通过对某些领域的大数据实时分析,提高危机的预判能力,如疾病预防、环境保护等,为实现更好、更科学的危机响应提供技术基础。
政府决策。通过对数据的挖掘,从而有效提高政府决策的科学性和时效性。例如:日本大地震发生后仅仅9分钟,美国国家海洋和大气管理局(NOAA)就了详细的海啸预警。并且随即NOAA通过对海洋传感器获得的实时数据进行了计算机模拟,制定出详细的应急方案,并将制作的海啸影响模型实时在了YouTube等网站上。
3 大数据解决方案的现状分析
以往谈及大的数据通常用来形容一个公司创造的大量非结构化和半结构化的数据。如今把“大数据”作为一个专有名词提及,通常指的是解决问题的一种方法,即通过收集和整理生产生活中方方面面的数据,然后对其进行整理、挖掘、分析、处理,进而从中获得有用的价值信息。这种衍化出的新的商业模式即为通常意义上的大数据解决方案。
虽然通常意义上的大数据解决方案描述了一种通常的行为,但要实现这种通常的行为,往往会遇到诸多技术和硬件上的问题。一个显而易见的问题就是:大数据包络万象,而且像音频、文本信息、视频、图片等非结构化数据正以突飞猛进的速度增长 ,加上移动互联网的普及所带来的如位置、生活信息等富含价值的数据,现有的,或者传统的对数据的处理手段和硬件配置已越来越跟不上数据发展的步伐。
于是革命爆发了!
哈佛大学社会学教授加里·金就说道:“这是一场革命,庞大的数据资源使得各个领域开始了量化进程,无论学术界、商界还是政府,所有领域都将开始这种进程。”
数据需要存储,存储需要设备,存储设备的容量和可扩展性以及读取的速度成为了一大问题(容量问题);大数据不是一日而成的,往往都需要一定周期的积累,在数据的积累过程中,以前的数据和现在的数据在存储上应该是能保持一致的,无论设备升级与否,而且这些数据要长期有效,这是一个持久的问题(积累问题);与持久相对应的,互联网是变化的、经济活动是变化的、整个世界都是变化的,针对某些实时问题,如交易、金融等,用已经过去的数据显然是不合适的,这也是一大问题(延迟问题);大数据包络万象,有些是可以随意获得、和消除的,有些,如金融数据、医疗信息、政府情报等,则是需要按不同级别进行保护和加密的,特别是在需要交叉数据参考的应用中,不同部分的数据有着不同的安全需要,这又是一大问题(安全问题);为了满足上述问题,我们显然可以通过不断加大投入,购买更多的存储设备、雇佣跟多的工作人员、建设更多的数据中心和分析中心,但这一切都是由成本的,特别是对于以盈利为目的的商业机构而言,成本和收益永远都是最优先考虑的问题之一(成本问题);当然还有很多其他的问题,这里就不一一罗列了。
驱动商业机构解决上述问题的动力肯定是商业利益。以全球知名的IT制造与服务和咨询提供商IBM为例,其全球CEO调研显示,唯有在数据获取、将数据转换为洞察力、再将洞察力转化为行动力等方面表现优秀的企业,才能有持续的绩效表现。绩效突出者从海量数据中挖掘出有价信息的能力是绩效不佳者的2倍。
IBM认为由于当今企业、市场、社会、政府之间的联系变得越来越紧密,传统的数据分析正日益呈现出“大数据”时代的新特点,即容量要求更高、速度要求更快、数据类型多样和数据来源复杂4个方面。结合多家领先市场咨询机构的调研数据显示:
2010-2015年,“大数据”市场年均符合增长率为39.4%,将是整个信息与通信技术市场增速的7倍;管理及维护数据的成本将是购买存储设备所需成本的4倍;全球数据量的年均复合增长速度为59%;未来需要分析的信息源中,混合类型数据所占比重将高达85%;数据分析直接受到服务器性能制约的数据量将占到总体的87%;仅2012年一年,服务器在整体“大数据”市场投资中就将占去14%的比重。
这就意味着传统计算的低效正在为企业发展带来阻碍,企业感到当前的IT系统变得更加复杂且难以管理。数据显示:企业用于运营和维护IT系统的费用已经超过整体预算的70%,并且这一比例仍在持续增长;企业有三分之二的IT项目及解决方案部署超出了原定计划;IT架构的复杂度将以当前速度每两年就增加一倍。
于是出乎绝大多数人意料的事情发生了:IT部门,这个曾经作为企业现代化和创新化能力标志的部门,正越来越成为企业新创新的阻力而非动力。
怎么办?
很多人立即想到了另外一个热词:“云计算”。
IBM全球高级副总裁Rod Adkins认为,当前全球IT领域有了令人振奋的发展趋势和挑战,现在每天有大量数据和信息生成,这为大数据分析提供了机会;数据中心的挑战也为IT提供了新机会,比如云计算,能降低数据中心成本。
EMC资深产品经理李君鹏认为,大数据本身就是一个问题集,云技术是目前解决大数据问题集最重要有效的手段。云计算提供了基础架构平台,大数据应用在这个平台上运行。目前公认处理大数据集最有效手段的分布式处理,也是云计算思想的一种具体体现。Teradata技术总监Stephen Brobst则表示,公有云架构对数据仓库没有影响,因为企业的CIO不会无缘无故把财务数据或者客户数据放到云上,那样很危险。然而,是私有云架构确实有影响:第一,通过私有云,可以巩固数据集市,减少利用率不足的问题;第二,可以通过灵敏的方式将数据集成,实现业务价值。
于是有人就此理解为:大数据的最佳解决方案是采用云计算和分布式处理,利用互联网将运算能力、存储能力都做分布式的处理,认为这样做就可以最大程度上地降低成本、增加扩展性和灵活性。
然而事实真的如此吗?
让我们来分析一下最近IBM公司在国内针对百万人口的城市级信息中心制定的解决方案:
面对数量庞大且增长迅速的各类交通信息:120万辆机动车电子卡、4万辆机动车的实时GPS定位、200万笔公交IC卡数据、518个高清卡口的113亿张图片等,该市信息中心的领导意识到,当前多个项目能源消耗大、占地要求非常高、并且原有的网络设备难以满足新增的需求,网络设备经常更换,并且这些相互独立的数据库、服务器和存储,以及不同的访问权限和没有统一的管理界面,让本就压力巨大的数据中心的效率大打折扣,同时也极大浪费了宝贵的人力、能源和其他各种资源。
IBM给出的解决方案是:
首先,在基础平台上摒弃了分布式的服务器架构,而是采用大型服务器在基础架构上对处理能力、I/O吞吐和主存储进行了整合,这样做的最大亮点是,将原有成百计的分布式服务器整合到了个位数,极大地节省了空间和能源,做到绿色环保;因为不用考虑各分布式服务器之间的互通互联和各服务器之间的状态及负载均衡与调配,节省了相当数量的管理人员;另外大型服务器自身端到端的管理功能和适用于异构工作负载且基于策略的框架,有效帮助信息中心实现中心控制,实现极高的性能。
其次,在整合的基础平台之上,采用“云计算”框架虚拟化设计,实现了智能交通和政务网站的整合。这一方案让用户在使用上可以享受与分布式架构相同甚至更加优越的性能。由基础平台通过虚拟化形成的任意数量的虚机,在统一云管理软件URM的配置下,能够提供统一的管理视图和管理机制,简化在多套异构业务系统环境下系统的运营和维护工作。
而在本方案中的存储部分则采用了运行稳定、性能领先、技术成熟的SAN网络架构,具有很好的稳定性, 能为前端各应用提供可靠的数据存储平台,并且整个SAN网络中的部件都配置了双冗余组件,保证任一部件的损坏不会影响整个系统的运行,而关键数据库的数据都通过合理的备份策略,定期备份在了物理磁带上,保证关键数据的绝对安全。
总结下来,整合的基础平台,“云计算”框架的虚拟化设计,和定制化的高速存储,打造出了最稳定、最可靠、最安全、最绿色的运行环境,让政府的大数据应用完美落地。
可见,大数据的解决方案不同于纯粹云计算的解决方案,虽然云计算带来了看上去更便宜的处理能力和存储能力,但对于往往都有相当数量级规模的大数据应用而言,在基础架构上巧妙地整合和部分的集中,反而能更好地解决安全性、可靠性、稳定性和绿色环保的需要。
4 结束语
大数据为云计算大规模与分布式的计算能力提供了应用的空间,解决了传统计算机无法解决的问题,海量的数据需要足够存储来容纳它,快速、低廉、绿色的数据中心将成为这一切的关键。
然而大数据并不意味着整合的、集中式的服务器架构已走向了末路,相反,大数据所带来的规模效应,使得我们越来越需要更加高效可靠的大型整合的混合负载服务器,巧妙地整合和适当的集中,将成为大数据解决方案里重要的一种思想和方向,特别是针对关键行业的核心数据,高安全、高可靠、高稳定将始终是使用者的首要考虑。
参考文献:
[1] 维克托·迈尔-舍尔维恩,肯尼斯·库克耶.大数据时代[M].杭州:浙江人民出版社,2013.
篇8
数据中心专门针对关键性数据运算的全天候不间断运转进行了配置,与传统办公室网络的物理层系统相比要求有所不同。数据中心对系统有以下要求:100%全天候运行;故障安全级的可靠性和连续监测;电源和网络通信冗余以及路径分隔;物理和网络接入的监控和安全性;分区环境控制;有利于移动、添加和变更(MAC)的智能系统。
为了极大程度地满足这些要求,泰科电子开发了针对这种特殊应用的布线系统 ――这种系统专门为数据中心和存储区网络设计。对于双绞线和光纤两种媒质,泰科电子采用了工厂端接的即插即用(Plug & Go)系统。系统包括铜缆布线的MRJ21解决方案和光纤布线的MPO解决方案。同时提供提高系统安全性能、线缆密度和降低能耗的专用产品。
MPO解决方案MPO布线系统是各种光纤应用的完美选择。模块化的部件是快速部署、简捷安装、提高投资效益和网络灵活性的关键。预端接的干线电缆、模块插盒和电缆组件是完整网络所需的基本模块化部件。
MRJ-21解决方案MRJ-21系统是一个高密度、高性能的模块化系统。泰科电子的这种解决方案可在一个全面支持PoE的高密度包中提供数个千兆以太网端口。24对布线和连接器方案支持任何即插即用环境,包括数据中心。MRJ-21连接电缆、模块插盒和电缆组件是这个模块化布线系统的基本部件。
提升物理安全性能
无论是军用设施、数据中心机房、金融机构还是本地安全网络,数据保护和隔离都是一个非常重要的任务。因为安全原因,异地服务器空间非常紧张,许多公司在一个位置为多家客户提供服务,客户数据之间的距离非常接近。通过多色解决方案,技术人员可以非常直观地查看与各插头相对应的插口或适配口(以及不相对应的插口或适配口)。因此,简单的色码区分客户,大大地降低了风险。泰科电子的铜缆和光纤系统包括一个独特的选择系统,并带有相应标识,以便识别色码(每个彩色连接器仅可安装在相应的插口内)。 光纤解决方案可选择采用传统的直通式连接器或MPO盒式连接系统。这些系统能始终确保100%的准确服务连通性,为数据中心操作人员带来以下优点:
• 对一个数据中心内的多个用户或服务进行了物理和视觉隔离;
• 易于分派服务;
• 排除出错可能。
增加接线密度
降低耗电量
为了满足各组织想在更小的数据中心环境空间内提供更多性能,同时达到低耗电量目标的需求,安普布线为这些环境专门开发了集中式产品系列。该系列产品可在降低耗电量的同时,达到保证高密度性能、无缝移植及用户灵活性的设计目标。产品具有以下优点:
• 机架和活动地板内气流更加通畅;
• 低耗电量;
• 允许存在高性价比的低温和高温分区。
采用智能布线方式提高空间和空气流通性能,可以将冷却重点放在需要高散热量的区域,而不必浪费在冷却传统的无源电缆系统上。采用预端接系统,使系统能够在数分钟内完成添加、移动和更改操作,提高系统的灵活性。
与传统的布线解决方案相比,安普布线高密度接线系统,具备更多的优点,其中包括:
• 最高可节约20%的占位面积;
• 维护时间缩短10%至20%;
篇9
企业用户访问云端数据须认证身份
对于将数据存储到云端的企业来说,有效的认证身份也可以防范数据被盗的风险,企业用户与云服务提供商可以指定用户认证系统,这样就可以确保只有企业级的用户进行了有效的身份认证之后才会访问云端数据。这样就能屏蔽非公司人员的窃取信息行为。除了进行有效的身份认证,企业用户也有必要与云服务提供商建立有效的监控机制,对云端数据进行实时监控。
针对企业自身特点选择个性化云服务
企业在决定将数据迁移至云端的时候,应该充分与公司的需求有效切合,是否需要将所有的数据放入云端,针对私有云和共有云的性质不同,可以选择内部搭建或者是数据共享模式,从而来指定个性化云服务。企业现在可以与多家云服务厂商进行沟通,在进行有效的评估后,选择切合企业内部要求的云服务厂商,针对企业来定制个性化云服务。在参考的过程中可以对云服务商的服务中断率及解决问题的间隔时间和服务反馈的优劣程度进行横向评估。
企业与云服务商拟定灾难后备方案
企业在选定了合作的适合的云服务厂商之后,需要与云服务厂商进行合作沟通,同时对可能出现的硬件或者外部攻击入侵和内容文档出错等一系列问题进行沟通,并针对预警灾难来指定出一套有效的解决方案。
篇10
云计算技术蓬勃发展,成为全球热点话题和投资热点,云计算高能效、高灵活、低成本、低功耗等优势得到众多企业的重视和青睐,能助力企业发展,实现业务创新。在此背景下,华为在本次GITEX展上特别展示了领先的云计算技术以及在各行业的应用案例。重点展出的产品包括华为最新的数据中心解决方案;同时,也将推出基于Smart Matrix架构的最新HVS高端存储系统。
针对本次参展,华为中东区企业业务部副总裁董武表示:“GITEX为我们提供了一个平台,全面展示最新产品和解决方案,让我们有机会与来自全球不同国家的客户分享最佳实践,进一步巩固与合作伙伴及客户之间的紧密关系。为此,我们将在展会中举办并积极参与各种活动,与合作伙伴和客户深入交流。”
华为公司将在 GITEX上向中东客户介绍其CloudEngine系列交换机产品。CloudEngine 12800系列核心交换机是业界性能最高的下一代数据中心交换机,整机最大支持48Tbps交换容量,三倍于业界水平;支持每槽位2Tbps的带宽(可平滑升级至4Tbps),为业界水平的四倍。CloudEngine 12800系列核心交换机和CloudEngine 5800/6800系列柜顶式交换机支持高密度的100GE、40GE、10GE和GE接口,并全面支持网络虚拟化,支持计算、存储、网络的融合等特性,可满足未来10年4代服务器发展对网络的诉求,帮助客户构筑长期稳定的数据中心网络基础架构。
不仅如此,华为还将在GITEX这样一个大平台上展示华为企业网络产品的综合实力,包括拥有21us业界最低跨框时延的S9700 T比特核心路由交换机、业界首款企业级802.11ac标准的WLAN AP样机、拥有领先业界2倍性能的AR G3企业路由器、NE系列高端业务路由器NE40E和面向全球推出的企业中端路由器新品NE20E—S,同时还有在传送网和接入网的优势产品,包括支持最大5个站点多方向数据汇聚传输的微波产品RTN950、将OTN技术扩展到城域接入层的Mini OTN系统OSN 1800、具备分组特性的Hybrid MSTP产品OSN 550、超过11年商用经验的xPON解决方案产品SmartAX MA5616等。
10月17日下午,华为将参加主办方举办的云论坛。客户将与来宾分享近期部署的虚拟桌面云解决方案如何改变阿联酋大学的运作。华为也将和与会者共同探讨云计算给行业带来的改变,以及如何在降低能源消耗方面发挥作用。(黄哲)
技压群雄
技嘉新一代A85X系列主板
10月16日,技嘉科技于北京香格里拉酒店大宴会厅召开“极致超频,技压群雄”A85X系列主板会,与AMD共同掀起了第二代APU平台的神秘面纱。千呼万唤始出来的技嘉A85X系列主板,点燃了与会者的无限激情。
在会场上,巨大的技嘉产品历程回顾和随处可见蓝色的荧光表盘给与会者们留下了深刻的印象。在过去十数年里,技嘉为用户带来许多令人激动的产品,而在这一天,技嘉新的产品又将于这里起航。
会伊始,技嘉科技主板事业群中国区副总经理罗经翔先生和AMD全球资深副总裁暨大中华区总裁邓元鋆先生共同启动了象征着技嘉A85X系列主板极致性能的引擎。
在一阵强烈的引擎声中,在大厅正前方的屏幕上,呈现出一个蓝色的荧光表。伴随着引擎声,盘上指针不断冲击着更高的频率,象征着技嘉A85X系列主板出色的超频能力。
随后一组游戏和应用的快切画面,向众人展示了技嘉A85X系列主板将带来的极速体验。
当快切画面结束,引擎声绝尘而去,“极致超频,技压群雄”的主题和技嘉A85X系列产品呈现在众人面前。
这次会新的技嘉F2A85X—UP4主板基于超耐久五代技术,在前代超耐久技术上进行了大幅度的加强,不仅有2倍铜PCB、防潮纤维电路板、每个USB接口单保险芯片保护、3D UEFI图形化DualBIOS等经典设计,更带来了强劲的Ultra Power供电设计,由超能高效供电芯片、超性能铁素体电感、超低ESR固态电容等用料组成,这一设计在业内可谓大放异彩,曾荣获国外著名媒体Tom’s hardware最佳奖项。
会的抽奖环节也是扣人心弦,来自现场的7位媒体朋友都拿到了丰富的奖品。
对主板,很多用户最为关心的是它的超频性能,它标志着一款主板的品质。拥有超耐久五代技术的技嘉F2A85X—UP4主板在超频性能上自然极为出众。
在会的现场,余孟遥、HiCookie两位超频高手共同上演了超频表演。在媒体的注视下,两人将技嘉F2A85X—UP4主板超出了接近世界纪录的7.14GHz,另外还取得了3Dmark Vantage P10117分的新纪录,引起阵阵惊叹。
本次会上,极速的主题给用户留下了深刻的印象。可以预见,在未来技嘉科技的A85X系列主板,将会为AMD第二代APU平台带来更多的市场活力。
(于晓煜)
希捷扩展其业界最广泛的企业级产品组合
希捷科技公司日前宣布推出三款全新的企业级硬盘,这些产品将会专为传统的数据中心以及新兴的云基础设施而优化。
希捷企业价值硬盘非常适用于云端海量数据存储,它通过低功率的配置提供高达3TB的存储容量,可经济有效地存储不断增长的非结构化数据,这样的数据一般都存储在云端。公司同时还推出的两款下一代高可靠性硬盘分别为:希捷企业容量3.5英寸硬盘,它可提供业界最为广泛的安全数据存储容量(1、2、3和4TB),适合数据中心使用;以及希捷企业性能10K硬盘,它可提供同类最佳的性能和内置的安全性,能够实现优化的存储效率和数据保护。
希捷市场营销副总裁Scott Horn表示:“现在生产存储系统,无论是为了云应用还是为了企业数据中心,都必须通过尽可能小的物理尺寸提供尽可能大的容量,将运行成本降到最低,同时保证长期的可扩展性。我们全新的企业硬盘产品符合这种要求,不仅提供最高的容量功率比,而且能够保证一致的性能和较高的可靠性,非常适用于各种数据中心环境。”
(于晓煜)
2012金钻奖评选启动
将举办网易金融论坛
金秋十月,网易财经在延续以往成功经验的基础上,再度启动2012年网易金钻奖评选盛典。金钻奖是网易财经倾力打造的金融企业年度评选活动,通过专家顾问团评审和网络投票相结合的方式评选年度最具商业价值的金融品牌,至今已成功举办三届。今年评选的网络投票环节于10月15日正式启动,于11月15日截止。与此同时,专家顾问团评审同时展开,最终以网络投票(60%权重)和专家意见(40%权重)相结合的方式确定获奖企业,并于11月20日揭晓最终结果。