数据中心建设规划交流 0526

2014年5月27日星期二罗小平数据中心能源领域高级架构师数据中心建设规划交流1专业服务技术和业务范围管理hosting服务管理Cloud服务管理通信服务管理安全服务管理存储服务Layer4–应用实施设计规划运维提升集成测试集成评估基础设施设计IT架构设计网络优化安全评估IT架构实施集成管理实施门户和邮件虚拟桌面商业应用应用开发平台Webhosting平台配置服务Layer3–平台及中间件地板布局电力系统制冷系统布线系统消防系统物理安全Layer1–数据中心基础设施计算存储网络安全和业务连续性Layer2–数据中心IT解决方案云计算系统安全规划IT架构规划服务生命周期整合搬迁和数据迁移灾难恢复和备份数据中心服务概述2提纲2大数据、云计算解决方案3模块化数据中心建设规划1IT及数据中心发展趋势4数据中心基础设施解决方案3新的时代已经开始，如何赢得未来…CIO昀关注大数据和云计算VirtualizationDCConsolidationBigDataCloudComputing102030(%)0ChinaWorldwideGartner：TopITSpendingPrioritiesin2013•信息技术正以前所未有的方式改变着我们的生活，为生活带来极大的便利•企业IT应用已远远落后于个人，CIO需要新的技术进行IT变革，实现更加敏捷的应用，创造更多商业价值4趋势1：大数据激发商业潜能2nd数据平面1st数据平面VideoImagesWebSocialEventsEmailDocs传统数据仓库（DW+DM）（小型机+关系DB+高端存储）…•UPS节省运营成本/年运输路线530万公里汽油65万加仑•Verizon创新业务模式PrecisionMarketInsights为媒体、广告商、零售等提供消费者的流动、消费习惯等信息•TXUEnergy创新营销方案FreeNights“亲，晚上再洗衣服洗碗吧，晚上用电不要钱。”FreeChargesfrom10p.m.to6a.m.非结构化数据、数据流CRM/ERP传统报表分析结构化数据实时营销情绪指数脉络关系客户挽留趋势预测Hadoop集群X86服务器数据挖掘•大数据通过对数据更大的掌控力来创造商业价值，促进IT从支撑系统向业务系统转变5趋势2：云计算推动产业变革部件&终端网络服务云服务IT服务云基础设施硬件云内容云OS-9%$1.7万亿(27%)$2.0万亿(18%)-4%$1.6万亿(25%)$2.3万亿(21%)+13%$3.0万亿(48%)$6.7万亿(61%)电信运营商和互联网公司向IT云服务商转型22012年到2020年，ICT市场的变化Source：Gartner；IDC；Euromonitor设备商品化，价值转移到结合用户体验的内容/服务1•云基础设施成为ICT的核心支撑，企业需要有清晰的云战略6趋势3：IT基础架构更加开放，产业走向融合Amazon,1530Rackspace,440AT&T,376Verizon,262IBM,63VMware,105•互联网公司、电信运营商、IDC服务商、传统IT公司均进入云服务领域•IBM在美国中情局合同的竞争中输给了Amazon，引发产业对互联网技术和传统IT技术的再思考•开源、分布式架构、软件定义架构，是互联网设计的核心理念2012年主要IAAS服务商收入(M$)Google的IT平台核心设计模块化数据中心定制化服务器分布式、开源软件7金融创新大数据华为IT战略：聚焦融合，提供商业敏捷的解决方案...大数据解决方案云计算解决方案数据中心机房基础设施服务器存储网络虚拟化大数据分析数据中心统一管理基础架构的演进政府智慧城市媒资IP全台网运营商混合云敏捷融合•IT和互联网的融合用互联网的开放思维设计产品•计算/存储/网络/软件的融合打破独立产品架构，突破性能瓶颈•数据平面的融合完整生命周期设计，减少数据搬移•大数据的智能化提供商业决策、提升服务水平、提高商业价值•云的弹性按需快速获取资源，缩短业务上线时间8空间不足,电力/制冷问题业务快速变化的云时代数据中心的挑战：能耗高、业务变化快和管理费用攀升Source=April2009ComputingInfrastructureTrends:IDC客户面临的最大挑战：设备增长引起的部署空间、电力/制冷问题业务快速变化的应对电源和制冷成本及管理维护费用逐年大幅飙升9工信部：到2015年末，新建大型云计算数据中心的能耗效率（PUE）值达到1.5以下数据中心趋势：建设高效、低PUE的数据中心PUE=1.08雅虎“鸡窝式”数据中心，纽约洛克港自然风直接冷却极少时间（1%）开启空调=1.215中移动，哈尔滨仓储式数据中心热转轮，全分散直流供电间接自然冷却10数据中心趋势：应对业务快速变化的模块化架构基础设施模块化计算资源模块化网络架构的标准化、模块化虚拟化技术，加速计算资源标准化服务器按台部署、整柜部署万兆端口应用，减少网络层次，实现网络与服务器的标准化匹配UPS系统制冷系统机柜系统配电系统供配电模块DC=3+2室外空调模块数据机房模块装修系统消防系统数据中心模块供电模块室外空调模块消防、装修标准接口模块化部件模块化子系统模块化数据中心UPSBatteryPDUBMSUPSBMS11...…...…数据中心趋势：模块化数据中心已是主流趋势腾讯微模块数据中心华为建造……2005年2006年SUNBlackboxSGIIceCube2007年IBMPMDCHP40’POD思科集装箱UCS2008年2009年2010年2011年谷歌俄勒冈州数据中心微软芝加哥数据中心华为模块化数据中心2012年……12数据中心趋势：大型中高密机房将智能管理带入快速发展期Page12数据中心正走向5kW/R拐点，密度升高带来管理难度、能耗加大，客户期望通过智能管理系统提升管理和能源效率激增的数据中心管理服务需求也大幅提高DCIM重要性行业报告对DCIM市场预测极为乐观，CAGR42%DCD5kW规则-客户关注点的变化Source：451Research,2013运营管理整体策略基础设施升级费用Source：DCD能源需求报告2012关注度功率密度13数据中心技术发展趋势-密封通道、行级制冷、高效UPS将成为主流密封通道,2年行级制冷,2年高效UPS,2年Source：Gartner,2012GartnerHypeCycle（发展规律周期）：14提纲2大数据、云计算解决方案3模块化数据中心建设规划1IT及数据中心发展趋势4数据中心基础设施解决方案15大数据，商业增值通过新的处理模式，发挥大数据价值...云计算基础架构大数据116如何真正发挥大数据的价值？应用、平台、基础设施的多维支撑，才能真正发挥大数据的商业价值•应用：开放合作•平台：跟随开源，商用化增强•基础设施：基于通用，实现优化“大数据是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的，海量、高增长率和多样化的信息资产”——Gartner大数据计算大数据存储AppEngine/API服务封装MapReduce分布式并行处理架构Hbase非关系型数据库HDFS分布式文件系统MPP-DB分布式关系型数据库建模算法中间件面向End用户的应用精准营销、App应用商店、行为分析面向合作的应用增值应用、行业市场的应用面向管理分析的应用BI、CRM、计费、SQM、Campaign17采用开放式大数据平台、保持开放创新，是业界的共同选择•传统大数据平台公司加入ApacheHadoop开源生态系统•开源生态系统继续保持活力，相关创新日趋加速2010Q2，发布InfoSphereBigInsights2011Q4，放弃自研平台，发布HDInsight2011Q2，发布GreenplumHD2011Q2，LexisNexisRiskSolutionsHighPerformanceComputingClusterwillbeofferedasopensourcecodepittingitagainstHadoop.但是为时已晚，HPCC将被迫局限在较小的市场2008Q3，Facebook贡献Hive项目，成为Apache社区正式项目。2013Q2，宣布秋季将会开源Presto，新的高性能数据分析引擎贡献测试套件YCSB，并行计算调度框架YARN贡献高性能SQL查询引擎ImpalaWitharedesignedfullydistributedAPI,HDFSintegrationandawiderangeofnewmachinelearningtoolkits,GraphLabisnowfaster,morescalable,andmorepowerfulthaneverbefore.18以开源为基础，以可持续为目标，客户呼唤企业级大数据平台“我们把大数据应用视作是生命线，一定是采用大数据平台企业版，搞开源软件不是我们的主业。在选合作伙伴的时候，我们一定考虑门当户对，因为强有力的合作伙伴才能保证3~5年的供应、合作安全”——某银行CIO企业级大数据平台安全版本配合配置HadoopHBase日志性能调优基线选择补丁选择采纳社区精华，去除开源Bug•谨慎选择稳定基线版本•评估高版本补丁影响范围评估和回合策略•采用数万个测试用例，确保企业版本稳定性19金融应用场景电信应用场景在开放、合作、贡献宗旨下，为客户提供企业级大数据平台运营商详单查询经营分析、精准营销银行数据全生命周期分析实时明细、精准营销在线征信与风控等大企业Web页面点击行为、系统日志分析大数据管理维护平台建模、算法中间件NativeAPI/SQL/AppEngine服务封装流处理非、半结构化处理大数据基础设施金融等保、远距离容灾、Hbase增强、定制化能力提供、OM能力保证企业通用应用场景20云，随您所需“DC2分布式云数据中心”，云的昀佳解决方案...大数据基础架构云计算221IMS\VAS\EPC电信业务云企业/政府专有云公有云服务IaaS\SaaS分布式云数据中心有效支撑企业的SOA变革标准化硬件计算资源池网络资源池存储资源池•业务与平台解耦，软件与硬件解耦，可扩展性大大增强•企业解放生产力和技术创新的基础，大数据/移动办公/SAAS应用的昀佳承载平台资源不受限IT即服务•可服务性能力提升，服务水平可衡量，企业应用商店创新无止境ERP\CRM\EMAIL软件定义的分布式云数据中心是企业云战略的基石22企业/政府专有云公有云服务电信业务云避免单一厂商捆绑完善的生态链支撑满足NFV的标准化流程跨运营商的Federation互联网架构带来更低成本兼容AWS等公有云接口Vodaplex公有云项目，基于OpenStack，并且支持AWS服务接口DTcloudIMS/EPC，要求必须基于OpenStack的NFV框架国家电网项目，选择基于OpenStack的第二家厂商，避免VMware捆绑基于OpenStack的开放架构是云数据中心的理想选择23•传统IT硬件利旧（池化）效率池化调度业务适配安全可靠高效管理服务能力互联互通•业务感知的弹性扩缩•大规模分布式存储•基于SLA的调度优化•传统办公和生产业务•VDI/SAAS等新业务•QoS保障•企业关键应用的可运营性•DAAS（桌面运营）•行业安全标准合规•企业级高可用性（HA/FT）•电信级可靠性标准•多租户安全隔离•基于SLA的可靠性度量•企业应用快速部署和迁移•多数据中心远程统一管理•兼容VMware•RESTFUL开放接口•兼容NFV标准框架•OpenStack框架•定制化接口适配•企业应用商店和统一门户•行业资源共享•业务快速部署•多租户统一管理•分权分域，用户自助服务•基于SLA的服务等级•计费和运营接口适配•可量化衡量的服务等级关键能力优化，保障开放架构持续可用企业/政府专有云公有云服务电信业务云•云操作系统和管理运营平台是分布式云数据中心的核心模块24精简IT，无忧演进开放的融合架构，支撑未来