陈明
2012年,由于中国传统节日中秋节“邂逅”国庆节,人们度过了“加长版黄金周”。这个长假,高速公路首次对小型客车免费放行,扎堆出游导致的各类连锁反应让无数游人添了一段毕生难忘的人生经历;这个长假,无锡老人晒出了54年的国庆账单,“你幸福吗”成为热门话题,上亿网友在微博上议论吐槽,有欢欣,有埋怨,有无奈,也有思考。
与多年前相比,如今的人们在黄金周临近之际都在担心什么:网上订购的“吃货礼包”是否会因购物高峰而遭遇物流延迟?周密制定的出行计划是否会因人流过大而寸步难行?风景秀美的景点游区是否会因为天气不测而乌云密布?
而担忧之余,人们也发现,如今无论是气象机构还是交管部门,都已能够从技术角度快速洞察到突发状况可能给城市所带来的困扰,为解决城市运行的种种顽症提供了科学的依据和可能。在一个“智慧的城市”,人们可以通过各种渠道获取各种有价值的信息,这些信息发布在互联网、电视和广播等快捷有效的地方供人参考。同时,各大交通部门、电商、电信运营商等纷纷针对长假做出有效方案保障人们的衣食住行。
细心的人们会发现,安度黄金周所涉及的方方面面,都离不开统计、数据、分析、预警,而近年来突飞猛进的“云计算”、“大数据”、“无线通讯”等IT技术,正是其背后的有力支撑。
出行看天气,超算助力气象预测
为适应大城市公众和城市运行服务需求,中国气象局2012年启动了针对大城市的精细化预报技术流程建设工作,以逐步积累精细化的气象服务经验,最终带动全国精细化预报服务能力的提升。自2012年5月1日起,直辖市、省会城市和计划单列市24小时天气预报不再以12小时为“分水岭”,而是具体细分为上午、下午、前半夜和后半夜四个时段。
大城市逐6小时精细化气象要素预报业务,按照网格化、数字化、定量化、精细化的思路,在常规气象要素精细化预报的基础上,逐步把精细化天气预报与天气对城市运行和社会活动可能带来的重大影响相结合,开展与城市交通、水文、电力、旅游、会展等行业相关的影响预报,提高气象服务针对性、有效性,推进传统天气预报向天气影响预报及气象灾害预报延伸。
其实,天气预报的精确预测并没有人们想象的那么容易。预报时需要同时处理来自世界各地、不同地域的海量数据,这对网络传输能力和计算处理能力提出了超乎想象的高要求。而要想做到提前预知突发天气情况,更是要有大量的历史数据存储、并且在新数据积累后能够进行即时分析。为了应对这些挑战,只有不断借助高性能计算技术。
首先,来看看全球最尖端的气象与人类活动应用场景是怎样的。以美国国家航空航天局(简称NASA)气候模拟中心举例:名为Discover的计算集群集成的超级计算、可视化和数据管理技术可以提供大约 400 Teraflops(每秒百万亿次浮点运算)的计算能力,曾为NASA承担了多年的气候变化及相关现象研究工作。
但Discover 是完全基于非虚拟化的集群系统,增加计算容量总是需要添加额外的物理服务器。扩展所导致的成本和复杂性越来越高,还会导致在开展长时间作业过程中出现运算瓶颈等问题。面对这一局面,英特尔公司凭借其对高性能计算向“云计算”迁移的趋势洞察,找到了解决问题的有效途径,其支持NASA将高性能计算工作负载向采用以太网结构的开放式基础设施进行迁移,以求充分利用云计算和基于以太网的融合网络的可扩展性与灵活性等优势。
外出自由行,智能监控确保平安
尽管“平安城市”概念已被提出多时,但如何运用先进的信息与无线通讯技术构建一个强大的安防网路来保证整个城市安全,仍是人们关注的热点。特别是在黄金周时段,在人们享受假期惬意的同时,一些不安定因素亦威胁着城市安全,此时除了加班加点的公安干警之外,遍布城市各个角落的智能监控系统也在默默保卫着人们的生命财产安全。
在国内安防市场具有多年经验的海康威视副总裁兼首席技术官蒋海青曾表示:“‘平安城市应用是视频监控领域规模最大、业务最复杂的系统,涉及治安监控、指挥通信、侦查破案、规范执法、社会服务等多个分区领域。此外‘平安城市视频监控采集到的海量数据也和其他种类的大数据一样,只有进行了及时传输和智能高效的处理才更具价值。”
可见如何进行数据传输及海量数据信息存储分析是“平安城市”建设的关键。海康威视选择了英特尔大数据平台,融合可以灵活按需调配IT资源对应用服务进行支持的开放架构云计算技术,海康威视打造了视频智能云计算方案,并应用于诸多城市的智能交通监控领域。
它可以掌控城市交通摄像头覆盖区域中任一车辆的行驶状态、运行轨迹,分析出其是否违章行为或有潜在犯罪可能性。未来还会应用于小微企业或个人用户,例如将一些小店铺、连锁超市的视频监控通过云服务的方式整合起来,通过分析其视频监控数据提供潜在风险的预警。
此类实时数据的智能化分析,可以从大量非结构化的视频数据中提取出有价值的信息,将视频监控的应用范围从传统的“事后查看为主”,慢慢转变为“事前预警”,为公安、交通等各行各业提供有效的业务信息支持,将一切潜在的犯罪可能性提前通过视频智能云的分析探测出来,并及时化解。
医疗无间断,关键业务可靠
每年的国庆黄金周之前,政府相关部门会针对有外出旅行计划的市民进行有针对性的提醒,特别是对开车自驾游、跨地区的市民进行有关游览、游乐、住宿、逃生、乃至餐饮安全等方面的常识教育。尽管如此,万一不慎患病或者发生意外,仍不免要及时到医院就诊,这也是考验假期之中医院业务系统运营的时期,而系统关键业务的运转是否正常是解决各种突发事件和处理紧急情况的重要因素。
一般来说,医院最关键的业务应用是围绕其自身医疗资源的管理分配以及电子病历数据的管理和处理展开的,用“人命关天”来形容这些应用及相关数据毫不过分。如果医院的关键业务应用及相关数据出现了丝毫的差错或其承载平台出现了运行中断,小则能影响医院的运营效率,带来医患矛盾,大则可能干扰医生的诊断和治疗,危及病人的健康甚至是生命。这也是为何很多医院和相关的医疗行业用户都非常看重承载其关键业务的IT基础设施可靠性、可用性和可维护性(RAS)的原因。
以上海曙光医院为例,为了确保向就诊者提供稳定的服务、保障医院的整体运行效率,医院选择了将信息系统从RISC架构向开放架构“转型”,通过更换服务器,不但实现了应用性能的大幅度提升,而且在可靠性方面也获得了理想的效果,在关键业务和大规模数据运算方面确保了安全性及强大的可扩展性。
海淘趣生活,买卖双方双赢
随着国庆黄金周的到来,实体店面和电商之间的争夺大战如火如荼,户外、广播、电视等媒体中充斥着商家的广告,仅仅是各大电商之间已开始了新一轮的促销热潮。从表面现象看,追求低价似乎是电商的头等要事,但事实上,只有不断提升用户的购物体验才能长久拉动消费,而这背后最需要的就是IT技术的支撑。
以国内最大的综合性电商淘宝网为例,其很早就意识到要不断提升用户的购物体验,一定要让人们在购物时迅速看到全面的图片细节、用户评论、购买记录等丰富的商品信息。阿里集团技术品牌部高级研究员兼副总裁章文嵩表示,使用基于英特尔凌动处理器定制的低功耗服务器搭建的CDN系统,能很好地满足保证用户购物体验的需求。
一般来说,互联网的应用多数是数据密集型,I/O吞吐量大,相比较CPU却不会太忙。这种情况下采用低功耗CPU会是比较好的选择,这需要寻找区别于以往传统的、更低功耗的处理器和服务器方案。淘宝于2009年底正式启动了绿色低功耗服务器定制项目,从2010年8月起,选择定制基于凌动处理器D525的低功耗服务器,并于2011年6月开始在淘宝实施规模化部署。
目前,淘宝一共部署了十多个低功耗CDN节点机群,共部署了约800台凌动低功耗服务器。淘宝杭州华数机房里部署着低功耗服务器所搭建的CDN节点机群。一个2U空间里放着8台凌动低功耗服务器,共享一个机箱,总体功耗200瓦。而主要负责调度的普通服务器,1U空间只能放1台服务器,功耗为150W。相比之下,低功耗服务器在低功耗高密度码放方面的优势十分明显。这样的服务器部署和CDN系统搭建,让淘宝在2011年“双11”和“双12”购物节时承受了全网近90%以上的流量,并安然通过考验,2012年的电商大战和国庆黄金周购物热潮中,相比其他因系统运维焦头烂额的电商企业,淘宝的表现无疑称得上“淡定”。
刷屏很流畅,快捷响应用户需求
国庆黄金周,不论是游山玩水、还是休闲在家,人们都习惯了不时通过各类无线终端寻找WiFi热点,刷下微博,分享个人心情动态不亦乐乎,而作为眼下最主流的社交平台,新浪微博2012年上半年的注册用户即已突破3亿大关。
直观、便捷的传播方式让很多人养成了用微博早晚写字的习惯,但面对逾3亿的用户基数群,新浪微博在用户请求密集的高峰期、每秒钟会接受来自超过100万次的程序请求,这对后台运行服务器的高性能和高可靠性均提出很高要求。业务的快速增长同时带来的还有对服务器采购需求的大幅增加,这造成了高昂的采购和维护费用。
面对上述的需求与问题,新浪微博采用了具有开放性、稳定性和可扩展性的英特尔架构服务器,同时针对具有性能优势的英特尔至强平台构建起开源的分布式计算Hadoop架构。该解决方案在显著提升响应速度、缩短数据处理周期的同时,还能增强系统的稳定性。同时因为该处理器产品在计算能力方面有大幅提高,使得单机处理能力有提升,所以网站可以从整体上减少服务器采购数量,有效降低了前期采购成本和后期维护费用。在该平台保障下,用户们在假期使用微博时,无需因发送信息排列而等待,而是顺畅的刷屏、转发、评论及@好友。
流量查询快,大数据还3G上网一笔明白账
随着第三代移动通信技术(3G)的迅猛发展,中国移动互联网用户数量突飞猛进。而在黄金周期间,智能无线终端扮演了用户与外界沟通的最便捷终端。
然而,在3G网络和智能手机普及、相关业务呈爆炸性增长的同时,用户对于流量、上网记录的投诉也以不可控制的速度激增,其中很大一部分原因在于消费者不能在查询自己3G流量账单时得到及时、有效的反馈。
电信运营商如果想有效消除用户对流量使用的疑虑,提供便捷、透明的上网记录查询系统成为了眼下唯一的出路。但为客户提供上网记录查询并非易事。这个查询系统需要提供海量级的数据应用。
2011年统计数字显示,我国移动互联网用户达3.88亿,而同期国内某电信运营商月移动上网记录也增至上万亿条之多,且每半年时间其上网记录数量都会成倍递增。在这样的情况下,传统的关系数据库根本无法应对上网记录的存储、管理和处理重任,有运营商已进行过测试:当传统关系型数据库承载百亿条数据的时候,就已开始有心无力,一个查询请求有可能几个小时都不能返回结果。
为了化解上述难题,国内某3G电信运营商近期通过与英特尔合作,采用了一套基于英特尔架构的解决方案。这套解决方案的核心硬件和软件平台分别是基于英特尔至强处理器的服务器,以及英特尔Hadoop发行版。前者不仅性能在主流服务器处于领先地位,而且还在可扩展性上拥有独到的优势。后者则可以直接利用这一优势,为大数据提供分布式、横向可扩展的数据组织与管理功能,并将应用负载分散到硬件系统的每个节点上。
最终,通过配备高存储容量至强服务器,以及Hadoop在软件层面的支持,该运营商成功构建了移动用户上网记录查询与分析支持系统,使得相关记录检索速度达到了秒级。
在假期中,跨国的线上互动或视频浏览,经常会造成3G流量的超额使用。有了这样的查询系统,用户只需在用户界面中输入号码后,瞬间就可以得到每天的流量记录,详细的网站地址,在什么位置上的网等详细信息,随时消除顾虑、掌控3G流量使用情况。
上述领域也许并不能完全覆盖国庆假期相关的方面面面,但人们已不难看出“云计算”、“大数据”与无线技术的革新发展,其已逐渐在人们日常生活中扮演举足轻重的角色,并切实帮助人们解决着实际问题、提高生活品质。