张翼
大数据与云计算在广电行业中的应用
张翼
(国家广播电视总局二九三台,河南 郑州 450000)
2007年,中国提出了云计算概念并开始发展。云计算技术问世后受到了各个行业的广泛关注,改变了行业发展趋势。为了加快广电行业的发展速度,如何高效使用云计算和大数据技术成为迫在眉睫的问题。分别叙述了云计算和大数据技术的技术原理、技术体系,探究了云计算和大数据技术应用于广电行业的策略。
云计算;大数据技术;广电行业;应用策略
2007年,中国首次出现云计算概念。云计算技术一经问世,迅速引起了各个行业的重点关注。为了加快广电行业的发展速度,如何发展云计算、如何应用云计算,成为广大业内专家重点关注的问题。国内云计算公司基于云计算技术相继提出了媒体云、云存储、云转码等云计算项目,但实际应用的云计算项目数量严重不足。中国云计算项目没有形成规模,也没有形成行业生态链。发展云计算技术,有利于广电行业进一步发展。云计算和大数据技术如何应用于广电行业成为业内专家急需解决的问题。
《华尔街日报》报道,大数据、智能化生产、无线网络革命是三大技术变革,是未来繁荣的引领者。麦肯锡公司认为,大数据是决定企业创新力、竞争力、生产力的重要技术,是任何企业都不可或缺的生产资料。世界经济论坛提出,大数据是一种新型财富,其价值可以和石油媲美。目前,大数据技术已经广泛应用于经济发展预测等方向。例如,谷歌住房搜索可以使用大数据预测住房市场发展趋势,预测结果的准确性高于不动产经济学家的预测结果。数据精确性的内容是数据可信度高、真伪性易辨识、数据来源可靠、数据源信誉高、数据内容有效、数据可审计。大数据的内容包含了现实世界的各种信息,研究大数据的本质是收集网络数据、提取数据内容、预测现实时间。数据的完整性、真实性,决定了决策的科学性和准确性。数据是决策的基础,是决策的依据。从数据源的角度来说,大部分数据的来源是个体思想和实时记录,代表了个体的真实意识。大数据的真实性远高于传统数据。庞大的数据总量淹没了少量的失真数据。从数据量的角度来说,大数据记录了现实现象的全部信息,传统数据仅记录现实现象的部分信息。大数据技术成为发达国家抢占技术高地,增强国家竞争力的重要手段。数据化取代数字化,成为未来行业的发展潮流。
云计算技术诞生于第三次技术革命,大数据为信息时代带来了新的经济增长点。在信息时代,掌握大数据和云计算技术,等于掌握了行业发展的金钥匙。为了进一步发展,广电行业必须紧跟时代潮流,大力发展信息技术,实现新技术运用和新技术创新。
虚拟化技术、海量数据存储技术、并行编程框架技术,共同组成了云计算技术。虚拟化技术主要应用于计算机资源调配,可以构建动态化框架,集中管理、调控信息资源,提高资源利用率,消除物理硬件对信息资源的影响。增强系统弹性、降低成本、改进服务、提高资源利用率,是云计算技术的重要作用。服务器虚拟化、服务器整合,是云计算技术的两种类型。服务器虚拟化是将一个大型服务器分割为多个小型独立服务器,分别服务不同的用户。服务器整合是将多个小型服务器整合为一个大型服务器,提高服务器性能,解决小型服务器无法解决的问题。这两种技术都实现了服务器管理的统一化和资源配置最优化,对广电行业意义重大。
海量数据存储技术是使用可开展的存储结构,以数据库和分布式文件的形式存储大量数据信息。这种存储技术使用多台储存器,降低每台储存器的负载,提高系统性能和存储效率。海量数据存储技术对广电行业的意义是,优化广电网络数据扩展。
并行编程框架技术的研究目标是提高资源利用率,降低用户使用难度,增强编程框架的便捷性。使用并行编程框架搭建的服务器可以处理更复杂的编程任务,并将过程透明化,便于用户使用和优化。系统可以自动分配处理任务,将大型任务分解成多个小型任务,提高处理效率,缩短处理时间,降低处理难度。
大数据技术是一种信息获取、信息输出、信息组合技术,可以实现数据高效组合和高效输出。大数据发展迅速的原因是,大数据技术升级了数据集的规格,由TB升级至PB级,数据容量更大。大数据技术扩充了数据类别和数据来源,丰富了数据的种类和格式。日志、图片、音频、视频都是大数据常见的数据格式。大数据技术收集了海量数据,这些数据质量参差不齐,导致大数据的价值密度较低。机器必须植入相关技术,才能实现复杂数据处理、数据分析、数据预测等功能。
大数据是数量体量大于1 TB的数据。大数据又称海量数据或巨量数据。国际学术界对大数据体量、小数据体量的定义存在争议,没有产生统一且规范的大数据定义。从数据容量的角度来说,2011年,麦肯锡全球研究所在《大数据:创新、竞争力和生产力的下一个前沿》中提到,大数据是一种数据群,其数据规模超出了传统数据库软件工具的抓取、存储、管理、分析等数据处理能力的范围。维基百科对大数据的定义是,由科学仪器、传感设备、互联网交易、电子邮件、音频视频软件、网络点击流等多种数据源生成的大体量数据。大规模、多元化、高复杂度、分布式是大数据的主要特点。国际数据公司对大数据的定义是,数据规模海量、数据流转快速、数据体系不固定、数据类型多样、数据价值巨大的数据。从数据内容的角度来说,全球数据集成软件提供商Information提出,大数据是大交易数据、大交互数据、大数据处理的总称。网络存储公司NepAPP提出,大数据是由分析、宽带、内容三种要素组成的数据类型。从数据价值的角度来说,Gartner Group认为,大数据是一种具有巨大信息价值的数据类型。大数据的处理方式显著增强了市场的决策力、洞察力。中国学者邬贺铨认为,大数据是一种数据集,包含了事物发展的客观规律。从数据技术的角度来说,大数据技术是大数据的核心。大数据是数据采集、数据分析、数据整合、数据控制、数据产业的总称。
数据是信息的载体。信息传递伴随着人类文明发展。科技进步改变了信息的承载方式。信息的载体由原始的兽骨、竹片转变为现代的碟片、U盘和云存储。数据的承载方式取决于信息的载体。数据、信息、知识、智慧是四种不同的概念。数据是信息的载体,信息是数据的表现形式,知识是人类智力活动的产物,智慧是人类用于预测未来的知识储备。数据分析和技术挖掘是人类获取知识、产生智慧的前提条件。数据是信息的来源,是知识的雏形,是智慧的基础。智慧化是信息化的未来发展方向。大数据具有海量的数据价值。挖掘数据、分析数据,是人类发展信息化和智慧化的重要途径。大数据已经成为现代信息技术的核心,是云计算、物联网、移动物联网等信息技术的发展基础。人类社会管理共经历了三个阶段,包括初期阶段、半成熟阶段和成熟阶段,不同的发展阶段对应不同的资源消耗和智慧获取。初期阶段,人类必须花费大量的资源获取少量的智慧成果;半成熟阶段,人类逐渐平衡了资源消耗和智慧获取的比例;成熟阶段,人类可以花费少量资源获取大量智慧成果。大数据是人类社会管理成熟期的产物,是人类步入智慧管理阶段的标志。
进入信息时代后,社会发展速度显著加快,大数据技术日益成熟,并广泛应用于各个领域。信息时代为广电行业带来了新的发展机遇和挑战。广电行业可以利用大数据技术迅速完成产业转型,由传统网络运营商转变为数据运营商,使用互联网为广大用户提供数据网络运营服务。从数据处理的角度来说,数据收集、数据处理是大数据技术的两大重要环节。每个环节都和网络基础设施息息相关。广电行业可以通过网络为网络技术处设施建设和维护提供网络支持。网络的覆盖范围广、可靠性高,可以显著提高广电行业的运营效率。目前,中国广电行业的技术设施已经满足大数据运营商的发展需要,可以着重发展网络建设和网络维护。通过研究数据源头可以发现,广电网络前端可以接收电台资源信息,网络终端和各个家庭的智能终端相连。广电网络可以接收各种数据,内容丰富、总量庞大、类型多样。
近几年,构建智慧型城市是大中型城市迫在眉睫的问题。如何构建、如何管理、如何利用,是建设智慧型城市的突出问题。城市运行管理、居民服务、信息化,都是智慧型城市的基础支撑。为了保证智慧型城市全面普及,中国必须大力开展基础设施建设,提升信息通信质量,扩大通信覆盖范围,提高信息传递效率。在建立过程中,国家必须制订相关准则,避免偏离建设智慧型城市的初衷。广电网络转型必须遵循共同原则,规划和利用现有网络资源,尽量减少新建网络资源,降低基础设施建设投入,提高资源利用率。
综上所述,中国现阶段社会发展离不开云计算和大数据技术,将这两种技术应用于广电行业,可以实现行业转型。广电网络可以由传统网络运营商转变为新型数据运营商,为智慧城市建设奠定基础。
TN948.3
A
10.15913/j.cnki.kjycx.2020.12.070
2095-6835(2020)12-0158-02
张翼,男,河南新郑人,本科学历,研判员,工程师,研究方向为新媒体监管。
〔编辑:王霞〕