数据库技术信息与电脑China Computer&Communication2018年第12期大数据环境下的信息处理技术分析杨 燕（天讯瑞达通信技术有限公司，广东 广州 510623）摘 要：随着互联网技术的普及和网络信息技术的快速发展，大数据的应用在不断地增加，各种“云”服务也是大数据背景下的一种具体的应用。面对快速发展的大数据环境，计算机信息处理技术迎来了新一轮的机遇与挑战，笔者就以大数据的概念为出发点，结合大数据计算机信息处理技术，简要论述现阶段的信息技术发展现状与挑战。关键词：大数据；信息处理技术；虚拟化技术中图分类号：TP391.1 文献标识码：A 文章编号：1003-9767（2018）12-156-02Analysis of Information Processing Technology in Big Data EnvironmentYang YanAbstract: With the popularization of Internet technology and the rapid development of network information technology, the (Tisson Regaltec Communications Tech. Co., Ltd., Guangzhou Guangdong 510623, China)application of big data is constantly increasing, and all kinds of \"cloud\" services are also a specific application under the background of big data. Facing the rapid development of the large data environment, the computer information processing technology ushered in a new round of opportunities and challenges. The author take the concept of big data as the starting point, combined with the big information technology.data processing technology of computer information, and briefly discusses the present situation and challenges of the development of Key words: big data; information processing technology; virtualization technology在2012年的“大数据、移动、社交媒体：改变商业的务，省去了中间人工信息收集的步骤。通过互联网大数据服创新力量”交流会上微软全球副总裁张亚勤就说过“大数据务，用户可以随时随地对自己上传至“云”端的信息实现查阅、不是忽悠，它确实是一个真事，是产业大的变革。对IT产业、下载、删除等操作。简单来说，大数据是一种提供超大规模经济都是一次重要的机遇”。由此可见，基于现代互联网技的网络资源共享服务的概括[2]。术的大数据时代已在飞速发展，而大数据信息处理技术是在计算机处理技术的平台下一种更加先进的超级计算机技术。２ 大数据信息处理核心技术随着大数据的发展成熟，各大IT企业都纷纷开始提供大数据大数据的应用核心主要体现在可以按照客户群体的使用需环境下的各种服务，并不断创新大数据的各种服务。求进行准确的网络资源分配上[3]。在网络资源分配之前需要实现超级资源云服务的系统构建与存储功能，另外，还需要解决１ 大数据概念好基于互联网技术的网络资源自动化分配问题。所以对于大数首先大数据并不是一种具体化的某一行业领域的特定据信息分析工作不但要解决大数据体系结构研究的问题，同时，概念，目前对于大数据有各种不同的定义，但是就大数据自还应兼顾大数据虚拟化技术、基于互联网的云储存技术以及云身性质与所应用的行业领域来看，它是一种基于互联网技术计算技术等。在大数据信息处理中主要应用以下几项技术。的新型商业计算模式[1]。相比传统形式的网络信息计算服务2.1 虚拟化技术来说，大数据具有虚拟化、超大规模、利用率高、运营成本虚拟化技术一般是指基于互联网虚拟平台的资源配置低等显著的特点。从客户群体角度来说，大数据是一种能够以及数据存储和管理工作。虚拟化技术在整个大数据信息计提供无限网络计算资源的共享“云”服务，大数据客户群体算中占有重要的基础性地位，基于虚拟化技术的大数据信息只需要支付相关的资源使用费就可以获取相关行业的信息服处理技术一方面可以对搜集来的网络资源信息进行合理的配作者简介：杨燕（1982-），女，内蒙古包头人，本科。研究方向：信息技术。— １５６ —信息与电脑2018年第12期China Computer&Communication数据库技术置与整理，对其中有用的数据信息进行存储，另一方面还可和扶持下，云端安全技术的发展也更加迅速，为大数据信息以利用信息处理技术对大数据处理任务进行优化与科学的调的网络安全工作提供了有力的保障。度，从而实现信息处理技术计算、处理大数据能力的提升。由此可见，虚拟化技术对于大数据环境下的信息处理技术来３ 大数据环境下的信息处理技术现状及挑战说具有至关重要的作用。3.1 大数据信息处理技术现状2.2 云端储存技术目前，我国已正式进入信息高速发展的时代，现代化的云端储存技术的实质是将多个高性能储存设备通过类似信息技术已普遍应用于人们生活中的交通、医疗、教育等各网络计算功能和集群功能共同组合起来为客户群体提供数据个方面，各种服务行业所带来的大量数据信息都必须经过科储存和业务访问功能的一个综合性虚拟系统。在大数据系统中学的计算、分类、存储，在海量的数据信息计算储存中高效云端储存技术一直处于数据储存的核心位置，对大数据集的信的大数据计算技术与信息安全技术是整个大数据信息服务中息分析、整理、储存发挥了决定性的作用。在云端储存技术上，的基础保障。日前，大数据信息处理技术在众多IT行业领域由于大数据系统面向的客户群体庞大，在信息处理服务上需要得到了充分的应用与创新，例如，基于360平台的“安全云同时满足大量客户的信息存储与查询需求，因此，云端储存技计划”与“蓝云”计划等等。术在大数据集信息的分析与处理上具备高吞吐率与高传输率3.2 大数据背景下的信息处理技术所面临的挑战的特点，在数据管理技术方面云端储存也必须能够对大数据集的信息进行高效的管理与配置。由此可见，云端处理技术在整大数据环境下的信息处理技术所面临的挑战主要来自以下个大数据信息处理工作中的作用不可小觑。云端处理技术首先几个方面。首先，就是海量的数据计算储存压力。大数据背景要保证大数据信息处理分析任务顺利完成，就必须对大数据中下的数据信息量是无法用具体数值去衡量的，其背后的海量数所包含的各种数据信息进行统一的阅读、管理，然后进行分品据信息计算、分类、存储是无法通过传统的计算机数据库实现的，类配置，在云端处理技术进行数据分析的过程中其读操作量远这些海量的数据信息必须通过更加科学的数据管理机制进行压远高于数据更新量，云端储存技术的实质就是对海量的大数缩、备份，统一存储管理，这些新型的信息处理方式对于信息据信息进行优化分析处理，并将读取的信息分类储存在云端。技术提出了更高的要求。其次，关键在于客户群体的数据查询其次，在云端处理数据计算中采用分布式的数据储存方式能够服务。新型的计算机信息处理技术不仅要能妥善解决好海量信很好提高计算效率，在数据储存方面云端储存采用了更加高效息的计算、存储问题，同时，还需要满足在海量的数据库中有的列存储模式，为用户的信息读取和查询服务带来了更高的服效查询客户所需信息的需求。传统的计算机信息处理技术存储务效率。云端储存技术的计算读写量在整个大数据信息服务效量是以“GB”计算的，客户在查询时需要大量的时间来完成目率的优化中必不可少。标信息的查询服务，并且查询结果的准确性难以得到有效的保障。最后，所有信息存储查询服务的基础是大数据信息的数据2.3 自动化资源调度技术安全问题。大数据信息所涉及的存储与传输量巨大，在各种数自动化资源调度技术是指在整个大数据信息服务的过据信息传输的过程中保证数据信息不被病毒恶意破坏或者黑客程中利用自动化技术实现对大数据信息资源的合理配置与调的攻击至关重要，这对大数据信息处理技术提出了新的要求。度，以达到进一步方便客户群体使用的目的。通过自动化技４ 结 语术将在云端储存的数据信息进行不同种类的区分、安装和调度，为用户提供更好的查询体验。大数据信息资源不仅涵盖大数据时代不仅为各大网络服务提供商带来了好处，同了所有数据库的资源信息，同时，还包括大数据系统所涉及时，也为人们日常的生活、工作带了极大的便利。大数据产的各类软、硬件资源以及海量网络资源等。业的发展，给人们带来机遇的同时，所带来的弊端与挑战也会逐渐显现，这就需要各大网络信息服务商在实践中不断完2.4 云端安全技术善大数据信息服务，确保大数据所带来的实际作用能够惠及由于海量的数据信息经过分类、整理之后都会在云端储社会大众以及满足国家发展的需要。存，为了做好广大客户群体的信息安全与数据保密工作，云端数据储存的安全技术也必不可少。云端安全技术就是基于参考文献互联息技术的针对云端信息安全保障工作而推出的专项[1]耿冬旭.“大数据”时代背景下计算机信息处理技术保障技术，云端安全技术不仅可以有效对外来信息干扰进行分析[J].网络安全技术与应用,2014(1):19.有效的区分与处理，同时，还可以主动防范黑客的恶意攻击[2]冷鹏.“大数据”时代背景下计算机信息处理技术分行为，并且可以定期对在云端储存的数据信息资源进行病毒析[J].现代商贸工业,2016,37(33):388-3.查杀。随着大数据信息技术的不断完善与成熟，针对网络安[3]李君芳,徐小亚.大数据时代背景下计算机信息处理全工作的专项也在不断地完善，在各种有利的保护技术分析[J].信息与电脑(理论版),2017(2):45-47.— １５７ —
