大数据技术实验室建设探索和研究

好的建议。而大数据技术是实现这一作用的媒介。基于#匕，本文主要将探索与研究大数据实验室建设的相关内容。

关键词 大数据技术；实验室；建设引言够使用虚拟桌面云终端设计模式，并通过应用专用的云资源服

近年来，随着科学技术的持续快速发展，数据量在不断增 务器和存云调度设备开展设计工作。对于相关的用户来说，可

加，从而促进了大数据技术的进一步发展。在这个大背景下，

以使用部署在实验室的客户端开展实验操作，全部的应用、数

通过建设大数据技术实验室，可以给大数据相关人才的培训提

据等都存储在后台服务器中，而虚拟桌面云终端存放的分发系 供一个良好的实验环境与实验基础条件。因此，本文对大数据

统、更新软件等相关数据都能够被管理工具进行统一管理。同 技术实验室建设的探索和研究具有非常重要的现实意义。时，也能够使用虚拟化平台的管理工具管理虚拟桌面云平台，

1 大数据分析行业背景从而大大减轻了维护人员的工作负担。大数据分析实验室的网在数字信息化时代的背景下，信息量呈现爆炸式增长，

从而给人们提供了诸多方便，而且也使全球的数字信息资源进

步快速增长的阶段。从IDC的相关统计数据中能够得出，截至

2011年，全球的数据量大约为1.82ZB,这表面全球人均所产生 的数据大概是200GB以上的，而且还在以非常快的速度继续增

长。在这个大背景下，各行各业都开始进入数据化发展进程， 不管是学术界、商业界或者是政府部门，都不可避免地步入

“大数据时代”。而且，在2015年3月5日，政府工作报告中

明确提出了 “互联网+”行动计划，促进了移动互联网、云计 算、大数据等和制造业的融合发展，这也给大数据技术的发展 奠定了坚实的基础叫2

大数据技术实验室建设理念大数据技术实验室的设计秉承着“产、学、研、用” 一体

化的思想与模式，不但可以用在公司新产品的设计和研发中，

图1大数据大数据分析实验室的网络部署环境而且也可以用在公司对专业人才的培训过程中，并能够承担一

(2)平台基础功能方案设计。①数据接入。作为底层基

些复杂的计算任务。础支撑性服务，数据接入系统是大数据平台的核心组成部分。

(1 )应用平台。将现有的一些运行效率慢、对算法运行

通过提供各种不同的数据接入工具，在确保信息数据安全的基 条件要求高的应用逐步迁移到大数据平台，提升速度和用户满

础上，数据接入系统能够完成集团生产、ERP等结构化以及非

意度。逐步开展设备在线状态监测算法、经营预测分析等大数 结构化数据的汇聚接入，并且也具备接入气象、网络搜索等互 据应用研究，为集团公司生产运营提供决策服务。联网数据的技术条件，从而也就可以政务大数据平台提供原始

(2) 技术服务平台。使用专业的大数据分析资源建立起

的数据支持。②数据存储系统。数据存储系统是数据分析共享

开放式的大数据分析平台，从而能够有效满足公司在大数据方

的重要支持系统，它需要同时满足对结构化数据以及半结构化

面的基本科研需求。同时，对于公司内部的科研人员、数据分 数据的储存与查询需求。查询操作的高效性与数据储存的安全 析人员等来说，能够在开放的平台环境下进行大数据分析相关

性是数据存储系统的两个重要指标。③数据分析平台。作为大

的科研工作，从而进一步提高公司的科研创新水平。数据平台提供数据深度挖掘与分析服务的重要系统，数据分析系 (3) 科研平台。做为应用方案预研平台，在平台验证成

统主要使用分布式存储与并行计算框架，并联合多种分布式计算

功后，进行实际现场部署；利用与高校、科研院所合作进行高

引擎，对各种结构化、半结构化以及非结构化的数据信息进行迅

级分析、算法研究工作。速的分布式计算，并料共基于关联、聚类、分类、预测等类算法 3

实验室建设方案库以及可视他件、拖拽式的数据挖掘分析开虹具包。(1)基础环境建设。所谓实验室基础环境建设，指的就是

4 结束语支撑实验室运行的基础环境配套设施的建设，具体涉及了办公桌 总而言之，对于大数据实验室的建设，是把技术和科学

椅、实验室的多媒体系统、空调系统、装修系统等。只有做好这

管理体系结合的过程，从而能够提高相关企业和部门的科研能

一系列的基础支撑环境建设，才可以确保实验室的稳定运转。力，并满足他们对于专业人才培养的现实需求。IT环境建设包括实验室个人终端及大数据服务器建设。

员工实验终端计算机可以采用普通的个人计算机，组建实验室

参考文献局域网，支撑员工对服务器进行操作，作为员工的工作平台。

[1]王振华，洪泓，陈春丽.大数据技术实验室建设探索与研究[J].电脑

此外，在桌面云端技术持续发展的过程中，员工终端计算机能

知识与技术,2017,13(12):132-133.科学与信息化2019年9月中 51科学与信息化9月申內丈indd 512019/9/12 16:45:16