大数据系统计算技术国家工程实验室简介
2018-04-13
围绕当前制约大数据应用发展的共性关键技术,特别是适合大数据特点的高性能、高可用的系统计算与分析技术,大数据系统计算技术国家工程实验室开展成体系的技术攻关,以研发建设“高性能大数据计算平台”为核心任务与目标,建设国内领先、国际一流的大数据技术创新平台,同时聚焦时空大数据、智能制造大数据、视频流媒体大数据、社交网络大数据等前沿重点领域,开展大数据应用案例研发与示范应用,积极促进大数据“产学研”协同创新与产业化发展,力争形成具有自主知识产权的成体系的大数据技术成果、高端人才团队、公共服务平台,成为我国领先的大数据创新创业生态圈的智力支撑和技术服务基地。
大数据系统计算技术国家工程实验室法人单位是深圳大学,共建单位有国家信息中心、中兴通讯股份有限公司、清华大学、腾讯科技(深圳)有限公司。
1 深圳大学
深圳大学大数据团队具有国内领先优势和特色的大数据学科布局,已建成的主要科研平台包括:广东省大数据协同创新中心、广东省普及型高性能计算机重点实验室、广东高校大数据分析工程技术研究中心、国家信息中心深圳大数据研究院、深圳大数据智能信息处理工程实验室、深圳物联网专用芯片设计工程实验室。
深圳大学大数据团队目前有87名研究人员,其中教授20名、副教授36名、中国科学院院士1名、国际欧亚科学院院士1名、“千人计划”专家1名、“国家杰出青年”1名、“国家优秀青年”1名、广东省领军人才2名、“青年千人计划”1名、教育部新世纪人才3名、广东省“杰出青年”1名、IEEE Fellow 1名、广东省“千百十工程”省级培养对象4名、鹏城学者1名、海外高层次人才“孔雀计划”20多名。
具备自主芯片设计能力,研发了国际上首颗MV T(multi-value team)信号处理芯片,并成功流片。研制成功基于国产龙芯处理器的全国产普及型高性能计算机:KD60、KD90以及SD1、SD2、SD3、SD4、SD30。在大数据处理软件方面,自主研发了大数据软件平台A lpha Miner,该平台是国际上重要的大数据处理开源软件之一。
2 国家信息中心
国家信息中心是国家发展和改革委员会直属事业单位,自1987年成立以来,积极服务于国家信息化建设,在重大战略问题研究、重点信息化工程建设、信息资源开发利用等方面做了很多卓有成效的工作,是我国电子政务的重要支撑和服务力量,也是我国信息化理论创新和工程实践的先行者。国家信息中心作为实验室共建单位,主要具备3个方面的优势,即具有较强的电子政务云业务研究和技术集成研究能力;具有较好的项目配套条件;作为电子政务云计算领域重要的应用部门,有利于建立应用导向型的“产学研用”合作机制。
3 中兴通讯股份有限公司
中兴通讯股份有限公司是全球领先的综合通讯解决方案及行业信息通信技术(information communication technology)解决方案提供商,拥有芯片设计和系统制造能力,是拥有完全自主知识产权的高科技企业。
中兴通讯股份有限公司基于数据流并行执行模型、数据流运行时系统及数据流抽象机等成熟理论,在大数据场景下自研创新,推出数据流大数据计算引擎Yita,大幅提高了大数据计算速度、计算资源利用率及系统数据吞吐量。
4 清华大学
清华大学是中国乃至世界著名的高等学府之一,清华大学的计算机科学与技术专业在最新的国际排名中位于世界前列。郑纬民教授和武永卫教授带领的大数据团队研发的“面向Map Reduce的HDD-SSD混合存储构建和异构集群优化”项目,相对于标准的Ha doop分布式文件系统 (Hadoop distributed file system,HDFS),能够取得平均2.09倍的加速比;相对于最新的内存缓存方法PAC Man,也能够取得平均1.79倍的加速比。
5 腾讯科技(深 圳)有限公司
腾讯科技(深圳)有限公司是目前中国领先的互联网综合服务提供商之一,腾讯QQ、微信、QQ空间、微博等海量用户业务积累了大量数据。腾讯科技(深圳)有限公司一直持续投入大数据计算平台研发,已有超过7年的累积经验,相关开发人员超过200人。目前腾讯科技(深圳)有限公司大数据计算平台支持超过万台单集群调度能力,积累了超过200 PB的数据,每天扫描数据量超过16.5 PB,日接入消息数达56000亿条,日接入数据量达1.8 PB。在大数据应用方面优势明显。