大年夜数据实验平台

本办事站是“高校大年夜数据课程公共办事平台”的11大年夜工程中的“11号子工程”

大年夜数据实验平台:结合企业为高校供给大年夜数据教授教化和科研实验实训机房处理筹划

扶植者:厦门大年夜学计算机迷信系  林子雨 博士/助理传授

(E-mail: ziyulin@xmu.edu.cn, 小我主页:http://www.cs.xmu.edu.cn/linziyu)

(版权声明:本平台一切资本有版权,请勿用于贸易用处)

大年夜数据实验平台主页二维码

扫一扫手机拜访本主页


实验平台简介 | 实验平台功能 | 平台扶植参与方角色 | 扶植单位 | 协作同伴 | 诚邀加盟

大年夜数据课程综合实验案例:网站用户购物行动分析
Spark课程综合实验案例:淘宝双11数据分析与猜想
Spark课程实验案例:Spark+Kafka构建及时分析Dashboard
厦门租房信息分析展示(pycharm+python爬虫+pyspark+pyecharts)
基于 TMDB 数据集的片子数据分析

教材配套机房上机实验指南 |  大年夜数据软件装置和编程实际指南

大年夜数据Linux实验情况虚拟机镜像文件

在阿里云中搭建大年夜数据实验情况

大年夜数据实训课程系列案例教材

高校大年夜数据实训课程样板工程


实验机房图片2

实验平台简介

上机实际是高校大年夜数据教授教化必弗成少的重要环节,可以赞助先生更好消化接收课程内容、进步先生着手才能、激起先生进修兴趣 。作为“中国高校大年夜数据课程公共办事平台”的第11号子工程,大年夜数据实验平台旨在精心打造针对高校教授教化和科研任务量身定制的大年夜数据实验平台,满足课程上机实验、课程设计、练习实训、科研练习等多方面需求。为此,厦门大年夜学数据库实验室秉承“强强结合、整合伙源”理念,积极结合国际抢先的大年夜数据基本实施供给商(国富瑞(福建)信息技巧家当园无限公司)、大年夜数据教授教化科研平台供给商(上海睿亚训软件技巧办事无限公司)、大年夜数据产品开辟企业(科技谷(厦门)信息技巧无限公司)、大年夜数据交易与办事供给商(数据堂),合营构建大年夜数据实验平台生态体系,尽力为全国高校供给优良的大年夜数据实验平台处理筹划。

大年夜数据实验平台功能

  • 典范实战数据分析实验
  • 供给完全的高校数据发掘与大年夜数据分析的实验室处理筹划
  • 经过过程典范的算法展示、算法完成结合大年夜数据分析的应用处景与案例对先生停止数据分析方面的综合练习

大年夜数据实验平台架构图

表 大年夜数据实训体系简介-实训内容

实验类型 实验称号

数据发掘展示性实验

数据基本统计实验
数据预处理实验
组合算法分析实验
分类算法实验
聚类算法实验
离群检测实验
时间序列分析实验
数据发掘R说话开辟实验 数据基本统计实验
数据预处理实验
组合算法分析实验
分类算法实验
聚类算法实验
离群检测实验
时间序列分析实验
大年夜数据基本实验 Hadoop情况的搭建实验
基本MapReduce开辟实验
迭代式MapReduce开辟实验
分区、排序和归并算法实验
Hive的应用实验
大年夜数据综合实验 超市批发数据分析实验
Netflix片子数据分析实验
组合算法分析实验
新浪微博消息分析实验
带无情感标签的微博数据分析实验
搜集安然日记分析实验
出租车GPS地位分析实验
社交资本共享站点用户行动分析实验

实验平台扶植参与方角色

大年夜数据实验平台生态体系

(图 大年夜数据实验平台扶植参与方)

行业 角色 参与方
大年夜数据基本实施供给商 供给实验平台运转的基本举措措施 国富瑞(福建)信息技巧家当园无限公司
大年夜数据教授教化科研平台供给商 供给大年夜数据实验平台 上海睿亚训软件技巧办事无限公司
大年夜数据课程资本供给方 供给大年夜数据课程内容和实验筹划 厦门大年夜学数据库实验室
大年夜数据产品开辟企业 供给行业处理筹划案例和企业实战情况 科技谷(厦门)信息技巧无限公司

深圳前海鹏元数据技巧无限公司

大年夜数据交易与办事供给商 供给教授教化实际和科研练习大年夜数据 数据堂(北京)科技股分无限公司

(2013年5月 厦门大年夜学代表团到中国国际信息技巧(福建)家当园拜访交换)

IMG_7668

(2016年6月 和上海睿亚训公司签订协作协定,林子雨被聘为首席迷信家)

2016年6月14日数据堂公司段傲东等来访

(2016年6月  数据堂公司郭维峰、段傲东、付超等拜访实验室)

2016年6月21日林子雨拜访科技谷和陈思恩合影

(2016年6月  与科技谷公司停止协作交换,图为林子雨和公司CEO陈思恩合影)

IMG_7886

(2016年7月 与深圳鹏元数据签订协作协定)

实验平台扶植单位

(1)厦门大年夜学数据库实验室

厦门大年夜学数据库实验室是“厦门大年夜学信息迷信与技巧学院文明卫生实验室”和“红旗实验室”,位于厦门大年夜学海韵园,坐落在美丽的厦门珍珠湾,与大年夜海唯一百米之隔。实验室师长教员包含冯少荣师长教员(副传授)、张东站师长教员(副传授)、林子雨师长教员(助理传授)、林文水师长教员(助理传授)。 实验室承当计算机系数据库课程的本科生和研究生教授教化任务,在数据库、数据仓库和数据发掘范畴展开相干研究,为社会培养了浩大优良的本科和硕士卒业生。实验室曾前后承办了第二十一届全国数据库库会议NDBC2004第5届全国高等黉舍计算机法式榜样设计课程研究会等大年夜型学术和教授教化研究会,遭到了广泛好评,在国际高校具有较高的有名度。

实验室扶植了国际高校首个也是今朝独逐一个“中国高校大年夜数据课程公共办事平台”(平台官网),为教员展开大年夜数据教授教化和先生进修大年夜数据课程供给全方位、一站式收费办事,包含教材PPT、教授教化大年夜纲、备课指南、进修指南、上机习题、讲课视频、技巧材料等。

中国高校大年夜数据课程公共办事平台LOGO(图上文下)

拜访平台主页

IMG_9827

(图  厦门大年夜学数据库实验室大年夜数据课程扶植团队)

(2)上海睿亚训软件技巧办事无限公司

ruiyaxun

上海睿亚训软件技巧办事无限公司(官网)成立于2009年,是中国抢先的IT教导云应用及办事供给商,为国际高校供给云计算与大年夜数据先生上机实验室处理筹划。已构建了包含传统软件开辟如Java、.NET、测试,移动开辟如Android、IOS及云计算、大年夜数据等实际教导体系,并经过过程虚拟化云计算及移动互联网技巧手段、结合线上及线下整合形式,为用户供给从教导内容扶植、教导私有云扶植为主,辅以培训、实训、评价到人力资本办事的全体处理筹划,为中国的IT教导带来全新的活力。

今朝已于全国近200家高等院校建立了协作关系,并与VMware、英特尔及惠普等各厂商建立了协作关系,有近20万高校专业先生经过过程睿亚训实际体系停止了职业技能晋升,是国际IT类实际教导的市场引导者。

上海睿亚训软件技巧办事无限公司

地址:上海市徐汇区钦州路100号

科创大年夜厦2号楼206室

邮编:201203

实验平台协作同伴

(1)国富瑞(福建)信息技巧家当园无限公司

国富瑞(福建)信息技巧家当园无限公司是培训交换班的结合主办方,公司成立于2010年12月,是中国国际信息技巧(福建)家当园管理委员会和中国国际电子商务中间(公司部属全资子公司国富瑞(北京)投资无限的合伙公司。

中国国际信息技巧(福建)家当园(以下简称“EC家当园”)(官网),位于福建省泉州市安溪县龙门镇南翼新城开辟区高新技巧家当园内(间隔厦门北站约30千米,从厦门北站直接上高速公路20分钟中转园区,全程高速无红绿灯),总占空中积约1300亩。家当园筹划修建面积约100万平方米,重要扶植内容包含核心营业区、综合办事区两大年夜板块。个中,核心营业区包含数据灾备机房区、灾备指示区、云计算中间、物联网研究中间、金融信息化中间、通信运营中间、医疗运营中间、海峡两岸名品搜集交易俱乐部、特点行业无纸化交易中间等功能板块;综合办事区包含海峡电子商务区、APEC电子商务国际交换中间、IT办事外包培训学院区、园区生活配套区等功能板块。家当园项目估计土建投资28亿元人平易近币,包含设备投资、基本举措措施投资等在内的总投资额将达60亿元人平易近币。

家当园努力于以国际最高等级第三方灾备/数据中间为核心,构建以信息技巧办事外包为主的绿色生态家当链,打造集数据集中、安然管理、云办事、电子商务、数字金融、信息技巧教导、国际交换、投融资情况等功能为一体,覆盖福建、辐射海西的国际一流高科技信息技巧家当园区,完成一流情况吸引一流人才网job.vhao.net,一流人才网job.vhao.net创造一流营业,一流营业成就一流园区的良性生长目标。

EC家当园内的云计算与大年夜数据培训基地具有以下基本条件和优势:

(a)完美的基本举措措施。EC家当园曾经建成国际一流的教授教化楼、实验楼、行政办公楼、迷信研究中间、文体活动中间、图书馆、餐厅、公寓等举措措施,是国际最具现代化和最富有特点的教导实训基地之一。

(b)先辈的数据中间。EC家当园具有华西北最大年夜的高可用数据中间,项目总投资为20亿元,重要扶植数据机房、动力中间、管理监控、营业处理和后勤保证等功能区修建。按照国际上最高的T4等级标准设计和施工,可供给T2-T4等级办事,总修建面积6.7万平方米,可装置4500个标准机柜,可包容5万台以上的办事器。数据中间由中国国际电子商务中间担任组织运营,为福建省和周边地区(包含台湾)的各级当局和企事业单位供给数据存储、数据交换、数据处理、数据灾备、体系测试、容灾恢复和IT咨询、培训和技巧支撑等专业数据办事。同时还将供给云计算、物联网营业的办事。

(c)完全的家当链条。EC家当园作为信息化重要基本举措措施,总筹划面积约2万亩,筹划目标以大年夜范围、多等级数据中间为核心,生长云计算、数字媒体、办事外包、电子商务、文明创意等五大年夜家当,将渐渐构成国际家当功能最为完美、构造公道的信息家当园,成为特点鲜明、功能完美、技巧抢先、带动明显、国际最大年夜的办事外包示范平台。

(d)优惠的政策条件。2014年10月,福建省人平易近当局出台了支撑生长大年夜数据重点园区扶植的十条办法,力争把数字福建(长乐)家当园、中国国际信息技巧(福建)家当园扶植成为全省大年夜数据家当园区和“数字福建”扶植的重要承载基地。新举措重要包含完美园区生长筹划、引进培养家当龙头、推动资本会聚开辟、扶植创新平台、增能人才网job.vhao.net培养、做好园区用地保证、确保园区用电需求、强化园区搜集支撑、进步安然保证才能等。可以说,在政策层面,不管是园区扶植照样人才网job.vhao.net培养,EC家当园都取得了较好的优势生长条件。

(2)数据堂(北京)科技股分无限公司

数据堂(股票代码:831428)成立于2011年,为国际上市的大年夜数据资本办事龙头企业,努力于成为全球最大年夜的数据办事商。秉承“专注数据,共享价值”的办事理念,旨在盘活和融合各类大年夜数据资本,发掘数据价值,为客户产品和办事增值,为社会生长和进步献策。

数据堂开创及合股人来自Stanford University、NEC、腾讯、华为等有名高校,互联网和高科技公司。数据堂在非构造化数据处理、大年夜数据云办事等方面具有国际抢先的自立核心技巧,50%以上的员工从事创新、研究与技巧开辟任务。今朝数据堂具有4家全资子公司,并在硅谷下设美国子公司。

经过过程获得线下大年夜数据、行业大年夜数据和当局大年夜数据,数据堂整合了涵盖科技、信用、交通、医疗、卫生、通信、气象、地理、质监、情况、商户、电力等数十大年夜范畴的大年夜范围数据。以此为基本,为客户供给专业数据收集处理、共享交易及数据云办事。以后数据堂已为百度、腾讯、阿里巴巴、安然、Microsoft、Facebook、Intel、NEC、Canon、Samsung等国表里有名企业,和浩大国表里创新创业公司供给数据办事。

(3)科技谷(厦门)信息技巧无限公司

科技谷(厦门)信息技巧无限公司成立于2013年,是一家专注于大年夜数据技巧与应用办事的高科技企业,在大年夜数据管理和分析、信息检索等方面具有国际抢先的自立核心技巧和尖端产品,为航空旅游、交通管理、公共安然等范畴供给大年夜数据全体优化处理筹划。科技谷创业伊始就构成了以海内归国留学人员为核心的研发团队,积极参与国际平易近航、交通、公共安然等行业的信息化改革,具有大年夜数据家当链高低游资本和多项数据存储和处理的自立知识产权。
科技谷自立研发的大年夜数据管理平台已成功应用在国际平易近航、公共安然等范畴;科技谷的数据发掘对象可让组织经过过程视觉化海量数据来发明数据之间蛛丝马迹的接洽。在将来云计算、大年夜数据和移动互联网的生长海潮中,公司将努力于大年夜数据技巧和办事的持续创新,打造大年夜数据范畴卓越品牌,渐渐成为全球大年夜数据技巧与应用的引导者,做中国的Palantir。

协作加盟

诚邀相干高校企业加盟协作,共建高校大年夜数据实验平台生态体系。

接洽方法:

厦门大年夜学数据库实验室  林子雨 师长教员

E-mail: ziyulin@xmu.edu.cn