《大数据实验平台方案课件.pptx》由会员分享,可在线阅读,更多相关《大数据实验平台方案课件.pptx(28页珍藏版)》请在三一办公上搜索。
1、,云创大数据实验一体机云创大数据实验平台,提 要,1,2,3,4,第一部分大数据教学与实验现状,PART, 基础设施, 实验内容, 教材体系, 师资培训, 实训项目, 考试系统,01,大数据教学与实验现状,基础设施,学生实验需要大量的集群环境。一次性基础设施投入较高,实验内容,生态体系庞大复杂,技术发展迅速。实验设计花费时间,教材体系,高速发展的新领域,市场上高质量成体系的教材缺失,师资培训,教师中精通大数据技术的人才较少,实训项目,缺乏切合业界大数据实际应用的实训项目,考试系统,实验考核,试题设计,考试组织管理,试卷批阅占用大量教师时间,考核成绩存在一定主观性,高校高职大数据教学实验面临问题
2、,大数据实验平台提供什么,+ 较低的平台建设和使用成本+ 高效的运行环境+ 完整的教材体系(本科/高职)+ 丰富开放的实验资源+ 师资入门培训,+ 提高教学效率 + 学生管理+ 实验进度管理+ 学生考核评测+ 灵活组织内容+ 教师开发环境,+ 独享集群实验环境+ 本地/远程接入+ 全面深入打好基础+ 丰富的实战项目+ 增强就业实力+ 学生探索环境,第二部分技术背景介绍, 容器技术, 编排管理, 虚拟网络, 业务平台, 挖掘算法, 数据展示,PART,02,核心技术,虚拟网络,虚拟机技术(Virtual Machine),资源占用少,启动快,性能开销小,隔离好,Kubernetes(K8s) 容
3、器编排工具平台,基于容器技术的分布式架构领先方案,开放的开发平台,完备的分布式系统支撑平台,第三部分大数据实验平台, 实验环境, 教材体系, 实验内容, 进度管理,考试系统, 数据展示,PART,03,2016年12月 大数据实验一体机1.0,大数据实验一体机发布版本,2016年12月,2017年12月,Hadoop生态圈实验Hadoop实战实验开放式实验环境,+Python数据挖掘实验+R语言数据挖掘实验+考试系统(试题库,试卷生成)+实验流程管理+数据挖掘可视化工具,+Spark实战实验+Python数据爬取实战实验+第三方实验开发工具+自定义实验教学板块+实验报告管理,成功案例,丰富的实
4、验内容,+实验指导视频,丰富了数据挖掘的实验内容,集成了在线数据挖掘及可视化平台,新增自定义实验开发工具,36个Hadoop生态圈大数据实验,16个真实大数据实战项目,24个基于Python的数据爬取挖掘实验,16个基于R语言的数据挖掘实验,4个Linux系统基本训练实验,集成在线数据挖掘及可视化实验,+ 自定义实验设计开发工具,面向实战,面向应用,Hadoop生态系统核心及相关产品的集群实验环境,Python数据爬取分析挖掘生态和R语言数据分析挖掘生态,Python语言基础Python MapRuduce实例Python常用挖掘算法实现Python实战:挖掘算法应用Python实战:数据爬虫
5、应用,R语言基础R语言常用挖掘算法实现R语言实战:挖掘算法应用,实战项目实验,车牌识别搜索引擎精确营销环境大数据物联网大数据贷款风险评估,时间序列预测温度随机森林分类空气质量回归预测空气质量区域经纬度聚类,全国城市分布统计上海历史天气数据分析北京上海天气对比北京上海空气质量对比随机森林分类空气质量回归分析预测空气质量区域经纬度预测电影数据爬取豆瓣图书数据爬取网络小说数据爬取双色球开奖信息爬取,环境数据读写算子学习词频统计环境数据分类统计词组分类统计日志分析分类算法学习聚类算法学习GM11预测环境数据中文分词统计,完整的本科课程教材体系,大数据,云计算,2017年首印,x全国各大高校大数据专业广
6、泛选用,2010年第一版发行,现版为第三版。2016年全国高校教材被引用数最高的教材,大数据实验手册,2017年首印,配套大数据一体机平台实验内容,新版更新包括新增实验,系统地介绍了大数据库的理论知识和实战应用。,大数据库,在分析视觉特性基础上,清晰有效地传达与沟通数据内涵信息。,大数据可视化,涵盖经典数据挖掘理论、方法、工具与应用,数据挖掘,高职课程教材体系,实验流程模式,系统按照学生实验内容自动创建所需实验环境,学生参照实验手册完成实验,并记录实验流程,生成实验报告,学生提交报告,教师可根据实验报告提交情况,管理掌控实验进度,教师根据学生实验报告内容的正确性,完整性和及时性打分,自由探索模
7、式,考试评测系统,海量题库,辅助评分,试卷生成,在线考试,提供分类标准题库,题库可自定义分类,可扩展试题,可按照设计难度目标自动生成试卷,包括单选题,简答题,提供在线考试功能,部分题型试题(单选题)自动评分,1,2,3,4,第三方实验开发工具集,自定义实验,内容设计模板:在线实验内容设计,文档内容导入:通过word文档导入实验内容生成实验手册,镜像定制工具:可从基于平台镜像库中的标准镜像,也可根据实验内容构建自定义容器镜像并存入本地镜像库,实验内容开发工具,实验资源库:自定义实验+平台自带实验= 实验资源库,自定义实验板块内容,Hadoop基础,Python语言,数据挖掘算法,电商项目实战,电商专业大数据实验,集成数据挖掘及可视化工具,用户上传数据集文件至平台(csv格式文件),点选指定待挖掘数据表列(多选),点选适用的数据挖掘算法(分类,聚类,决策树.),选择合适的数据展示方式(饼图,柱状图,散点图等),数据展示,上传数据,指定表列,选择算法,第四部分在线演示, 实验集群, 实验流程, 考试系统, 教师管理, 挖掘算法, 数据展示,PART,04,谢 谢,云创企业文化:与聪明人一起做精彩的事,