高校大数据实验室建设解决方案.pdf
《高校大数据实验室建设解决方案.pdf》由会员分享,可在线阅读,更多相关《高校大数据实验室建设解决方案.pdf(8页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、-高校大数据实验室建立方案高校大数据实验室建立方案一、一、 建立目标建立目标章鱼大数据实验室的建立目的是作为大数据教学实验及科研平台, 包括数据挖掘与大数据分析平台。实验室的设计全面落实产、学、研、用一体化的思想和模式,从教学、实践、科研和使用多方面注重专业人才和特色人才的培养。利用虚拟化教学资源,搭建教学系统和集群平台,将理论学习、实践教学和大数据工程实战融为一体,由难而易、循序渐进,逐步提升学生的学习技能和实践水平,提高学的质量和成效。利用大数据分析主流软件框架,搭建与业界主要用户一致的实验与科研环境, 将理论课程中学到的数据挖掘算法运用到实际的数据分析过程中,提升学生的动手操作和工程实践
2、能力。 使得学生所学与企业工程人才需求无缝衔接, 与教师的科研工作严密配合。通过专业的大数据分析计算资源搭建的开放式大数据分析平台, 可以充分的融合教师的科研需求,教师可以在开放的平台环境下开展大数据科研工作,提升教师的科研创新能力,充分提高研的成效。二、二、 产品优势产品优势交互式学习模式提供体系完整、简单易用的在线教学课堂;以根底知识学习、在线视频教学、习题、线上测试、评估等为主线的一系列方法,确保学生在短时间内掌握大数据虚拟仿真实验、分析部署技能。真机实验训练实验训练体系设计成各模块相对独立的形式,各模块交互式的实验任务、大数据实验机、实际工程上机操作,通过多方位的训练,最终灵活的、渐进
3、式地掌握大数据生态体系。.z.-大数据实战及案例分析提供实验数据,包括网站流量数据、租房及二手房数据、电商商品交易数据、搜索引擎访问等多种行业数据,数据内容超过 20TB,同时周期更新数据内容。充分支撑科研工作提供行业数据及案例解剖用于根底研究,提供数据分析方案及流程,提供数据更新接口,可以对行业数据进展分析统计,按需求生成数据报表,为科研工作提供数据支撑。例如*地区经济数据分析、股市数据分析、全国地震数据分析、食品价格行业数据分析等。三、三、 建立规模建立规模按照 60 台大数据实验机容量进展同时在线使用进展建立为根底,整体系统提供快速扩容升级效劳。四、四、 硬件配置硬件配置采用十六台高性能
4、品牌效劳器作为大数据节点进展建立, 采用企业级全千兆三层交换机进展网络数据交换。每台节点的配置如下:处理器高速缓存QPI 总线速率内存每节点支持 2 个英特尔 至强 处理器 E5-2650 CPU15MB提供 12 个内存插槽,标配 192G 内存,支持高级内存纠错,内存镜像,内存热备等高级功能磁盘标配 4 块 3TB SATA 硬盘标配 2 块 120G SSD 硬盘300G 10000 转 SAS 系统盘.z.-网络控制器集成 1 个高性能千兆以太网控制器双口 ,支持虚拟化加速,网络加速,负载均衡,冗余等高级功能电源虚拟化技术标配大功率高效白金级电源,1+1 冗余支持 VMware vSp
5、here、Docker、OpenStack 等五、五、 软件平台介绍软件平台介绍1 1、大数据教学管理系统、大数据教学管理系统1.1 专业管理提供对专业信息的增加、删除、修改、查询功能。1.2 班级管理提供对专业下属班级的增加、删除、修改、查询功能。1.3 学生管理提供对班级内学生的管理,学生内容包含姓名、*、所属班级、所属专业、联系手机、登录次数等内容。1.4 交流日志查阅对实验机分享交流的内容进展查询,包含交流IP、相关学员、相关教师、实验机编号、交流内容等内容。1.5 成绩管理对于学习中心在线学习的学习考核成绩进展管理,包含查询及删除等功能。1.6 学习记录提供每个学生在学习中心平台内学
6、习课程的学习记录,包含日期、方案、课程、章节、学习 IP等。1.7 学习行为报表.z.-对所有学生的课程学习记录进展统计,包含个体统计、班级统计、全体统计等。1.8 课程管理对学习课程进展查询、修改、删除等操作。1.9 开通课程方案对于学习开课方案的字段内容包含方案名称、授课讲师、授课时间段、开通状态、允许申请周期,允许申请人数等,功能提供绑定课程方案相关实训平台课程、授课助教、云实验机绑定、实验任务绑定等功能。1.10 课程测验习题管理提供对课程相关的习题管理,题型包含单项选择、多项选择、判断题等类型,对习题进展增、册、改、查操作。1.11 分级权限功能系统分为总管理员、助教等二级管理角色,
7、总管理员进展管理所有的功能点,助教可以进展班级管理、学生管理、开课方案制作、实验机远程协助等。1.12 学生实训系统提供学生根据姓名、*、密码登录系统进展实训操作,学生只需安装浏览即可进展实验任务操作;提供实训课程在线学习功能、实验机在线操作、实验报告提交、实验机界面截图、记录课程学习时长等。1.13 实验机桌面分享提供实验机桌面分享功能,如学生在学习、操作云实验机的过程中,有问题可以向教师发起协助请求,助教在收到请求时,可以远程访问学生的实验机,并指导如何操作。2 2、云实验机及实验任务、云实验机及实验任务1.14云实验机.z.-提供基于 Web 浏览器的实验机可视化操作,操作终端无需安装其
8、它开发软件即可进展实验操作;云实验机可以根据学生编号、实验任务和环境要求自动创立,无需管理人员参与实验机创立操作过程。管理平台对云实验机可以进展停顿、销毁操作。1.15云实验机集群管理功能提供云实验机集群管理,对实验机所属效劳器进展新增、删除等操作。1.16云实验机类型包含 Hadoop 实验机、Hive 实验机、HBase 实验机、R 语言实验机、Scala 实验机、Spark 实验机、Kafka 实验机、Sqoop 实验机、Flume 实验机、数据可视化实验机等。1.17实验机运行监控系统系统提供对实验集群运行的所有实验机进展监控,可以查询编号、所属效劳器、创立时间、运行状态、开放端口等内
9、容。1.18实验任务管理提供对实验任务内容的管理,包含任务课程、绑定实验机、设定任务成绩总分,排序值等,提供多种实验任务内容,例如 Hadoop 实验任务、Hive 实验任务、HBase 实验任务、Flume 与 kafka实验任务等。1.19实验报告审阅功能在实验任务过程中学生上交的任务报告进展审阅评分, 提供按照学生、 实验任务等字段进展检索功能。1.20云实验机桌面分享系统提供实验机桌面基于浏览器的分享功能, 允许学生与学生、 学生与教师同步操作实验机桌面系统,提供基于浏览器的交流功能。3 3、大数据实战平台系统、大数据实战平台系统.z.-1.21大数据集群管理系统基于分布式集群管理系统
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 高校 数据 实验室 建设 解决方案
限制150内