预告丨CCF南京钟山大讲堂“大数据专业技术实战培训”
为了提升大数据领域学生和科研人员的技术实战水平,中国计算机学会定于2021年9月18日举办“大数据专业技术实战培训班”。
有关事项通知如下:
一、主办单位
中国计算机学会(CCF)
二、承办单位
中国计算机学会南京分部
南京云创大数据科技股份有限公司
三、培训时间
培训时间:2021年9月18 - 25日
四、培训形式
采用在线培训形式,南京CCF分部会员免费学习(限50人,名额报满截止)。
通过视频教学和在线实验的方式,由实战经验丰富的工程师带领进行实操演练,提高具体应用场景中的实际动手能力。
学员使用装有Win7、Win10,以及谷歌浏览器的64位操作系统的电脑,参加实战培训。
五、培训内容
导引:大数据理论框架与应用实践
第1章:实战开发流程介绍及环境搭建
intelj开发工具讲解、配置以及常用插件;maven工具的介绍
实验:实战开发流程介绍及环境搭建
第2章:大数据环境搭建
Hadoop、HBase、Zookeeper、Redis环境手动搭建和配置
实验 大数据环境搭建
第3章:网络爬虫
通过爬虫爬取相关网站数据;爬取数据存入HBase;爬取数据存入Redis
实验 网络爬虫
第4章:大数据开发
从HDFS文件系统中获取数据并存入HBase;从HBase数据库中获取相应的数据进行MR处理;将处理过后的数据缓存至Redis中
实验
1)Spring Boot项目的搭建
2)站点数据的保存与查询
3)城市数据的计算与排序
4)数据接口的封装
第5章:大数据可视化
点位地图实时数据展示,点击点位展示近一天、周、月数据 ;地图数据渲染;重点城市排名;地震实时波查看
实验
1)排行榜-框架搭建
2)排行榜-界面交互(一)
3)排行榜-界面交互(二)
4)数据地图-百度地图API学习
5)数据地图-地图点位修饰
6)数据地图-弹框展示