一、 实验题目
基于阿里云大数据平台的综合数据分析实践
二、 实验目的
基于所学的大数据处理知识，结合阿里云大数据相关产品，完成一个大数据分析项目，能够使用阿里云大数据相关产品完成数据分析、数据建模与模型优化、能够基于分析结构构建可视化门户或可视化大屏、分析案例有实用价值并能够形成有效结论、能够将开源技术与阿里云产品结合，综合利用提升开发效率，降低成本，最后完成数据分析报告和结果展示
三、实验难点
数据分析需要有使用价值，模型调优比较麻烦
四、实验过程（截图）
- 建表
- 数据分析与可视化
1） 不同地点的平均薪资
2） 每个岗位的平均工资
3）列出最低薪资大于30000的各种工作
4） 列出平均薪资前十名的职位名称
5） 列出每个城市有多少岗位
6） 列出每个城市有多少家公司在招聘
7） 每个城市的平均最低薪资是多少
8） 每个城市的平均工资排名
9） 每个城市的平均最高工资是多少
- 机器学习建模与调优
预测北京岗位中的薪资变化
算法的超参数调优
L2
L1
NONE