计算机毕业设计吊炸天hadoop+spark旅游推荐系统 旅游可视化系统 地方旅游网站 旅游爬虫 旅游管理系统 大数据毕业设计 机器学习 深度学习 知识图谱

414
0
2023-11-29 16:47:47
正在缓冲...
3
1
6
6
流程: 1.DrissionPage自动化爬虫框架采集旅游数据约10万条存入mysql数据库、.csv文件作为数据集(旅游数据、用户数据、评论数据); 2.使用pandas+numpy或MapReduce对数据进行数据清洗,生成最终的.csv文件并上传到hdfs(含nlp情感分析); 3.使用hive数仓技术建表建库,导入.csv数据集; 4.离线分析采用hive_sql完成,实时分析利用Spark之Scala完成; 5.统计指标使用sqoop导入mysql数据库; 6.使用flask+echarts进行可视化大屏幕炫酷展示; 创新点/特色: 1.全新DrissionPage爬虫框架,性能强悍碾压selenium/requests等常见传统Python爬虫技术; 2.可视化炫酷大屏幕; 3.虚拟机显摆敲命令碾压答辩现场(市面上全是假算法假爬虫假大数据都不带用虚拟机的); 4.nlp深度学习文本分类情感分析; 5.Spark实时计算+Hive、Hadoop离线计算双实现有效避免导师喷你; 注意:如果还被喷项目工作量简单或者课设级别等理由不让你过,直接1秒内无缝对接选装推荐系统、后台管理、前台系统、预测算法、知识图谱等,效果如下: https://www.bilibili.com/video/BV1pm4y1d7S5/?spm_id_from=333.999.0.0
V : biyesheji0009 大模型、大数据、深度学习领域中科院硕士在读,所有源码均一手开发!招合伙人!
客服
顶部
赛事库 课堂 2021拜年纪