毕设技术是否用上大数据框架(数据仓库),爬虫数据,清洗数据,存储数据,用hadoop、kafka什么的么?后面又该怎么样实现前后端分离(用什么框架呢)。功能方面该怎么实现,求求大家了,帮帮忙解答下疑惑,或者探讨探讨,感谢大家
这个取决与你自己,你想用大数据就使用,不想用就不用,对于爬取数据,我建议你还是使用python进行随机生成数据,毕竟爬人家的数据违法,自己随机生成数据然后在进行清洗,存储,最后放到mysql下,在使用任务调度工具azkaban,做到定时监控,前后端分离一般使用vue框架,美化就是要vue的ElementUI,图形报表展示数据就使用echarts