# finalProgect **Repository Path**: liujunxin/final-progect ## Basic Information - **Project Name**: finalProgect - **Description**: No description available - **Primary Language**: Python - **License**: MIT - **Default Branch**: master - **Homepage**: http://47.93.220.108 - **GVP Project**: No ## Statistics - **Stars**: 0 - **Forks**: 3 - **Created**: 2021-06-09 - **Last Updated**: 2021-06-16 ## Categories & Tags **Categories**: Uncategorized **Tags**: None ## README # 项目简介 小组最终项目,利用批流一体处理数据,实时展示电影票房变化,综合展示电影各方面信息 # 项目网站: 47.93.220.108(暂定,后续迁移到百度) 106.13.117.37 # 技术栈 + python,vue,bash + selenium,webdriver for linux + kafka,spark + mongodb,es + vue,echart 额外使用mongodb是因为,本项目爬虫继承自小组第一个项目,数据库更改问题较多,所以使用spark批量读入mongodb做批处理,导入es做推荐系统 # git管理 + 上传commit要求:上传人:xxx,上传内容:1.xxx,2.xxx + 每日报告命名需求:日期-姓名,eg:09-张三 # 前端技术栈 # 后端技术栈 + kafka,spark,es,mongodb + fastapi # 爬虫技术栈 # 前端部署说明(服务器端) # 后端部署说明(服务器端) 1. 下载middleware/config.md中中间件 2. 按照middleware/confs中配置文件进行相关配置 3. nginx:apt install nginx # 爬虫部署说明(个人终端)