Skip to content

songwo-vx18484646674/Hadoop-based-popular-video-data-analysis-prediction-and-visualization-system-on-Bilibili

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

5 Commits
 
 
 
 

Repository files navigation

基于HadoopB站热门视频数据分析可视化系统

基于机器学习B站热门视频数据分析预测可视化


前言介绍

  

随着大数据时代的到来,数据分析和可视化成为了洞察业务趋势、提升决策质量的关键手段。B站数据分析可视化系统应运而生,旨在通过对海量数据的采集、处理、分析和展示,为业务决策提供强有力的数据支持。该系统采用Python语言Django框架和java语言Springboot框架两种语言框架分别进行开发,利用其强大的数据处理能力和丰富的库支持,实现数据的高效分析。Scrapy技术的应用使得系统能够快速爬取B站的公开数据,为分析提供原始素材。看板可视化技术则将分析结果以直观、易理解的方式呈现给用户,提升信息传递的效率。预测功能通过构建数据模型,对B站的热门视频进行机器学习算法随机森林回归预测和协同过滤算法推荐,为战略规划提供依据。Hadoop框架的应用解决了大数据环境下的存储和计算问题,保障了系统的可扩展性。Django框架和Springboot框架的使用简化了Web应用的开发,使得系统功能更加丰富、稳定。MySQL数据库作为数据存储的核心,以其可靠性和易用性,为平台提供了强大的数据支持。B站数据分析可视化系统的建设和应用,不仅提高了数据分析的效率和质量,也为业务创新和发展提供了新的动力,推动了数据分析技术在视频平台领域的应用和发展。


01
开发环境

1.1Java 技术和Python技术(两种语言开发的都有)

1.2SpringBoot框架和Django框架(两种框架开发)

1.3Hadoop,hdfs

1.4Scrapy爬虫

1.5MySQL数据库

1.6B/S 结构

1.7Vue.js 技术

1.8随机森林回归算法和协同过滤算法(余弦相似性)



02
系统功能模块

亮点(爬虫【Bilibili网站】、机器学习(随机森林)、数据预测、Echarts可视化)

1、视频数据管理:爬虫信息列表展示。

2、数据存储:mysql数据库。

3、可视化分析:各种数据分析统计后图表大屏展示。

4、情感分析预测:根据B站视频的各种属性进行预测。

5、数据分析:根据hadoop大数据技术进行数据分析


03

视频演示





04

图片展示

09前台用户注册登录.png

07前台系统首页.png

image.png

08热门视频推荐.png010个人中心.png011.png01后台管理系统.png03后台管理系统首页.png04用户管理.png05热门视频.png02数据分析大屏.png



05
系统文档、代码展示

5.1 系统文档

image.png

5.2 代码展示
源码获取+vx:18484646674 +qq:2474345497

java基于用户的协同过滤算法.png




END联系作者


联系作者获取源码+VX:18484646674 +QQ:2474345497

系统功能演示查看直接点我进入查看

About

基于机器学习B站热门视频数据分析预测可视化,本系统采用Java技术SpringBoot框架和Python技术Django框架(两种框架开发的都有)和Hadoop,hdfs,Scrapy爬虫,MySQL数据库,B/S 结构,Vue.js 技术,算法亮点,采用随机森林回归算法进行预测和协同过滤算法(余弦相似性)推荐。

Topics

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

 
 
 

Contributors