基于Python的哔哩哔哩每周必看网数据采集与分析.pdf

湖南商务职业技术学院毕业设计

目录

1引言1

1.1项目背景1

1.2开发环境与工具2

1.2.1Python简介2

1.2.2MySQL简介2

1.2.3Jypyternotebook简介3

2需求分析3

2.1可行性需求分析3

2.2采集目标功能分析4

2.3关键技术分析5

2.3.1网络爬虫技术5

2.3.2文件存取技术6

2.3.3可视化技术6

3数据采集7

3.1采集页面分析7

3.2字段分析9

3.3编程实现11

4数据清洗与处理13

4.1数据清洗14

4.2数据储存15

4.3编程实现17

5数据统计与分析17

5.1数据准备17

5.2数据展示19

5.2.1依据播放量进行排序19

5.2.2依据弹幕数进行排序20

I

湖南商务职业技术学院毕业设计

5.2.3依据转发数进行排序22

5.2.4依据作品数进行统计和排序23

5.3综述24

6小结24

参考资料26

II

湖南商务职业技术学院毕业设计

基于Python的哔哩哔哩每周必看网数据采集与分析

1引言

哔哩哔哩每周必看网是哔哩哔哩弹幕视频网的子网页，而哔哩哔哩（用户

将其称呼为“B站”）则是中国最大的以年轻人为主的全年龄娱乐社区平台，

其于2009年由徐逸和陈睿创立。

经过15年的发展，现在B站以创作者和用户为核心，创建了充满活力和热

情的创作平台。拥有中国最有创意的创作者，为用户源源不断的产出阳光且优

质的内容。在这里，用户可以观看各种类型的视频，包括原创、翻唱、动画、

游戏、科技、教育等。无论是从娱乐到学习，还是到专业知识和课程，任何用

户所需要的内容应有尽有。无论用户的兴趣爱好如何，都可以在B站找到自己

喜欢的内容。这使得B站在不同年龄段的用户中都具有较高的吸引力。

现如今B站已经涵盖7000多个兴趣圈，并且随着时间的积累，B站包含了

各个年龄段的用户。因此无论是什么行业，都可以找到各自需要的目标人群。

1.1项目背景

随着互联网的飞速发展，线上平台已经成为了用户获取信息、娱乐消遣的

重要途径。B站作为一个以弹幕和二次元文化为主的视频平台，吸引了大量的

年轻用户群体。为了提高用户活跃度和黏性，B站每周都会从平台上筛选出最

热门、最受用户欢迎的视频进行推送。这些视频不仅具有较高的点击率和观看

时长，还包含了丰富的创意和高质量的内容。

对于广告商来说，这些热门视频无疑是一个巨大的商机。通过分析这些视

频的数据，广告商可以找到最受欢迎的创作者，并与之合作进行推广。创作者

的作品和风格往往具有较强的个人特色，这使得他们能够吸引到大量具有相似

喜好的粉丝。在一个特定的领域内，这种粉丝群体的数量是相当可观的。

此外，随着互联网的普及，越来越多的创作者倾向于在一个特定的领域内

深耕细作，以求在竞争激烈的市场中脱颖而出。这意味着，与这些领域内的创

作者合作，广告商能够轻松地找到目标人群，从而实现精准的营销推广。

因此，对于广告商而言，与B站创作者