文档文库
手机版
投诉建议
热门搜索:
心得体会
演讲稿
思想汇报
首页
心得体会
学习心得体会
培训心得体会
军训心得体会
社会实践
作风建设
工作心得体会
教育心得体会
演讲稿
演讲稿格式
演讲稿范文
竞聘演讲稿
师德演讲稿
三分钟演讲稿
思想汇报
思想汇报范文
转正思想汇报
大学生思想汇报
季度思想汇报
教师思想汇报
工作计划
工作计划格式
工作计划开头
工作计划结尾
总结与计划
工作计划模板
工作总结
年终工作总结
年度工作总结
个人工作总结
实习报告
实习报告范文
实习计划范文
实习鉴定范文
实习报告内容
个人简历
求职简历
简历范文
简历模板
简历表格
简历格式
祝福语
春节
除夕
元宵
端午节
合同范文
合同范本
合同样本
合同范本格式
首页
>
网页抓取网易云音乐及评论数据分析
网页抓取网易云音乐及评论数据分析
发布时间: 来源:
文档文库
小
中
大
字号:
手机查看
网页抓取网易云音乐及评论数据分析
游贤
成都理工大学信息科学与技术学院
【摘
要】
摘要:为了分析网易云音乐中哪些歌曲是热门歌曲,哪些歌曲的评论
最多,从而了解到人们对于不同音乐类型的喜爱程度,采用成熟的
scrapy
爬虫
框架,从歌手信息开始,抓取每个歌手的所有演唱曲目和对应评论信息,最后
对数据进行清洗处理,得出结论。
【期刊名称】
数码世界
【年
(
卷
,
期】
2018(000009
【总页数】
1
【关键词】
网页采集
对称加密
1.
思路分析
抓取全站信息一般选择有规律的网页采用广度优先方法,考虑到如果从歌单页
面开始的话,会有很多歌曲重复,因为相同的歌曲可以划分到不同的歌单。因
此最终决定从歌手页面开始,作为种子页面,这样歌曲的重复量会小很多(如
果有多个歌手合唱,那么这首歌会出现在每个歌手的歌曲页面当中,他们的访
问地址是不一样的)
。
方法一:
从
http
:
//music.163.com/discover/artist
页面出发,可以找到所
有的音乐人,
如
图
所
示
,
每
个
歌
手
分
类
对
应
的
url
为
http
:
//music.163.com/discover/artist/cat
?
id=xxx
它
的
可
取
值
有
1001
,
1002
,
1003
,
2001
,
2002
,
2003
,
6001
,
6002
,
6003
,
7001
,
7002
,
7003
,
4001
,
4002
,
4003
。然后我没随便进入其中其一个页面
本文来源:
https://www.2haoxitong.net/k/doc/89af9d07f724ccbff121dd36a32d7375a517c608.html
《网页抓取网易云音乐及评论数据分析.doc》
将本文的Word文档下载到电脑,方便收藏和打印
推荐度:
点击下载文档
文档为doc格式
分享到:
相
关
案
例
正在进行安全检测...
2024-04-29
正在进行安全检测...
2024-04-29
正在进行安全检测...
2024-04-29
安全验证
2024-04-29
正在进行安全检测...
2024-04-29
正在进行安全检测...
2024-04-29
安全验证
2024-04-29
正在进行安全检测...
2024-04-29
正在进行安全检测...
2024-04-29
正在进行安全检测...
2024-04-29
相关推荐
1
幼儿园安全隐患排查制度
2
钢结构详图拆图详解及经验分享
3
疫情防控期间学生宿舍卫生管理工作方案
4
钢结构制作质量检验程序和项目要求
5
最新国防教育工作总结范文
6
新学期主题班会方案
7
防诈骗演讲稿
8
医生职业道德心得体会
9
2020年河北省石家庄市栾城区教师招聘《教育理论基础知识》 真题及答案
10
和谐劳动关系企业考核评价体系
推荐内容
2021省高龄老人补贴政策
描写桥的作文300字9篇
2020钟南山先进事迹学习心得抗击疫情钟南山事迹作文学习
小学见习总结 2000字
贵州工业大学校园网与Cernet和Internet
开展创建“巾帼文明岗”活动计划完整版
擒敌术武术武警特警
幼儿园三年计划
学校疫情防控期间管理制度范文
最全造纸工艺流程