代码纯手打
import time
from selenium import webdriver
class YunSpider(object):
# 初始化方法
def __init__(self,url):
'''
初始化的东西在后续程序的函数里就可以直接使用了
:paramurl:
'''
# 初始化网址
self.url = url
# 打开浏览器
self.driver = webdriver.Chrome()
# 打开网站 提取数据 翻页
def getContent(self):
# 打开网址
self.driver.get(self.url)
# 先进入IFrame
self.driver.switch_to.frame(0)# 0代表第一个框
js ='window.scrollBy(0,8000)'
self.driver.execute_script(js)
# 翻页
for page in range(20): # 0~4
selectors =self.driver.find_elements_by_xpath('//div[@class="cmmts j-flag"]/div')
for selector in selectors:
text = selector.find_element_by_xpath('.//div[@class="cnt f-brk"]').text
# self.saveData(text)
YunSpider.saveData(text)
# 找到下一页的元素，进行点击
# .find_element_by_partial_link_text('下一')，获取文本链接 模糊匹配
nextPage =self.driver.find_element_by_partial_link_text('下一页')
# 点击下一页
nextPage.click()
time.sleep(.5)
@staticmethod
def saveData(item):
with open('{}.txt'.format(songname),'a',encoding='utf-8')as f:
f.write(item+'\n\n')
# print(item,file=f)
if __name__ =='__main__':
songname = 'the_truth_that_you_leave'
url ='https://music.163.com/#/song?id=139774'
yunSpider = YunSpider(url)
yunSpider.getContent()
爬取评论10页，超过10出了点问题。
网抑云
只需要换掉歌曲网址，换掉循环次数就可以爬取不同歌曲的评论
歩いても 歩いても -----评论
帐号已注销：你才二十几岁，可以成为任何你想成为的人。
爱笑的男孩运气不会太差：年轻人多听音乐少装逼
dddddianaa：父亲已经去世多年，今天去参加父亲老友儿子的婚礼，那位叔叔指着我和他家一众亲戚说“这是我最好的朋友的女儿”。差点当场哭出来，感觉很高兴，这么多年过去了已久还有人记得我父亲，还有人会提起他
黑暗温柔凝视过我：今天我在的城市突然降了温下着不大不小的雨，在卫生间隐约听到马路上车轮下淅淅沥沥水声，发呆的时候突然有个奇怪的念头：想在这样的天气里被求婚 被问“要不要作为我的家人搬来我家”。
花本：自从做烘焙时听这首BGM，就再也没有烤糊过...
Sober_forward：回忆起那个傻乎乎傻乎乎的我，真想过去抱她一下，告诉她”你很好“
GESEN_MANABU：还有214天我就二十岁了，现在我没有变成自己喜欢的样子，也没有变成自己讨厌的样子。有点庆幸，又有点难过。
无敌最俊朗的叶不羞：听这首想找个人结婚，我做饭他洗碗，我看电视剧他看球赛，我看言情他看国家地理，我听周杰伦他听陈奕迅，我听纯音乐他听民谣。多好。
meiki77：“很痛的。” 每当我这么说，父亲就故意用他的下巴蹭我的脸，我突然想起那时候的触感，一个人在棺材旁哭泣。而一旦开始哭泣，我的眼泪就再也停不下来了。
南弦天：原木桌椅，微醺，枫叶糖，阳光耀眼的下午三四点，等你。
_張文和：你说你因为这首歌 爱上一部电影。我却因为你爱上这首歌 和那部电影。
树筝：年轻，人多，听音乐少，装逼！
伪谣张小样：喜欢纯音乐，因为一首曲子每个人却都能听到不同的自己~~
雨夜屠夫檐下听雨：（降全音A调指法）和弦走向：①Amaj7→Dmaj7→Cm7→Bm7→Em7→Amaj7 ②Dmaj7→Cm7→Bm7→Amaj7 Bm7→Cm7→D→Em7 Dmaj7→Cm7→Bm7→Amaj7 Bm7→Em7
Fdream：清脆的吉他犹如夏日里清凉的涟漪，就这样让平淡的生活慢慢地向前，步履不停。「步履不停」原声
樂詩Winnie：未来可期
马龙正在死去：加油，一定考个好大学，好大学真的不一样。
WeskerT：她把我的好友删除了，我再也无法给她推荐这些好听的歌听了。
小山着衣：被更多人听到啦，希望我们都能好好生活✨
小山着衣：好高兴呀已经一万五千多评论啦
小山着衣：看完海就去看山
谷雨ice：“人生路上，步履不停…”
hello浪荡绅士：被迫通宵的又一天，不知道热衷打麻将的室友将来大学毕业后能混出什么样
寄诗于从嘉：你老了，走路走得慢，但我是個要强的人，所以我不能站在原地等你，只好假装停下来玩手机，但還是會被你罵，你個固执的老頭。
桑来93：只是为了得到爱的人 认可 真的
抬头_有阳光：眼睛要向前看 满怀希望就会所向披靡
Veronica0403：2021考研，我要一战成硕！！
锅巴与松鼠：累了就休息一下吧，不会有什么的
___杂食动物：啊 是温柔的让人听了会不自觉嘴角上扬的歌啊
廖文雅：心情不好的时候我就想坐在湖边 真想生活在有海的城市阿！
问井今天熬夜了吗：国内现代华语乐坛都习惯抄，打死改不了的那种
白浪红尘：我们一起加油
沉默昊哥：玮玮动听
南浔浔m：
南浔浔m：云友？
Caroline_OVO：好温柔，给我个抱抱吧~
New小憨：好嘞哥
艾家偏袒：加油鸭！！
沉默昊哥：南京 玮玮动听 今天听到了多年前电台里玮玮的背景音乐
-bala-bala-bala-：j
-bala-bala-bala-：oojhjoi0I0o0oiu00I
英雄陈：以前只觉得老了很可怕，今天没想到这么可怕
听歌的小鸟儿：能闻到味道，感觉到阳光，多么幸福啊
Fsln_：太现实也不可取
Ti逸：你是我等到的另一半，而我却不是你需要的另一半。
-如常生长：我可以!
怀特不：加油
巴黎熬汤：科二三次呢！难过的不得行。但是证总会到手的。。最后把车开到飞起！让难过呜呼[多多耍酷]
远方与寂静：是吗.看不懂就是一个愚蠢的回复，这不是刻板偏见吗，请不要为了辩证而辩证.
humuhumuha：生活的细枝末节，像诗。吟唱地是千百万种不同的命运，和相同的感动
健美许铭伦：我天赋不好，可偏偏我就选择了健美这条路，练健美究竟是为了什么呢？
是为了更美好的生活？
更美好的形体？
是为了竞技体育？
还是
为了摆脱那个自卑的灵魂
我所热爱的这片夜：那些在深夜里搏斗的人，在白天却连站起来的力气都没有
我所热爱的这片夜：不是
我所热爱的这片夜：找个老实人接盘就完事了
我所热爱的这片夜：浪漫主义不可取
莉阮：me too
施姜：差点以为闹钟响了哈哈哈哈
C-Minaj：我也是！
全能小法师：与其痛苦的相处，不如一个人的独处。缘分没到，再等等吧。
雨后路人化鱼鲔：“一个喜欢听轻音乐的人，是一个需要时间与自己独处的人，也是需要借助轻音乐来进行思绪沉淀的人。这样的人，很有气质，温柔，大度，有爱心，他会去倾听。当然，他可能是个沉默不善言辞的，但他的内心世界一定很丰富。但这样虔诚的人，也一定在等待着这样的另一半，相濡以沫，温暖一辈子”
李木子1108：26岁了，却不相信爱情，不相信男人，恋爱恐惧症，结婚恐惧症。但是家里父母一直在催？我应该为了父母找个人将就，还是自己孤独的漫长等待？
着眼婉安：是大海边吗
云多深：好好学吉他，以后就可以弹给你听了。
草莓解冻：加油加油 优秀死了你
murph_W：我会去做自己想做的事
夏目贵志Natsume-：唯獨成為不了你自己
枫落wink：加油
就停止期待吧：我也要去!约定好了
宿火：哈哈哈奇怪的
执笔弃花间__：嘿嘿嘿
Morning_WW：本人女，想找一个喜欢听钢琴纯音的男孩子做云友
赶赴一场月光：@细节怪物skr @为学习再拼拼-13班G @宿火 @执笔弃花间__ @没有牙的糖 这首歌和下午的风一定像咖啡伴侣遇见了咖啡
bborab：如果你觉得生活寡然无味，你无法按照自己的喜好去活，甚至，你连自己喜欢什么都不知道，你感受不到风，感受不到爱，感受不到自己，那么，这很正常，这不是问题，也无需答案。你甚至很勇敢，因为你在面对这些。这已经是一个好的开始了。
Doctor一JayW：这不是别人有优越感，而是你内心觉得别人优秀嫉妒而已。 就好比我看到他说的这段话，心里也会想你看得懂了不起什么。 本身回复看不懂怎么办就是一个很愚蠢无心的回复。 别光嫉妒别人要让别人羡慕自己。
严义翔：看来我只能默默炫耀自己的贱桥大学和牛筋大学的通知书了
银川_official：你存在，我深深的脑海里～
叶紫的心事：人生步履不停，热爱比海更深
是你的乞山呀：呜呜真好
CJeppesen：恭喜！
hhhhhhhhttttttrrregvch：淡淡的忧伤
_Vicq：我也很重视友情，目前能无惧说出心里话的是我闺蜜，而不是家里人，而我和她将近10年的友谊，我才敢对她吐露半年真正的心声。亲情如果空缺，大半会需要别的地方来弥补，友情或者爱情。我很珍惜，但是我也有心理准备，无论是友情，爱情，亲情，谁都有可能离开自己，无论对方是生，还是死。
饭点不练琴：最近老是没忍住想哭
饭点不练琴：我想回家 我快顶不住这个变态机构了
奈霖_：我一定要好好学习
今天就分开：我们应该慢下来享受生活
Cytuinay：好熟悉
13岁天才少女：加油啊！
Veronica0403：沾沾喜气，我考研
罪犯洪某某：“好想成为那种很哇塞的人啊。”
Mors-sola7：想在森林旁大海边盖一座房子
-大太犬-：本人男，想找一个喜欢听钢琴纯音的女孩子做云友
月黑风高夜chen：一步错 步步错
海默haimo_：我记错了不好意思。。。是不止书店，听说现在已经关门了
易小名gzjy：相信自己可以的！
乐海泛轻舟：在厦大读了三年书的我怎么不知道...
_-soda_：祝贺！
用户3936673038：为什么科三会让我如此难过
彤彤_DDZS：冷吗哦
快哉风_Zzdc：这么好的一位少年，那么他喜欢着的少女，得是多好的姑娘啊？
快哉风_Zzdc：谢谢了
原来流星不下雨：把一切化成一句晚安。
逃跑失败了：每次一点开这首歌就要循环很久很久
博多豚骨拉面汤：是两个人交叉相遇吗？
陌-醒：没关系，哭一会儿吧，然后抬头看看天空，看看美好的事物，沧月很美好，清风很美好，你也是。
不是金毛玲：想要停下一会儿看看自己
永不止步07：步履不停吧
你努力啊_yu：超级温柔
HJsa-c：好～
你觉得我像什么动物：因为现在没有钱开
不可以吃太胖：我25岁了。好怀念15年的我啊
安娜的海豚呀：谁把快乐还给我
MAKE_OUTHILL：@HJsa-c 学会给你弹好不好
碣兮：要健健康康，平平安安，顺顺利利呀~
景颇陈陈：是啊，都是表面平静，内心却波涛汹涌。年龄越来越大。朋友越来越少。生活的琐事越来越多。越来越感到孤独。而且慢慢的习惯了孤独。和人接触也越来越浅尝辄止。这就是长大吧。太累
沧月清风：反复的挣扎，反复进入黑暗
沧月清风：能不能呼吸过来呀
沧月清风：我活着好难受呀
晴天先生w：喜马拉雅，静播里的老师总会用着背景乐来讲述儿时的故事
夏城河畔：我们都知道自己不想成为什么人，很多人却不知道自己想成为怎样的人。
FShu-：打包！
南浔浔m：要开心
___林子睡着了：谢谢你 有被温暖到
ttttingkl：以前停滞不前时连续推给我。时隔多年账号也换了一个；再次推给我，在我准备重新出发的时候。
yulight：22岁，我对梦想做了第一个让步和妥协……我真的还能成为自己想成为的人吗
千千三叶：真棒啊
killpg：厦大欢迎你！！
海默haimo_：!!!是我记错了，不好意思!!!我会努力的，谢谢你的祝福!
南浔浔m：抱抱
南浔浔m：[多多可怜]
御也葎：@怅紈
风吹飞翔：对某些人不认真练琴表示生气(*｀･з･)ﾑｯ
Brave杨杨杨：谢谢已经上岸了
花果山大王忘与丹：你说的应该是不止书店吧！不过书店已经关门了，能看到海的上弦咖啡也有很好的咖啡，期待你来～
Andy留白：同感了。
莫老美：我才二十多（28），我喜欢现在的我，为将来，为下一个更好的我分奋斗的我
hendokriston：加油＾０＾~
flytothepluto：我累了
笙初耶：耕耘今天， 收获明天 ！
一个人的歌拉：身边亲戚朋友，陆陆续续结婚了，表面平静内心，其实有点慌，害怕孤独，也想有甜蜜蜜的爱，不过现在享受的一个人的生活，其实也挺好的，自由，没有束缚，愿做自己，世俗这个东西以旁观者的身边去看待就好了，别人认为的好，不一定好，愿在有限的时间里，随心走。。。
酸梅XXX：人活在记忆里 爱活在爱里
伶忧：是的，“我”很好
她是我最想抵达的星球：好哦 我记住了
孤独和空欢喜：我对你仍有爱意 我对自己无能为力
未眠i__：你可以享受微醺的感觉，但是不要在微醺的时候做出决定，胡思乱想是难免的，音乐也有致幻的能力，仅仅是声音却能左右你的很多情绪
她是我最想抵达的星球：好像很有道理
未眠i__：错了几年都没想明白如果重来该怎么走
未眠i__：与其说是为自己而活，不如说是为当下而活，不需要你有多么远大的志向，哪怕只是做一个普通人，能照顾好自己，能体谅身边的人就可以了，很多时候不是想法矛盾，人本来就是矛盾体，对当下不甘却又不曾计划将来，目标可以小一些，在自己能力之内且能坚持下来的，你还年轻，多加油少抱怨
未眠i__：不只是微醺，反而越简单的旋律越是能让你的思绪沉溺其中
永不忘飞翔的姿态：一定要加油，像城南那样勇敢！
白浪红尘：还算理想，现在在学英语做出国读研的打算
谜境de幻影：q
脸红200123：生命的尽头你看不到也摸不到，不知道前面的路有多远有多坎坷，当你走过很多步的时候，回头看看一切都值了。
在下俗人：阿飞：老板！来碗牛肉盖饭！
egegegeg：不忘初心
ceq-：不忘初心
胖胖_0801：不忘初心
rrrrua-：2020-10-10 And the story begins... 希望若干年后也不会忘记初心❤️
漈川：个人认为这首歌和《回到过去变成猫》绝配
menpz_：我真的好想有人能陪陪我啊
Mrcuriosityloveme：走吧
共和国和哥哥哈哈哈：祝好
橙子CAI8：一定要尽全力啊！
雨时的房子：可不要小瞧了我的决心呀
-清醒就是犯罪：就是用九键打字步履不停，你手指按过的地方连起来是一个 十
秦究丫：加油加油！！
Stalos：真好听。
-佟桦-：不需要 就过你自己想过的生活
中意玖二二：音乐是我生命里的光
中意玖二二：很遗憾，没有成为自己想成为的那一类人
汪丞：我也是
Echo_Krysber__：没事没事啦，去新学校好好努力，认真考研考上自己心仪的大学堂!♬︎*(๑ºั╰︎╯︎ºั๑)♡︎
米奇哥哥_：谢谢你呀
米奇哥哥_：希望明年的生日她能回来。❤️☺️
-萨帕兄：棒
popular-aurora：北大，清华，北交，北航，中国人民大学不香吗（泪奔）
熙熙甜甜-：希望每年的生日都能有人陪你一起度过
cYanFFF：保佑我
KeRwin-墨：恭喜恭喜！继续加油哈
_阿云龙_：想永远做个普通人
TenFall：和你一起听的时候很放松，现在自己听有种说不出来的难过
TheWind山青雨：步履不停，迎着风走下去吧
TheWind山青雨：抱抱你
米奇哥哥_：谢谢你啊谢谢 祝你好运 温柔生活 温柔统统奔向你
--及時行樂_：迟到的生日快乐啊
天黑黑丶丶丿：我爷爷是在一个月前走的，想起以前每年回去看他，他因为耳朵不好，总会把电视声音调到最大，看他最喜欢的戏曲频道，有时候我还会觉得很烦。但是前两天回去看望奶奶，顿时觉得偌大的屋子显得冷冷清清，我看着他房间，总会想起他坐在床上看电视机的身影。想起我小时候和爷爷生活的点点滴滴。
罗泰勒的车车：在米修木心展的留言本上看到有人写了这首歌✨好巧呀你也喜欢这首歌吗
jiudaozheleba：你才二十几岁，可以成为任何你想成为的人
野履秋子：回看呀，从嘻嘻哈哈的无知，到经历离别的崩溃，再到与摸不着看不到的伤痛 做斗争....从快乐到不快乐，我思考了好多好多。现在又变得快乐些啦，感觉当下那一瞬间的幸福就很来之不易啦~未来不知道还有多长，但愿我能成为我记忆中的模样~
历史老师的大克星：忘了那些修辞华丽的小情小调吧，在简单的音符之间才藏有生活的真谛
混世小魔王tttt：爱你哟~未来还长呢，自己快乐最重要！加油
姐姐_frR0：如果找不到一个坚持下去的理由，那就找一个重新开始的理由
Jessica_zhok：生日快乐
明天周7：今天是要变成小朋友的一天不许生气不许生气开开心心
吴知浅_：“当你带着目的性去看身边的人，你会发现能让你第一眼就有好感的人真的少之又少，之前说要紧紧抓住，我不以为然，可当你遇到你真正不想错过的人，你会无限后悔，真的。 ”
米奇哥哥_：告诉你个秘密，今天我生日。
黑子鹤-one：可以的话让我牵着毛雅波的手到老的时候去散步再听听这首歌吧
間之彼方：没有一天不想你啊
冰梦886：已经来不及了，已经就是这样了。已经无所谓了
海默haimo_：行动!
海默haimo_：嗯嗯，一定有这个图书馆的，只是当时去的时候太小了，担心名字会记错
海默haimo_：加油!
离天尧：南宁八中广播站~
萌军情报员：另外2021是百年校庆
学弟（妹）加油(•̀⌄•́)
萌军情报员：！！真的吗 来厦大一个月了都没注意到
周末没课去看看w
绿绿的月：祝你好运！
-Itsdan：“人生路上步履不停 为何总是慢一拍”
何者_：爷爷住院两三个月了 国庆一号那天老妈叫我可以打给爷爷问好。我没有打，结果昨天传来爷爷凌晨抢救无效的消息。
“人生路上步履不停，为何总是慢一拍”
佛说迷人炜：我不信我不行
MJYX1808：靠，我生在这个伟大的时代我就不应该一辈子窝在中国，我要走出去，我一定要走出去。
慢音乐和慢生活：死亡不是结束，遗忘才是。
叫我traffic就好：一路小跑到公园 回头一看已经是黄昏了 我还是不能停下来 前面有人在等我 我不能失约啊
无-氏：这个歌吖！是我和男朋友在一起时的浪漫！
安安Answers：明年拿到硕士学位，加油。
会画画的可乐：你们好正能量啊！
草莓解冻：现在怎么样了啊
我有一个装满星星的口袋M：人生总会犯下不管付出多少代价都无法挽回的过错
明天周7：以为2020年是我慢慢开始变好 重新开始的一年 生活就这样 又一次对我暴击
星坠月堕：400多分的我还在做着遥不可及的梦，玩着心有所愧的手机和电脑
兮兮兮兮兮兮兮兮爷：on
90945：年轻人多听音乐少装逼
年轻人，听音乐少，装逼多
菲南1204：加油 加油 加油
幸子小姐--：找到了！！！谢谢！！
偷喝汽水的小梁叶：我的目标也是厦门大学。加油呀！希望2021年秋可以有幸与你相识。
偷喝汽水的小梁叶：加油，已经很棒了呢，好运终将来临。
车之干：是传琦SAMA的kiss啦
喜欢睡觉的鸡腿：好像真的网络上认识的人不能陪你一辈子
香草味的矮丹：写作业 歌单播放这首纯音乐 觉得很好听 又重复听了几遍 国庆作业好多啊 加油加油加油
厌潮月：抱抱自己吧！
吾皇霍尔：恭喜你
pk_Vaporwave_2：前奏好熟悉 好像一个女生翻唱的日语歌曲
可乐Scarlett：专升本，目前研一，大家都加油哈~
那个叫乌鸦的少年：只有步履不停
轻烟残霞：我听了很多纯音乐，但也只有这首让我念念不忘，就像万千世界只有你一人入得了眼
初见时人间苏杭熙熙攘攘：加油奇迹在等着你
一刻钟听好：我想成为我自己。我是谁，我前进的方向是什么？定好了，一步步来呗~我其实害怕高考、中考，这种方式着实不适合我，平时很高，真考起来，却状况频出，我擅长将功夫用在平常，毕其功于一役，我不奢求，一步步来吧，但是一定一定，要想钱理群先生一样，心中有景、脚踏实地
突然反思了一下，什么网抑云，不喜欢说这个词了，我觉得它以偏概全。
