1 """
2
3 用selenium+PhantomJS配合，不需要进行逆向工程
4 python 3下的selenium不能默认安装，需要指定版本2.48.0
5 """
6 from selenium import webdriver
7 import os,requests
8
9
10
11 url = 'https://music.163.com/#/playlist?id=884698131'#网易云音乐歌单
12 headers = {
13 'User-Agent':'User-Agent:Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36',
14 }
15 driver = webdriver.PhantomJS()
16 driver.get(url)
17 driver.implicitly_wait(20)#隐式等待20s
18 #pprint.pprint(driver.page_source)#查看源代码
19
20 def is_chinese(uchar):
21 """
22 判断一个unicode是否是汉字
23 :param uchar: <char>字符
24 :return: <boolean>
25 """
26 if uchar >= u'\u4e00' and uchar <= u'\u9fa5':
27 return True
28 else:
29 return False
30
31 def is_number(uchar):
32 """
33 判断一个unicode是否是数字
34 :param uchar: <char>字符
35 :return: <boolean>
36 """
37 if uchar >= u'\u0030' and uchar <= u'\u0039':
38 return True
39 else:
40 return False
41
42
43 def is_alphabet(uchar):
44 """
45 判断一个unicode是否是英文字母
46 :param uchar: <char>字符
47 :return: <boolean>
48 """
49 if (uchar >= u'\u0041' and uchar <= u'\u005a') or (uchar >= u'\u0061' and uchar <= u'\u007a'):
50 return True
51 else:
52 return False
53 def is_filename(uchar):
54 """
55 排除文件名不可用的字符,这里请注意都是在英文输入法下的，若是中文输入法下的例如？“等是可以用来生成文件名的
56 \/:*?"<>|
57 :param uchar:
58 :return:
59 """
60 if uchar == u'\u005c' or uchar == u'\u002f' or uchar == u'\u003a' or uchar == u'\u002a' or uchar == u'\u003f' or uchar == u'\u007c' \
61 or uchar == u'\u003c' or uchar == u'\u003e' or uchar == u'\u007c':
62 return False
63 else:
64 return True
65
66 def format_str(content):
67 """
68 将字符串content中的字符逐个判断
69 :param content: <str>输入文本
70 :return: <str>输出只包含中文、数字及英文字母的字符串
71 """
72 content_str = ''
73 for i in content:
74 if is_chinese(i) or is_alphabet(i) or is_number(i):
75 content_str = content_str+i
76 print('处理后的content:',content_str)
77 return content_str
78
79 def format_str2(content):
80
81 content_str = ''
82 for i in content:
83 if is_filename(i):
84 content_str = content_str+i
85 print('处理后的content:',content_str)
86 return content_str
87
88
89 driver.switch_to.frame('g_iframe')#跳转到id为g_iframe的iframe框架下
90
91
92 list_name = driver.find_element_by_class_name('f-ff2').text #歌单名称
93 #大坑，源代码中是class=“f-ff2 f-brk”，属性值中间有空格，全写上报错
94 # #list_name2 = driver.find_element_by_xpath('//div[@class=\"m-info\"]/div[2]')
95 print(list_name)
96
97 #list_path = os.getcwd()+ '/网易云音乐歌单-' + format_str(list_name)
98 list_path = os.getcwd()+ '/网易云音乐歌单-' + format_str2(list_name)
99
100 if os.path.exists(list_path):
101 pass
102 else:
103 os.mkdir(list_path)#若文件夹不存在，则新建
104
105 ids = driver.find_elements_by_xpath('//a[starts-with(@href,"/song?id=")]')
106 names = driver.find_elements_by_xpath('//a[starts-with(@href,"/song?id=")]/b')
107 for i in range(0,len(ids)):
108 #id = ids[i].get_attribute('href').strip('https://music.163.com/song?id=')#有问题,获取的某些歌曲id不全，原因未知
109 id = ids[i].get_attribute('href').replace('https://music.163.com/song?id=','')
110 name = format_str2(names[i].get_attribute('title').strip().replace('/',''))
111
112 print(id,name)
113 link = 'http://music.163.com/song/media/outer/url?id=' + id + '.mp3'
114 #urllib.request.urlretrieve(link,'E:/'+id+'.mp3')#有时候下载下来的歌曲只有几十kb
115
116 if os.path.exists(list_path + '/' + str(i + 1) + '_' + name + '.mp3') \
117 and (os.path.getsize(list_path + '/' + str(i + 1) + '_' + name + '.mp3')) >= 102400:
118 # 若歌曲存在且能正常播放（此处判断为大于100kb）则不再下载
119 pass
120
121 else:
122 with open(list_path + '/' + str(i + 1) + '_' + name + '.mp3', 'wb') as f:
123 f.write(requests.get(link, headers=headers).content)
124
125 #有些歌曲能下载下来但是只有67kb左右，也无法播放，也就是网易云上显示但是无法在线听的音乐
126 if os.path.getsize(list_path + '/' + str(i + 1) + '_' + name + '.mp3') < 102400:
127 os.remove(list_path + '/' + str(i + 1) + '_' + name + '.mp3')
128 else:
129 pass
130
131 driver.switch_to.default_content()#返回主文档
