爬去百度音乐的歌曲,突破不能点播的限制,将其下载。

来源:互联网 发布:python for循环实例 编辑:程序博客网 时间:2024/06/10 08:36

百度音乐因为限制有些歌曲不能点播,譬如上图的所有歌曲……但其实它们都在百度里隐藏着,

但是我们可以根据其他能点播的歌曲,如林志炫的“单身情歌”,找到规律,从而下载下来。

下面说下整体思路:

1.通过在搜索框里输入“林志炫”得到其歌单界面,点击“单身情歌”的播放按钮会跳转到新页面;

2.在新页面里的network里寻找media的mp3的url,可以发送get请求返回二进制,下载到本地,证明是这首歌的content所在;

3.在all里从刚才的media网上寻找,争取找到一条preview出“单身情歌”信息的url,这个便是歌曲的api(是js的)。有可能找不到api,因为百度音乐根据搜索同一首歌的方式不同,会产生不同的请求方式……当时被坑了好久。总之找不到就换首歌,或换一种搜歌的方式:先搜人再搜歌、直接搜歌、从top榜里进入等等,要耐心。

4.根据找到的api寻找规律,发现是由每首歌的id等参数拼接成的,其余参数一样,只要换了id就是另一首歌的api;

5.好了,去歌手的歌单列表里返回此页所有的歌曲id,再构建循环便可以下载此页所有歌曲;

6.最后,构造翻页url便可以了。

/20171222

为了要搭建网站稍微更改了一下代码。/20171225

# coding: utf-8import requestsimport refrom fake_useragent import UserAgentimport jsonimport timeimport randomdef get_html(url):    response = requests.get(url,headers = {'User-Agent':UserAgent().random})    return responsedef search_songs(page):    # 构造歌手的歌曲列表页面的url    singer_url = 'http://music.baidu.com/search?key=' + singer_name + '&jump=0&start=%s&size=20&third_type =0' % str(page)    """    http: // music.baidu.com / search / song?s = 1 & key = % E5 % 91 % A8 % E6 % 9    D % B0 % E4 % BC % A6 & jump = 0 & start = 0 & size = 20 & third_type = 0    """    singer_response = get_html(singer_url)    # print(singer_response.text)    singer_response.encoding = 'utf-8'    pattern = re.compile(r'sid":(\d+?),&quot',re.S)    song_lists = re.findall(pattern,singer_response.text)    # print(song_lists)    # return song_lists    for song_list in song_lists:        yield song_listdef writef(content,song_name):    with open('%s.mp3' % song_name,'wb') as f:        f.write(content)def one_page(page):    for sid in search_songs(page):        # print(sid,song_name)        # 根据寻找到的api的统一格式,通过每首歌曲的id/sid/song_id(都是一个东西)来构造不同歌曲的入口        api = 'http://musicapi.qianqian.com/v1/restserver/ting?method=baidu.ting.song.play'\              +'&format=jsonp&callback=jQuery1720006718159514979449_1513784517086&songid=%s&_=1513784517579' % sid        api_response = get_html(api)        FileLink_json = re.findall(r'\((.+)\)',api_response.text)[0]        # print(FileLink_json)        file_link = json.loads(FileLink_json)["bitrate"]['file_link']    # 通过loads()方法将json转换成Python对象        song_name = json.loads(FileLink_json)["songinfo"]['title']        # print(song_name+":"+file_link)        content = get_html(file_link).content    # file_link就是每首歌的content所对应的url        print("下载 "+song_name+" ing")        writef(content,song_name)        print("下载 "+song_name+" done")if __name__ == '__main__':    singer_name = input('输入要查询的歌手姓名:')    for i in range(1):        one_page(i*20)        time.sleep(random.uniform(1,4))

最后,其实每页之间都有重复的歌曲,但是在程序上没进行去重处理,因为我是以歌曲的名字命名文件的,当程序写入相同歌名的歌曲时,电脑会自动覆盖。