這是戀習(xí)Python推薦的第125篇好文
來源:Python爬蟲實(shí)踐之路
作者:星星在線
前一段時(shí)間書荒的時(shí)候,在喜馬拉雅APP發(fā)現(xiàn)一個(gè)主播播講的小說-大王饒命。聽起來感覺很好笑,挺有意思的,但是只有前200張是免費(fèi)的,后面就要收費(fèi)。一章兩毛錢,本來是想要買一下,發(fā)現(xiàn)說的進(jìn)度比較慢而且整本書要1300多張,算了一下,需要200大洋才行,而且等他說完,還不知道要到什么時(shí)候去。所以就找文字版的來讀,文字版又有它的缺點(diǎn),你必須手眼聯(lián)動(dòng)才行。如果要忙別的事情,但是又抑制不住想看的沖動(dòng),就很糾結(jié)了。在網(wǎng)上找了一圈,沒有其他的音頻。而且以前用的那些有閱讀功能的軟件,比如微信閱讀、追書神器也都開始收費(fèi)了。那怎么辦呢?這能難倒一個(gè)程序員嗎?必須滴、堅(jiān)決滴不能。我用的可是世界上最好的編程語言-Python
于是乎,自己動(dòng)手豐衣足食,接下來就讓我們實(shí)現(xiàn)自己的小說閱讀器吧。
要想讀文字,就必須要用到語音合成。現(xiàn)在這種語音合成的軟件有很多,其中訊飛和百度是比較好的兩種,我們這里就使用百度語音合成API來實(shí)現(xiàn)。
首先注冊(cè)百度賬號(hào),然后登錄到百度AI開放平臺(tái)
),創(chuàng)建一個(gè)應(yīng)用
填寫應(yīng)用名和描述信息提交
記住AppID、API Key、Secret Key,在使用API的時(shí)候會(huì)用到,查看一下技術(shù)文檔
),使用pip install baidu-aip
安裝完API,文檔內(nèi)有詳細(xì)的示例代碼,很容易就上手了。里面有各種參數(shù)解釋,比如音量、語調(diào)、語速、發(fā)聲人等。現(xiàn)在語音合成已經(jīng)有了,已經(jīng)有了閱讀的前提,下面就是獲取小說內(nèi)容了。
小說內(nèi)容的獲取我們從筆趣閣網(wǎng)站上獲取,一方面免費(fèi),另一方面沒有反爬,找到網(wǎng)站首頁https://www.biquge.info/40_40289/,使用requests大法就可以了。簡單分析一下頁面
所有章節(jié)信息都在dd元素下,而且鏈接也是很有規(guī)律的,直接用xpath獲取所有章節(jié)列表信息。
def get_chapters(self):
url = 'https://www.biquge.info/40_40289/'
r = self.session.get(url)
r.encoding = chardet.detect(r.content).get('encoding', 'utf-8')
html = etree.HTML(r.text)
for item in html.xpath('//dl/dd/a'):
yield item.attrib['title'], url + item.attrib['href']
章節(jié)內(nèi)容獲取也非常簡單,就不分析了
def get_content(self, url):
r = self.session.get(url)
r.encoding = chardet.detect(r.content).get('encoding', 'utf-8')
html = etree.HTML(r.text)
title = html.xpath(r'//*[@class='bookname']/h1')[0].text
for info in html.xpath('//div[@id='content']'):
text = info.xpath('string(.)')
這里有一點(diǎn)要注意的,獲取的章節(jié)內(nèi)容中有html元素,xpath為我們提供了string(.),提取多個(gè)子節(jié)點(diǎn)的文本,非常好用。
小說內(nèi)容獲取成功了,與語音合成結(jié)合一下,小說閱讀器的雛形就有了。簡單實(shí)現(xiàn)如下:
import chardet
import requests
from lxml import etree
from aip import AipSpeech
class CollectNovels:
def __init__(self):
self.session = requests.session()
self.session.headers['user-agent'] = 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_14_5) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/74.0.3729.169 Safari/537.36'
''' 你的 APPID AK SK '''
APP_ID = '16416498'
API_KEY = 'oEWGafQkaUGqmsmPbfkE5OMx'
SECRET_KEY = '6jdsUcH0PXz5TYoELU47u58W5vPV9lwf'
self.client = AipSpeech(APP_ID, API_KEY, SECRET_KEY)
def get_chapters(self, url):
r = self.session.get(url)
r.encoding = chardet.detect(r.content).get('encoding', 'utf-8')
html = etree.HTML(r.text)
for item in html.xpath('//dl/dd/a'):
yield item.attrib['title'], url + item.attrib['href']
def get_content(self, url):
r = self.session.get(url)
r.encoding = chardet.detect(r.content).get('encoding', 'utf-8')
html = etree.HTML(r.text)
for info in html.xpath('//div[@id='content']'):
text = info.xpath('string(.)')
for line in text.split('。'):
content = self.client.synthesis(line, 'zh', 1, {'per': 0})
with open('auido.mp3', 'rb') as fp:
fp.write(content)
if __name__ == '__main__':
novel = CollectNovels()
home_url = 'https://www.biquge.info/40_40289/'
for title, url in novel.get_chapters(home_url):
novel.get_content(url)
這里是生成了mp3文件,按行生成以后,再使用合成軟件合成后,我們就可以放在任意地方去聽了。但是這樣也有缺陷,必須提前生成,然后才能使用播放器聽,這樣不是很方便。如果可以邊生成邊播放是不是更好呢?
我們可以使用python的pygame庫,其他的好幾個(gè)庫都不太好用,有些已經(jīng)年久失修了,所以就不用了。
import time
import pygame
from io import BytesIO
pygame_mixer = pygame.mixer
pygame_mixer.init(frequency=frequency)
byte_obj = BytesIO()
byte_obj.write(content)
byte_obj.seek(0, 0)
pygame_mixer.music.load(byte_obj)
pygame_mixer.music.play()
while pygame_mixer.music.get_busy():
time.sleep(0.1)
pygame_mixer.stop()
這里使用BytesIO將語音合成的二進(jìn)制文件存儲(chǔ)在內(nèi)存中,就不需要再保存成本地mp3了,有一個(gè)需要注意的地方pygame_mixer.init(frequency=frequency)
,這個(gè)frequency參數(shù)是音頻頻率,如果不設(shè)置的話默認(rèn)是22050,播放出來的聲音和mp3播放相差太大了,一直以為是這個(gè)庫有問題,換了好幾個(gè),有的是用不了,有的有問題,后來我才發(fā)現(xiàn)需要設(shè)置這個(gè)參數(shù),那么這個(gè)參數(shù)從哪里來呢?查看之前生成的mp3文件屬性
然后將頻率設(shè)置為16000就可以了。
要生成我們最終可以使用的閱讀器還有幾個(gè)問題需要處理。
合成一句播放一句,這樣會(huì)有停頓,所以要使用并行處理。
每次合成如果不進(jìn)行存儲(chǔ),下一次就必須要重新合成。所以我們使用數(shù)據(jù)庫存儲(chǔ)合成的語音。
聯(lián)系客服