国产成人精品久久免费动漫-国产成人精品天堂-国产成人精品区在线观看-国产成人精品日本-a级毛片无码免费真人-a级毛片毛片免费观看久潮喷

您的位置:首頁技術文章
文章詳情頁

python爬取豆瓣電影TOP250數據

瀏覽:43日期:2022-06-18 16:25:24

在執行程序前,先在MySQL中創建一個數據庫'pachong'。

import pymysqlimport requestsimport re#獲取資源并下載def resp(listURL): #連接數據庫 conn = pymysql.connect(host = ’127.0.0.1’,port = 3306,user = ’root’,password = ’******’, #數據庫密碼請根據自身實際密碼輸入database = ’pachong’, charset = ’utf8’ ) #創建數據庫游標 cursor = conn.cursor() #創建列表t_movieTOP250(執行sql語句) cursor.execute(’create table t_movieTOP250(id INT PRIMARY KEY auto_increment NOT NULL ,movieName VARCHAR(20) NOT NULL ,pictrue_address VARCHAR(100))’) try:# 爬取數據for urlPath in listURL: # 獲取網頁源代碼 response = requests.get(urlPath) html = response.text # 正則表達式 namePat = r’alt='(.*?)' src=’ imgPat = r’src='https://www.xxx.com.cn/bcjs/(.*?)' class=’ # 匹配正則(排名【用數據庫中id代替,自動生成及排序】、電影名、電影海報(圖片地址)) res2 = re.compile(namePat) res3 = re.compile(imgPat) textList2 = res2.findall(html) textList3 = res3.findall(html) # 遍歷列表中元素,并將數據存入數據庫 for i in range(len(textList3)):cursor.execute(’insert into t_movieTOP250(movieName,pictrue_address) VALUES('%s','%s')’ % (textList2[i],textList3[i]))#從游標中獲取結果cursor.fetchall()#提交結果conn.commit()print('結果已提交') except Exception as e:#數據回滾conn.rollback()print('數據已回滾') #關閉數據庫 conn.close()#top250所有網頁網址def page(url): urlList = [] for i in range(10):num = str(25*i)pagePat = r’?start=’ + num + ’&filter=’urL = url+pagePaturlList.append(urL) return urlListif __name__ == ’__main__’: url = r'https://movie.douban.com/top250' listURL = page(url) resp(listURL)

結果如下圖:

python爬取豆瓣電影TOP250數據

python爬取豆瓣電影TOP250數據

以上就是我的分享,如果有什么不足之處請指出,多交流,謝謝!

以上就是python爬取豆瓣電影TOP250數據的詳細內容,更多關于python爬取豆瓣電影的資料請關注好吧啦網其它相關文章!

標簽: 豆瓣 Python
相關文章:
主站蜘蛛池模板: 精品国产一区二区三区免费看 | 在线视频久 | 狠狠色丁香九九婷婷综合五月 | 美国人成毛片在线播放 | 日本一区二区三区四区公司 | 久久久精品2018免费观看 | 性色tv| 国产亚洲一区二区三区不卡 | 久久综合精品国产一区二区三区 | 亚洲精品视频免费看 | 日本一区午夜爱爱 | 高清日本在线成人免费视频 | 美女视频永久黄网站在线观看 | 日韩精品a | 国产一级大片免费看 | 国产精品爽爽va在线观看无码 | 亚洲视频1区 | 精品日韩一区二区三区视频 | 欧美不卡视频 | 一级做a级爰片性色毛片视频 | 在线免费看一级片 | 悟空影视大全免费高清 | 亚洲天堂黄 | 亚洲视频中文 | 黄色美女网站免费 | 在线观看免费黄色网址 | 亚洲成人免费在线视频 | 久久综久久美利坚合众国 | 性盈盈影院在线观看 | 欧美精品在欧美一区二区 | 91年精品国产福利线观看久久 | 国产成人lu在线视频 | 久草视频免费在线看 | 在线看片不卡 | 国产欧美日韩综合精品无毒 | 国产农村一二三区 | 91一级片 | 男人好大好硬好爽免费视频 | 激情五月色播五月 | 国产成人十八黄网片 | 国产精品久久一区二区三区 |