成人视屏在线观看-国产99精品-国产精品1区2区-欧美一级在线观看-国产一区二区日韩-色九九九

您的位置:首頁技術文章
文章詳情頁

python爬取豆瓣電影TOP250數(shù)據(jù)

瀏覽:58日期:2022-06-18 16:25:24

在執(zhí)行程序前,先在MySQL中創(chuàng)建一個數(shù)據(jù)庫'pachong'。

import pymysqlimport requestsimport re#獲取資源并下載def resp(listURL): #連接數(shù)據(jù)庫 conn = pymysql.connect(host = ’127.0.0.1’,port = 3306,user = ’root’,password = ’******’, #數(shù)據(jù)庫密碼請根據(jù)自身實際密碼輸入database = ’pachong’, charset = ’utf8’ ) #創(chuàng)建數(shù)據(jù)庫游標 cursor = conn.cursor() #創(chuàng)建列表t_movieTOP250(執(zhí)行sql語句) cursor.execute(’create table t_movieTOP250(id INT PRIMARY KEY auto_increment NOT NULL ,movieName VARCHAR(20) NOT NULL ,pictrue_address VARCHAR(100))’) try:# 爬取數(shù)據(jù)for urlPath in listURL: # 獲取網(wǎng)頁源代碼 response = requests.get(urlPath) html = response.text # 正則表達式 namePat = r’alt='(.*?)' src=’ imgPat = r’src='https://www.xxx.com.cn/bcjs/(.*?)' class=’ # 匹配正則(排名【用數(shù)據(jù)庫中id代替,自動生成及排序】、電影名、電影海報(圖片地址)) res2 = re.compile(namePat) res3 = re.compile(imgPat) textList2 = res2.findall(html) textList3 = res3.findall(html) # 遍歷列表中元素,并將數(shù)據(jù)存入數(shù)據(jù)庫 for i in range(len(textList3)):cursor.execute(’insert into t_movieTOP250(movieName,pictrue_address) VALUES('%s','%s')’ % (textList2[i],textList3[i]))#從游標中獲取結果cursor.fetchall()#提交結果conn.commit()print('結果已提交') except Exception as e:#數(shù)據(jù)回滾conn.rollback()print('數(shù)據(jù)已回滾') #關閉數(shù)據(jù)庫 conn.close()#top250所有網(wǎng)頁網(wǎng)址def page(url): urlList = [] for i in range(10):num = str(25*i)pagePat = r’?start=’ + num + ’&filter=’urL = url+pagePaturlList.append(urL) return urlListif __name__ == ’__main__’: url = r'https://movie.douban.com/top250' listURL = page(url) resp(listURL)

結果如下圖:

python爬取豆瓣電影TOP250數(shù)據(jù)

python爬取豆瓣電影TOP250數(shù)據(jù)

以上就是我的分享,如果有什么不足之處請指出,多交流,謝謝!

以上就是python爬取豆瓣電影TOP250數(shù)據(jù)的詳細內容,更多關于python爬取豆瓣電影的資料請關注好吧啦網(wǎng)其它相關文章!

標簽: 豆瓣 Python
相關文章:
主站蜘蛛池模板: www.成年人 | 手机在线看片国产日韩生活片 | 极品色在线精品视频 | 亚州综合| 国产在线播放一区二区 | 国产精品日本一区二区在线播放 | 三级理论手机在线观看视频 | 国产精品亚洲专区在线播放 | 亚洲七七久久精品中文国产 | 成人午夜兔费观看网站 | 国产成人不卡亚洲精品91 | 国产久草视频在线 | 在线看欧美成人中文字幕视频 | 国产美女一区精品福利视频 | 国产在线激情视频 | 日韩亚洲人成网站在线播放 | 亚洲国产一级毛片 | 黄视频欧美 | 亚洲 欧美 日韩在线 | 在线观看人成午夜影片 | 老司机免费福利午夜入口ae58 | 日韩欧美国产成人 | 拍拍拍又黄又爽无挡视频免费 | 干综合网 | 久久精品成人国产午夜 | 国产成人综合95精品视频免费 | 久草在线视频免费资源观看 | 亚洲综合日本 | 精品午夜寂寞黄网站在线 | 波多野结衣在线观看高清免费资源 | 男女视频免费观看 | 国产在线步兵一区二区三区 | 欧美三级网站在线观看 | 国产片一级aaa毛片视频 | 人与拘一级a毛片 | 国产高清精品自在线看 | 亚洲精品国产一区二区三区在 | 国产一区二区播放 | 在线国产区| 久久精品久久精品久久 | 国产欧美在线观看视频 |