當前位置:首頁 » 觀影平台 » 爬取豆瓣電影的圖片
擴展閱讀
微電影是什麼啊 2024-05-09 14:32:08
紅色高跟鞋殺人電影韓國 2024-05-09 14:26:04
離別韓國電影優酷 2024-05-09 14:07:30

爬取豆瓣電影的圖片

發布時間: 2024-03-29 13:50:35

豆瓣電影上的海報圖片可以復制保存嗎怎麼復制

電影上面的海報圖片是可以復制保存的,但是有的話是沒有這個許可權的,你要進行截圖。

❷ 豆瓣電影API,包括豆瓣電影搜索、電影信息、評論、Top250等

全部數據均來自豆瓣且以 Json 格式返回

簡介:使用 (GET) 方法對基於影片名稱模糊查詢對應匹配的影片

https://api.xhboke.com/movie/search?s=肖申克的救贖&page=0

簡介:使用 (GET) 方法通過豆瓣影片唯一標識 id 獲取影片相關信息。

https://api.xhboke.com/movie/info?id=1292052

簡介:使用 (GET) 方法通過豆瓣影片唯一標識 id 來獲取相關評論

::: tip Notice
由於豆瓣的限制,非登錄用戶最多隻能獲取到 220 條/11 頁評論
:::

https://api.xhboke.com/movie/review?id=1292052

https://api.xhboke.com/movie/celebrity?id=1274297

https://api.xhboke.com/movie/top250?page=0

https://api.xhboke.com/movie/tag

❸ Python爬蟲實戰(1)requests爬取豆瓣電影TOP250

爬取時間:2020/11/25
系統環境:Windows 10
所用工具:Jupyter NotebookPython 3.0
涉及的庫:requestslxmlpandasmatplotlib umpy

蛋肥想法: 先將電影名稱、原名、評分、評價人數、分類信息從網站上爬取下來。

蛋肥想法: print數據列表後發現電影原名、分類信息等存在不需要的字元,需預先處理;同時因為後續想做一個豆瓣電影TOP250的維度分布圖,而同一電影存在多個發行國家、類型(如「法國 美國 / 劇情 動作 犯罪」),為了簡(偷)便(懶),這里均取第一個作為記入的數據;最後將數據保存為xlsx。

蛋肥想法: 蛋肥想知道在豆瓣電影TOP250中年份、國家、類型的維度數據,為了練手,使用剛才保存成xlsx的數據,並分別畫成雷達圖、柱形圖、扇形圖。

❹ 電影海報網站

以下為網友整理:
http://www.douban.com/note/71150011/(此網友的日記)去哪裡找大尺寸的電影圖片 (11.13更新) http://www.douban.com/note/71150011/
【海報】Posters 注意!!!區別預告海報與正式海報,海報上檔期寫著coming soon、或者只有年份/月份而沒有具體日期的,一般都是預告海報,就這么簡單。 |英文| ★★★★★ www.movieposterdb.com 電影海報資料庫(需要積分下載)——沒有積分的話,主要用來查找【海報國別】也不錯 海報齊全、數量多、圖大的讓人吃驚,有國別區分,無水印,需注冊;注冊後有1分積分,每下載一張海報扣1分,上傳一張海報得1分(07年之後海報為2分);他人上傳更大的海報時,刪除小海報會扣回分 ★★★★★ www.impawards.com 互聯網電影海報庫 很好的網站,收錄電影比較齊全,多為官方海報,老電影海報較少,尺寸為525x755左右的居多;無新上映電影海報質量較高(無國別區分),每天都有通知更新增加,該網站已成為IMDb網站的一個固定海報連接 ★★★★ http://www.criterion.com/ CC標准版DVD封面 ★★★★ www.awardsdaily.com/FYC/gallery/ For Your Consideration 供你參考海報(FYC),頒獎季競選海報 ☆☆☆ www.cinemasterpieces.com 原創老式海報收藏,好萊塢老電影為主,多大圖 ☆☆☆ www.blu-ray.com 有大尺寸的藍光封套,圖片在每個條目封面下方:Large: Front Back,可選封面正反兩面。 ☆☆☆ http://www.moviegoods.com 右上角搜索片名,選影片,View Larger 老海報補遺用,夠清晰,各國版本分類詳細,唯一遺憾是沒有大圖,都是500x700多的(cupidboy、Sofie推薦) |西班牙| ★★★★★★ http://www.cartelespeliculas.com/wp/(力薦,唯一給6星的網址。國別分類清楚,只用這一個都很受用)非常好的西班牙語網站,各國海報,尺寸大而全,無水印,特色為早期電影海報,新片一般是在上映之後才列出海報;不幸的是,該站伺服器於08年10月受損,丟失多達56,000張電影海報數據,正恢復建設中,現只可提供部分存檔海報。 ☆☆☆ http://www.estoescine.com/ 各國海報/劇照,但尺寸有壓縮 推薦 ☆☆ http://www.caratulasdecine.com/0_9.htm(每部電影附一張海報) ☆ http://tepasmas.com/(西班牙電影資訊網站,一般有一張海報,提供劇照) |德國|(Plakat海報、Bilder劇照/圖片、Desktop壁紙) ★★★★☆ http://www.posterdb.de/ (推薦,需要登錄後才能下大圖)新片海報質量較好,各國海報,德國版本質量尤佳,老電影海報豐富;進入網站後點左上角英國國旗,簡單注冊後,即可下載原版尺寸海報(超大海報) ☆☆☆ http://www.farbfilm-verleih.de/index.html 德國電影資訊網站,無搜索功能;一部電影附一張海報,尺寸較大。另附相關劇照。下載方法:點擊一部電影,下拉,找到Plakat(海報) ,Download ☆☆☆ http://www.moviemaze.de/media/poster/ 主要下預告片,同時有海報/桌面 ☆☆☆ http://www.filmposter-archiv.de/ 需要用代理上(桃桃林林 推薦) |俄羅斯|(Постеры海報、кадры劇照、Обои壁紙) ★★★★ http://www.filmz.ru/ 直接下大圖(推薦)最頂上的框里輸片名,點後面的按鈕,選擇影片,有海報(無國別區分),大劇照,熱門新片有超大尺寸圖片,2000甚至3000像素以上的都比較全。(cupidboy 推薦) ★★★★ www.kinogallery.com/ 更新較快,不僅有海報,劇照、壁紙也很全很清晰。在右上方的搜索欄輸入片名,但eat pray love片名不要輸標點,要不搜不到。(cupidboy 推薦) ★★★★ http://www.kinofilms.com.ua/ 海報數量較多,國家版本也多,但無國別顯示、區分,需要自己辨別。 ★★★★ www.kino-govno.com/ 這個也可以,但主要是下高清預告片(cupidboy 推薦) ☆☆☆ www.kinopoisk.ru/level/17 新片海報及橫版海報為本站特色,質量較高;更新快,收集全,老片資源也較為豐富;劇照同樣豐富,可惜的是有些海報/劇照右下角有方塊水印。(cupidboy 推薦) ☆☆☆ http://photos.telestrekoza.com/ 電視劇海報,高像素,熱門劇集 |法國| ★★★★ http://www.toutlecine.com/ 右鍵點擊不能直接下載,可以在Firefox瀏覽器里安裝Web Developer工具欄,然後在「禁用」里「禁用所有Javascript」,重啟瀏覽器即可點擊右鍵保存圖片了。IMDb圖片下載同理。(soto�6�4 推薦) ☆☆☆ http://www.fan-de-cinema.com/ 推薦 法國電影綜合網站,多為法國上映電影海報,也有他國版 ☆☆☆ http://www.allocine.fr/film/default.html 法國電影資料網站,海報一般為法國版本,大小為600x800,附劇照 ☆☆☆ http://www.alyon.org/generale/theatre/cinema/affiches_cinema/ 老電影海報網站,法國版本海報,圖片一般有網紋特徵,較全,以列表形式出現,但無查詢功能 |波蘭| ★★★★ http://www.raraavis.krakow.pl/Katalog87/a87-05plakaty.htm 波蘭電影海報 |土耳其| ★★★★ http://www.sadibey.com/turkce-afisleri/ 土耳其版海報,依照影片名的字母和數字順序排列,點擊即可看到海報 |瑞士| ☆☆ http://www.columbusfilm.ch/ 影院預告網站,找到DOWNLOADS即可下載海報 ☆☆ http://outnow.ch/media/posters/ 0809年之前的片子會有水印,請注意 |巴西| ☆☆☆ http://epipoca.uol.com.br/index.php 海報、劇照都有 |捷克| ☆☆☆ http://www.filmynadvd.cz/ DVD封套網站,尺寸大,封套背面有網站水印 |韓國| ★★★★★ http://movie.daum.net/ 大量韓版海報,同時有很多歐美新片大尺寸劇照。劇照尺寸比英文網站還要大。 ☆☆☆ http://movie.naver.com/ 提供韓版海報或者原版海報,韓版海報質量較高,近年的片子有許多尺寸是900x1283;部分海報有水印;某些電影海報需要實名注冊或付費;劇照質量佳(Sofie 推薦) ☆☆ http://movie.empas.com/ 韓國上映電影海報,尺寸600x800,某些海報需注冊後才能看 ☆☆ http://www.movist.com/movies/ ☆☆ http://www.joycine.com/ ☆ http://www.cine21.com/ |香港| ★★★☆ http://www.movieblog.com.hk/ 地道的港版海報,數量不多,但是每一張海報右鍵另存後,你會發現圖片尺寸都超大。 |台灣| ☆☆☆ http://gallery.photowant.com/B/ 台灣的一個,有海報和劇照(桃桃林林、54f8in 推薦) |內地| ★★★★ http://www.g-film.com/ 世紀環球在線,海報、劇照都比較大。
【劇照】Stills |英文| ★★★★★ http://www.allmoviephoto.com/ 直接下大圖(推薦),每張圖片下面都有詳細的文字注釋。 ★★★★★ http://www.aceshowbiz.com/movie/stills/ 直接下大圖(推薦),有大劇照,2000、3000、甚至6000像素。但是也有小尺寸,只是位置比較靠後,新聞圖片、DVD封套、原聲碟封套、桌面壁紙同時都有收錄。 ★★★★ http://www.moviepicturedb.com/ 電影圖片資料庫(積分下載) 劇照/壁紙齊全、數量多、圖大的讓人吃驚,無水印,需注冊;注冊後有1分積分,每下載一張海報扣1分,上傳一張海報得1分(07年之後海報為2分);他人上傳更大的海報時,刪除小海報會扣回分 ★★★☆ http://www.monstersandcritics.com/movies/moviepictures/movie-pictures.php 直接下大圖,貌似現在搜索有問題了 ☆☆☆ http://www.movieweb.com/ 電影圖片資料站(劇照較多),無水印,多為新片官方海報 中圖 ☆☆☆ http://www.empireonline.com/gallery/list.asp?f=1 《帝國》劇照/海報/紅毯 ☆☆☆ http://movies.yahoo.com/photos/movie-stills/43 中圖 ☆☆ http://www.ropeofsilicon.com/movie/stills/ 有大有小,且圖片不易保存 ☆ http://www.hollywood.com/movies/movie_stills_archive 小圖 |韓國| ★★★★★ http://movie.daum.net/ 有很多歐美新片大尺寸劇照。劇照尺寸比英文網站還要大。 ☆☆☆ http://movie.naver.com/ 提供韓版海報或者原版海報,韓版海報質量較高,近年的片子有許多尺寸是900x1283;部分海報有水印;某些電影海報需要實名注冊或付費;劇照質量佳。 ☆☆☆ http://www.hancinema.net/index.php 韓國的一個海報網,電影電視劇都有,韓國電影海報很少有這種綜合型的,而且還是英文網(桃桃林林 推薦) |內地| ★★★★ http://www.sfs-cn.com/ 海上電影,難得有一個華語網站,有很多在國內公映的海外電影劇照大圖下載。華語片陣地。 ★★★★ http://www.g-film.com/ 世紀環球在線,海報、劇照都比較大。 |俄羅斯|(Постеры海報、кадры劇照、Обои桌面) ★★★★★ http://www.filmz.ru/ 直接下大圖(推薦)最頂上的框里輸片名,點後面的按鈕,選擇影片,有海報,大劇照,熱門新片有超大尺寸圖片,2000甚至3000像素以上的都比較全。(cupidboy 推薦) ★★★★★ www.kinogallery.com/ 更新較快,劇照、壁紙很全很清晰。在右上方的搜索欄輸入片名,但eat pray love片名不要輸標點,要不搜不到。(cupidboy 推薦) ★★★★ http://www.kinokadr.ru/ 這個也不錯,可以做補充。點1 ... 4 5 6 7 8 9 10 11下面的「смотреть кадры в большом размере」就變成清晰大劇照了~搜索欄在最頂上 ★★★★ http://www.kinofilms.com.ua/ 基本都是大圖 ☆☆☆ www.kinopoisk.ru/level/17 新片海報及橫版海報為本站特色,質量較高;更新快,收集全,老片資源也較為豐富;劇照同樣豐富,可惜的是有些海報/劇照右下角有方塊水印。(cupidboy 推薦) |德國|(Plakat海報、Bilder劇照/圖片、Desktop桌面) ★★★★ http://www.farbfilm-verleih.de/index.html 德國電影資訊網站,無搜索功能;一部電影附一張海報,尺寸較大。另附相關劇照。下載方法:點擊一部電影,下拉,找到Bilder(劇照),Download ☆☆☆ http://www.filmstarts.de/ 海報和劇照都有,但都不是很全,尺寸也一般。不過舊片資源可能會比新片資源要好一些。不妨找找看。 ★★★★ http://www.ascot-elite.ch/moles/obomovie/?page_id=1&lang=1&navTitle=Filme (電影數量少,大部分電影都沒有可供下載的資源,但僅有的百來部電影資源比較珍貴)尺寸大,質量高,劇照多,海報/桌面其次。進入單個電影頁面後,點擊右側海報下面的「Downloadarea」,裡面分別有:劇照、海報、文本文件、壁紙、插圖、音頻等內容,還算豐富。(系統退步 推薦) |法國| ★★★★ http://www.toutlecine.com/ 右鍵點擊不能直接下載,可以在Firefox瀏覽器里安裝Web Developer工具欄,然後在「禁用」里「禁用所有Javascript」,重啟瀏覽器即可點擊右鍵保存圖片了。IMDb圖片下載同理。(soto�6�4 推薦) ☆☆☆ http://www.allocine.fr/film/default.html 法國電影資料網站,海報一般為法國版本,大小為600x800,附劇照 ☆☆ http://www.cinempire.com/ 多為劇照,一般提供一張海報 |西班牙| ☆☆☆ http://www.estoescine.com/ 各國海報/劇照,但尺寸有壓縮 推薦 ☆ http://tepasmas.com/(西班牙電影資訊網站,一般有一張海報,提供劇照) |巴西| ☆☆☆ http://epipoca.uol.com.br/index.php 海報、劇照都有
【壁紙】Wallpapers 常見的電影桌面壁紙尺寸有:800*600、1024*768、1280*800、1280*960、1280*1024、 1600*1000、1600*1200、1600*1280、1680*1050、1920*1080、1920*1200等11種,不是每部電影都有以上尺寸的,一般也就3-5種為主。 鑒於很多都在上面的海報和劇照網站附帶著有了,以下幾個主打壁紙: |英文| ★★★★★ http://www.themoviedb.org/ 其實桌面壁紙只要上這個網站很多東西都到手了(desperado 推薦) ★★★★ http://www.allmoviewalls.com 新片壁紙很多 ★★★★ http://www.moviewallpaper.net/ 也是個電影壁紙網站,挺不錯的,一直在用~ (Opheliaの影子 推薦) ☆☆ http://www.cinematicwallpaper.com |俄羅斯| ★★★★★ www.kinogallery.com/ 更新較快,壁紙很全很清晰。在右上方的搜索欄輸入片名,但eat pray love片名不要輸標點,要不搜不到。(cupidboy 推薦) ★★★★★ http://www.filmz.ru/ 直接下大圖(推薦)最頂上的框里輸片名,點後面的按鈕,選擇影片,有海報,大劇照,各種壁紙。熱門新片有超大尺寸圖片,2000甚至3000像素以上的都比較全。(cupidboy 推薦) ★★★★ http://www.kinofilms.com.ua/wallpapers/ 有單獨的壁紙版塊,可以在這個頁面看到最近更新的電影壁紙 ★★★★ http://www.kinomania.ru/ 壁紙比劇照更豐富,壁紙尺寸較多,且比較直觀 |德國| ★★★★ http://www.moviemaze.de/media/wallpaper/ 主要下預告片,同時有海報/桌面 |內地| ☆☆☆ http://www.wallcoo.com/ 貓貓壁紙酷,提供電影類 1024*768 | 1280*1024 | 1280*800 | 1440*900 | 1680*1050 | 1920*1200 | 6 種尺寸桌面壁紙下載 ps:日記中三張《馴龍高手》劇照的原圖地址: 圖片1: http://img2.douban.com/view/photo/raw/public/p456604559.jpg 尺寸:1280x543 圖片2: http://t.douban.com/view/photo/raw/public/p443416204.jpg 尺寸:3384x1438 圖片3: http://img2.douban.com/view/photo/raw/public/p451865228.jpg 尺寸:5400x2295 ps:如果你想找某張劇照的出處,可以直接在google按照 「具體尺寸 + 英文片名」 方法檢索,應該就會找到想要找的那張劇照。比如《時光旅行者的妻子》: 在google(英文)搜索「6144x4096 The Time Traveler's Wife」得到: http://www.aceshowbiz.com/still/00001062/time_traveler_s_wife08.html 右鍵保存或復制網址 ps:www.tineye.com TinEye網站,可以根據小圖找大圖

❺ Python豆瓣電影《肖申克的救贖》評論爬取

先看效果圖:

地址:( https://movie.douban.com/subject/1292052/comments?sort=time&status=P)

爬取前1w條評論

存儲成txt文檔

數據預處理

中文分詞

統計top10的高頻詞

可視化展示高頻詞

根據詞頻生成詞雲

審核評論

================================================================

配置准備

中文分詞需要jieba

詞雲繪制需要wordcloud

可視化展示中需要的中文字體

網上公開資源中找一個中文停用詞表

根據分詞結果自己製作新增詞表

准備一張詞雲背景圖(附加項,不做要求)

paddlehub配置

#安裝jieba分詞和詞雲

pip install jieba

pip install wordcloud

#安裝paddle

pip install --upgrade PaddlePaddle

#安裝模型

#hub install porn_detection_lstm==1.1.0

pip install --upgrade paddlehub

pip install  numpy

#安裝Beautifulsoup

pip install BeautifulSoup4

Github地址: https://github.com/mikite/python_sp_shawshank

有可能遇到的問題:

1.UnicodeDecodeError: 'utf-8' codec can't decode byte 0xe8 in position 1: invalid continuation byte

解決方法:

1.不使用urlLib換做requests

2.去掉請求頭中的 'Accept-Encoding': 'gzip, deflate, br'

3.返回值reponse 轉字元串指定編碼utf-8

# 'Accept-Encoding': 'gzip, deflate, br',

2.關於cookie

解決方法:

1.去豆瓣請求頭中復制cookie設置到請求頭中

'Cookie': 'bid=WD6_t6hVqgM'

3.請求返回418的問題

解決方案模擬設置請求頭,設置user-agent

'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/94.0.4606.81 Safari/537.36',

4.使用beautifulsoup獲取不到評論

解決方法:

第一步:指定解析參數為'lxml'

soupComment = BeautifulSoup(html, 'lxml')

第二步:

findAll方法指定css文件的class名

print('網頁內容:', soupComment.prettify())

comments = soupComment.findAll(class_='short')

點擊獲取源碼

❻ 批量爬取豆瓣影視短評步驟

用Python批量爬取豆瓣影視短評步驟:
1、通過Chrome瀏覽器檢查元素。
2、獲取單個頁面HTML文本。
3、用正則表達式解析出所需要的信息並存入列表。
4、將列表中的信息存成csv文件。
5、利用start參數批量爬取其他頁的短評。

❼ python怎麼抓取豆瓣電影url

#!/usr/bin/env python2.7# encoding=utf-8"""
爬取豆瓣電影TOP250 - 完整示例代碼
"""import codecsimport requestsfrom bs4 import BeautifulSoup

DOWNLOAD_URL = 'httn.com/top250/'def download_page(url):
return requests.get(url, headers={ 'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_2) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/47.0.2526.80 Safari/537.36'
}).contentdef parse_html(html):
soup = BeautifulSoup(html)
movie_list_soup = soup.find('ol', attrs={'class': 'grid_view'})

movie_name_list = [] for movie_li in movie_list_soup.find_all('li'):
detail = movie_li.find('div', attrs={'class': 'hd'})
movie_name = detail.find('span', attrs={'class': 'title'}).getText()

movie_name_list.append(movie_name)

next_page = soup.find('span', attrs={'class': 'next'}).find('a') if next_page: return movie_name_list, DOWNLOAD_URL + next_page['href'] return movie_name_list, Nonedef main():
url = DOWNLOAD_URL with codecs.open('movies', 'wb', encoding='utf-8') as fp: while url:
html = download_page(url)
movies, url = parse_html(html)
fp.write(u'{movies}\n'.format(movies='\n'.join(movies)))if __name__ == '__main__':
main()0414243444546474849505152

簡單說明下,在目錄下會生成一個文檔存放電影名。python2

❽ 怎樣避開豆瓣對爬蟲的封鎖,從而抓取豆瓣上電影內容

用前嗅的ForeSpider數據採集軟體可以採集,我之前采過豆瓣的影評,可以設置各種過濾規律,比如我只要豆瓣評分6.0以上的電影,就可以精確的過濾。ForeSpider可以智能模擬瀏覽器和用戶行為,突破反爬蟲限制。可以設置代理IP,並且可以自動過濾優質IP代理,提高使用代理的速度。
對於一些高難度的網站,反爬蟲措施比較多,可以使用ForeSpider內部自帶的爬蟲腳本語言系統,簡單幾行代碼就可以採集到高難度的網站。
可以去下載免費版,免費版不限制採集功能。有詳細的操作手冊可以學習。如果自己不想學習,可以讓前嗅進行配置。
而且客服可以教你怎樣用,有問題出錯了客服會遠程操作,非常好的服務態度。

❾ 如何通過豆瓣API獲取圖書和電影列表

豆瓣API提供了一種簡單的方式可以直接在HTML頁面中使用API,下面給出這種使用方式的簡單示例。

  1. 首先我們需要在HTML頁面中做如下script標簽:<script type="text/javascript" src=" />

  2. 然後就可以調用豆瓣API,其中通過定義callback函數來操作返回的JSON數據。

  3. 此外,豆瓣也提供了解析函數來幫助你更容易地使用JSON格式的返回值。使用豆瓣提供的解析函數,你需要在頁面中添加script標簽:<script type="text/javascript" src="。

  4. 接下來你就可以使用豆瓣提供的解析函數來處理返回值,例如:var book = DOUBAN.parseSubject(result)。

  5. 解析函數返回更容易使用的javascript對象,你可以這樣得到書的封面圖片:book.link.image

  6. HTML頁面使用API獲得ID為xxxxx電影的信息並展示在頁面上(注意將{yourapikey}替換為你的API Key)。

註:實現上,豆瓣API使用 JSONP 方式來支持跨域調用API 因此你也可以使用自己熟悉的javascript庫來調用JSONP風格的豆瓣API. 此時,你需要將alt設置為xd同時提供callback參數。另外部份的豆瓣功能及操作可登陸下面的網站/客戶端: