在好例子网,分享、交流、成长!
您当前所在位置:首页Python 开发实例Python语言基础 → 豆瓣热门电影爬取

豆瓣热门电影爬取

Python语言基础

下载此实例
  • 开发语言:Python
  • 实例大小:1.82KB
  • 下载次数:34
  • 浏览次数:285
  • 发布时间:2020-08-28
  • 实例类别:Python语言基础
  • 发 布 人:Miller@yuan
  • 文件格式:.py
  • 所需积分:2
 相关标签: 豆瓣 电影 爬取

实例介绍

【实例简介】爬取的电影数据保存到 如下excel中了

【实例截图】

from clipboard

from clipboard

【核心代码】

import requests        # 引用requests模块
import openpyxl

headers={'user-agent':'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_14_3) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/79.0.3945.79 Safari/537.36'}

a = int(input("请输入你想爬的页数:"))
b = input("请输入你想看的电影类型(热门, 最新, 经典,  豆瓣高分, 动作, 喜剧, 爱情, 科幻, 悬疑, 恐怖):")

wb = openpyxl.Workbook()                 #创建工作薄
sheet = wb.active                        #获取工作薄的活动表
sheet.title = '热门电影'             #工作表重命名
column_name = ['影名','URL','id','评分']
sheet.append(column_name)
def movies(pages,type):
    for i in range(0,pages):
        url = 'https://movie.douban.com/j/search_subjects'
        param = {'type': 'movie',
                'tag': type,
                'sort': 'recommend',
                'page_limit': '20',
                'page_start': i*20}
        # print(param)
        res_movie = requests.get(url,params=param,headers=headers)    # 调用get方法,下载电影列表
        json_movie = res_movie.json()                        # 使用json()方法,将response对象,转为列表/字典
         # print(json_movie)

        list_movies = json_movie['subjects']   # 一层一层地取字典,获取电影名称
        for comment in list_movies:            # list_movies,comment是它里面的元素
            name = comment['title']            # 电影名名称
            movie_url = comment['url']
            ID = comment['id']
            scores = comment['rate']
            sheet.append([name,movie_url, ID,scores])
            # 把name、album、time、link和geci写成列表,用append函数多行写入Excel
movies(a, b)
wb.save( '热门电影.xlsx')
wb.close()

open( '热门电影.xlsx')


标签: 豆瓣 电影 爬取

实例下载地址

豆瓣热门电影爬取

不能下载?内容有错? 点击这里报错 + 投诉 + 提问

好例子网口号:伸出你的我的手 — 分享

网友评论

发表评论

(您的评论需要经过审核才能显示)

查看所有0条评论>>

小贴士

感谢您为本站写下的评论,您的评论对其它用户来说具有重要的参考价值,所以请认真填写。

  • 类似“顶”、“沙发”之类没有营养的文字,对勤劳贡献的楼主来说是令人沮丧的反馈信息。
  • 相信您也不想看到一排文字/表情墙,所以请不要反馈意义不大的重复字符,也请尽量不要纯表情的回复。
  • 提问之前请再仔细看一遍楼主的说明,或许是您遗漏了。
  • 请勿到处挖坑绊人、招贴广告。既占空间让人厌烦,又没人会搭理,于人于己都无利。

关于好例子网

本站旨在为广大IT学习爱好者提供一个非营利性互相学习交流分享平台。本站所有资源都可以被免费获取学习研究。本站资源来自网友分享,对搜索内容的合法性不具有预见性、识别性、控制性,仅供学习研究,请务必在下载后24小时内给予删除,不得用于其他任何用途,否则后果自负。基于互联网的特殊性,平台无法对用户传输的作品、信息、内容的权属或合法性、安全性、合规性、真实性、科学性、完整权、有效性等进行实质审查;无论平台是否已进行审查,用户均应自行承担因其传输的作品、信息、内容而可能或已经产生的侵权或权属纠纷等法律责任。本站所有资源不代表本站的观点或立场,基于网友分享,根据中国法律《信息网络传播权保护条例》第二十二与二十三条之规定,若资源存在侵权或相关问题请联系本站客服人员,点此联系我们。关于更多版权及免责申明参见 版权及免责申明

;
报警