吾爱破解 - 52pojie.cn

 找回密码
 注册[Register]

QQ登录

只需一步,快速开始

查看: 4513|回复: 18
收起左侧

[Python 转载] 用python爬取猫眼前100名电影名单

[复制链接]
18382747915 发表于 2018-9-28 12:48
本帖最后由 18382747915 于 2018-9-28 12:49 编辑

废话少说,看代码:
[Python] 纯文本查看 复制代码
import re,requests
def maoyan(url,i):
     if i==0:
        i=40
     else:
        i = i - 10
     header = {'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64; rv:62.0) Gecko/20100101 Firefox/62.0',
               'Host': 'maoyan.com',
               'Referer': 'http://maoyan.com/board/4?offset=%s'%i}
     date=requests.get(url,headers=header)
     html=date.text
     paiming=re.findall('<i class="board-index board-index-(.*?)">(.*?)</i>',html,re.S)
     mingcheng = re.findall('<p class="name"><a href="/films/(.*?)" title="(.*?)" data-act="boarditem-click" data-val="{movieId:(.*?)}">(.*?)</a></p>', html, re.S)
     zhuyan = re.findall('<p class="star">(.*?)</p>', html, re.S)
     shijian=re.findall('<p class="releasetime">(.*?)</p>',html,re.S)
     for i ,l in enumerate(mingcheng):
         name=l[1]
         pm=paiming[i][0]
         sj=shijian[i]
         zy=zhuyan[i].strip()
         print("--------------------------------")
         print("排名:第%s名"%pm)
         print("电影名称:%s"%name)
         print(zy)
         print(sj)

if __name__=='__main__':
    num=0
    while num<100:
        maoyan("http://maoyan.com/board/4?offset=%s"%num,num)
        num=num+10
1.jpg

发帖前要善用论坛搜索功能,那里可能会有你要找的答案或者已经有人发布过相同内容了,请勿重复发帖。

 楼主| 18382747915 发表于 2018-9-28 15:06
冼星海ksv 发表于 2018-9-28 14:40
没加代{过}{滤}理,爬多了可能会被屏蔽

那要看具体项目的,如果数据量大考虑代{过}{滤}理,像这种数据量是固定的,没必要
头像被屏蔽
zhaoyun007 发表于 2018-9-28 13:36
一笑懸命桑 发表于 2018-9-28 13:06
ixsec 发表于 2018-9-28 13:07
  赞一个~~
2205 发表于 2018-9-28 13:10
学习了。似乎还差一步写入文件。嘿嘿
諦覠 发表于 2018-9-28 13:24
有没有php版的Python看不懂..
野山鸡 发表于 2018-9-28 13:25
非常棒,值得参考一下
m0216 发表于 2018-9-28 13:49
看不懂  好像很厉害的样子
comos 发表于 2018-9-28 14:07
pyhon新闻与经济的有没有,
zdnyp 发表于 2018-9-28 14:09
Python还是相对比较好上手的
您需要登录后才可以回帖 登录 | 注册[Register]

本版积分规则

返回列表

RSS订阅|小黑屋|处罚记录|联系我们|吾爱破解 - LCG - LSG ( 京ICP备16042023号 | 京公网安备 11010502030087号 )

GMT+8, 2024-11-1 07:14

Powered by Discuz!

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表