用Python监测电影是否开始预售
对于一些大家期待的电影会想值得它什么时候预售,特别是某些热门的电影,若是不及时知道预售开始的消息很可能抢不到好位置的票。对于某部特别热门的电影,有童鞋在朋友圈说不怕期中,4月就怕抢不到某电影首映的票。虽然一些相关的公众号或者微博会在得到消息后及时更新,但是从技术的角度考虑,随着各种集成票务平台的发展,我们可以自己跑个程序监测某些电影是否开启了预售。
拿看电影的猫眼电影为例,思路就是先看看开启预售的电影和未开启预售的电影主页间的差别,然后得到需要监测的电影主页的url之后,用爬虫监测页面内容的变化,在确认有购票(预售)信息后及时通知自己。
针对猫眼电影的监测有两种做法,一种是看首页->即将上映中标注预售的电影列表里是否有目标电影;
第二种是看目标电影的主页里是否有购票按钮,下面主要实现一下第二种思路,自己确实很希望能及时知道《复联四》预售的消息。首先从猫眼电影网页版主页找到目标电影,还是拿《Avengers: Endgame》举例,点击进入主页,复制url,按道理猫眼每部电影主页url是不变的,在网页打开源码定位到“想看、评分”的部分,对应的是<div class="action-buyBtn">
部分,根据其他开启了预售的电影页面代码,如果开启预售这里会有个购票按钮的,因此主要监测这部分HTML的变化,自己习惯于用xpath,因此复制xpath,写出以下代码:
import time
import requests
import traceback
from lxml import etree
def monitorBtnbuy(url,t=0):#url:需要监测的电影主页
while True: #主循环
try:
txt=requests.get(url).text
html=etree.HTML(txt)
try:
ptxt=html.xpath('/html/body/div[3]/div/div[2]/div[2]/a/text()') #复制下来的xpath
if ptxt==[]: #如果开启预售ptxt会是['特惠购票'] 否则是空列表
time.sleep(30) #sleep一段时间继续爬页面
elif ptxt[0]=='特惠购票': #赶紧想办法提醒自己
#可以用各种提醒方式,如print、弹出窗口,发微信消息,发邮件等
print('开启预售了!!')
#pass
except:#输出错误信息
traceback.print_exc()
time.sleep(3)
t+=1
if t>5:
break #因为是测试所以加了个break
url='https://maoyan.com/films/1156894' #
monitorBtnbuy(url,t=3)
拿一个已经开启预售的电影测试,再拿目标网页进行测试,能正常跑。因为是测试,把sleep的时间调为2秒,测试完之后设置为每15分钟或30分钟获取一下页面。
接下来完善提醒部分,可以用各种提醒方式,如控制台输出、弹出窗口,发微信消息,发邮件等,为了确保我及时知道,选择弹窗+微信消息,Python中写轻量化的GUI页面用内置的tkinter比较方便,微信提醒选择封装比较好的wxpy。如果页面更新了包含预售消息,会同时有微信消息(我选择是发送到自己的一个群里),然后跑代码的电脑端会有一个弹窗(messagebox)。收到提醒就赶紧去买票。
继续完善monitorBtnbuy(url)
函数,最后代码如下:
import time
import requests
import traceback
from wxpy import *
from lxml import etree
import tkinter as tk
from tkinter import messagebox
def getOneUrl(url): #获取一个页面
try:
r=requests.get(url,timeout=30)
#r.encoding=r.apparent_encoding
return r.text
except:
traceback.print_exc()
return None
def showMsg():
window = tk.Tk()
window.title('prrrrrr')
window.geometry('400x400')
tk.Button(window,text='presale').pack()
window.mainloop()
def showMsg2():
win = tk.Tk()
win.title('prrrrrr')
win.geometry('400x400')
tk.Button(win,text='presale').pack()
win.mainloop()
def monitorBtnbuy(url,t=0):
bot = Bot()
while True:
txt=getOneUrl(url)
if txt==None:
pass
else:
html=etree.HTML(txt)
try:
ptxt=html.xpath('/html/body/div[3]/div/div[2]/div[2]/a/text()')
if ptxt==[]:
if t%5==0:
print('现在是{0},还没有预售信息;t={1}'.format(time.asctime(),t))
time.sleep(180)
if t%2==0:
time.sleep(60*15) #每次t是偶数sleep15分钟
time.sleep(120) #2mins
elif ptxt[0]=='特惠购票': #赶紧想办法提醒自己
print(time.asctime(),ptxt[0])
group = bot.groups().search('def-self')[0] #给特定的群里发消息
group.send('预售开始!')
group.send(url)
print('msg.send()')
showMsg()
showMsg2()
except:
traceback.print_exc()
time.sleep(5)
t+=1
#if t>20:break
url='https://maoyan.com/films/248172'
monitorBtnbuy(url)
运行效果如下:
监测运行效果
目前的实现还是有些简单,可以加上更多的监测,例如对淘票票、美团、自己常去电影院的官网等也同时进行监测,万一APP更新了购票入口但网页没有,还需要对APP进行抓包,准确率会更高,更及时。
以上代码同步于github:moviePresaleMonitor。