Python爬取豆瓣视频信息代码实例
(编辑:jimmy 日期: 2024/11/20 浏览:3 次 )
这篇文章主要介绍了Python爬取豆瓣视频信息代码实例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
这里是爬取豆瓣视频信息,用pyquery库(jquery的python库)。
一:代码
from urllib.request import quotefrom pyquery import PyQuery as pqimport requestsimport pandas as pddef get_text_page (movie_name): '' ' 函数功能:获得指定电影名的源代码 参数:电影名 返回值:电影名结果的源代码 ' '' url = 'https://www.douban.com/search"{movie_name}的观看地址.csv".format( movie_name = my_str), index = False, encoding = 'utf_8_sig', sep = ',') def main(): name = input('') my_str = name movie_name = quote(my_str) page_text = get_text_page(movie_name)# 得指定电影名的源代码 last_url = get_last_url(page_text)# 根据指定的源代码得到最终的网页地址 page_text2 = the_last_page(last_url)# 获得最终电影网页的源代码 the_last_text( page_text2, my_str)# 获得每一项的数据 lookUrl( page_text2, my_str)# 得到并处理观看链接main()
二:结果如下(部分例子)
1.输入天气之子
2.输入百变小樱魔法卡
必须是已经上映的电影才有观看地址
3.独立日
以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持。
下一篇:python selenium 执行完毕关闭chromedriver进程示例