爬取一些数据

随着现在越来越多的学python的在爬取一些网站的数据，有一些知名的网站有着反爬虫，所以有的时候爬虫比较困难

import requests
 import bs4
 res = requests.get(“https://search.bilibili.com/all?keyword=%E7%BC%96%E7%A8%8B&from_source=nav_search_new&order=totalrank&duratinotallow=0&tids_1=0”)
 res.text
 soup = bs4.BeautifulSoup(res.text,“html.parser”)
 titles = soup.find_all(“li”,class_=“video-item matrix”)
 for each in titles:
 print(each.a[‘title’])

​欢迎您关注我的个人微信公众号：学习微站（studysth）