爬取百度前20个热搜(示例代码)

栏目: 十大 · 发布时间: 2021-03-04

来源:cnblogs.com

简介  这篇文章主要介绍了爬取百度前20个热搜(示例代码)以及相关的经验技巧,文章约897字,浏览量293,点赞数5,值得参考!

import requests
from bs4 import BeautifulSoup
import bs4
import pandas as pd
url = ‘http://top.baidu.com/buzz?b=341&c=513&fr=topbuzz_b341_c513‘
headers = {‘User-Agent‘:‘Mozilla/5.0 (Windows NT 6.3; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko)Chrome/69.0.3497.100 Safari/537.36‘}
r=requests.get(url)
r.encoding=r.apparent_encoding
html=r.text
soup=BeautifulSoup(html,‘lxml‘)
a=[]
b=[]
for link1 in soup.find_all(class_=‘list-title‘):
    a.append(link1.get_text())
for link2 in soup.find_all(‘td‘,class_=‘last‘):
    b.append(link2.get_text().strip())
data=pd.DataFrame([a,b],index=["关键词","搜索指数"]).T
print("爬取百度热搜榜前十:"," ")
print(data.iloc[0:20])

技术图片

 


以上就是本文的全部内容,希望对大家的学习有所帮助,版权归原作者或者来源机构所有,感谢作者,如果未能解决你的问题,请参考以下文章。

爬取百度热搜榜(示例代码)

python网络爬虫:实现百度热搜榜数据爬取(示例代码)

爬去百度热搜榜(示例代码)

爬取知乎热搜(示例代码)

python爬取抖音热搜视频(示例代码)