使用 BeautifulSoup 在 Python 中进行网页抓取

【问题标题】：Web Scraping in Python using BeautifulSoup使用 BeautifulSoup 在 Python 中进行网页抓取
【发布时间】：2021-08-10 21:51:56
【问题描述】：

我想使用带有 100 个条目的 python BeautifulSoup 在旅行顾问网页中抓取加拿大航空公司的评论。这是我要抓取的链接

https://www.tripadvisor.ca/Airline_Review-d8728998-Reviews-Air-Canada.html#REVIEWS

其中包括用户名、标题、评分、评论摘要、发布日期列

【问题讨论】：

到目前为止你有什么尝试？
用浏览器检查页面，找到一些表标识符并开始编码

标签： python web-scraping beautifulsoup

【解决方案1】：

您不能单独使用 BeautifulSoup 执行此操作，因为它不支持 AJAX。您应该使用 selenium 或其他支持 javascript 的网络浏览器。看看这个：python - web scraping an ajax website using BeautifulSoup

【讨论】：

猜你喜欢

1970-01-01
1970-01-01
2022-07-08
2020-10-04
2021-01-31
1970-01-01
1970-01-01
2018-10-16

相关资源

下载 2023-01-04
下载 2021-06-27
下载 2023-01-28
下载 2023-01-13

最近更新更多

热门标签

Java Python linux javascript Mysql C# Docker 算法前端 SpringBoot Redis Vue spring 设计模式 .net core .net kubernetes c++ 数据库数据结构大数据 js 机器学习微服务 Android Go 程序员面试 JVM ASP.net core 云原生人工智能后端 PHP git CSS golang k8s Nginx Django mybatis 深度学习多线程 React 架构 devops 爬虫云计算 Spring Boot LeetCode