用python抓取元素

问题描述

我目前正在使用漂亮的汤来尝试并在网站上抓取数据，但是python模块正在读取页面的源代码。在页面的源代码中，我所需的信息不存在，但是如果我右键单击chrome中的页面并检查元素是否存在。

我想知道python模块是否有办法从网页上抓取元素，而不是从源代码抓取

在漂亮的汤中，香港专业教育学院试图搜索类似的元素，但是它们只是没有出现或出现，因为它在源代码中进行了搜索。我也不确定为什么或为什么它不出现在那里。

解决方法

通过JavaScript加载内容时，无法通过 Beautiful Soup 获取数据。在这种情况下，使用 Selenium 库是因为它更有用且更方便地提取所需的动态内容。