Beautifulsoup python获取页面的日期和作者

作者: 一只特立独行的猪
发布时间: 2024-12-20 02:17:08 (9天前)
转自：

3 条回复

0#
回复此人
楊♡ | 2019-08-31 10-32

<div class =“post-text”itemprop =“text”> <P> 使用selenium返回日期和作者 </p> <pre> <code> from selenium import webdriver from selenium.webdriver.common.by import By from selenium.webdriver.support.ui import WebDriverWait from selenium.webdriver.support import expected_conditions as EC url = 'https://vk.com/photo-68872445_422126739' driver = webdriver.Chrome() driver.get(url) item = WebDriverWait(driver,10).until(EC.presence_of_element_located((By.CSS_SELECTOR, ".group_link"))).text item2 = driver.find_element_by_css_selector('.rel_date').text print(item, item2) driver.quit() </code> </pre> </DIV>

编辑
1#
回复此人
易米烊光 | 2019-08-31 10-32

<div class =“post-text”itemprop =“text”> <P> 我不确定它会对你有什么帮助，因为我看不到你的数据 <code> script </code> 标签。但是，如果您的最终目的是获取日期和作者，请参阅以下代码： </p> <pre> <code> from bs4 import BeautifulSoup import requests import lxml import json url = 'https://vk.com/photo-68872445_422126739?rev=1' req = requests.get(url) soup = BeautifulSoup(req.text, 'lxml') dls = soup.find_all("dl",{'class':'si_row'}) for dl in dls: atag = dl.find('a') if atag: author_link = atag.get('href') author_name = atag.get_text() print(author_link) print(author_name) span_date = soup.find('span',{'class':'item_date'}) if span_date: date = span_date.get_text() print(date) </code> </pre> <P> 的<strong> 编辑： </强> </p> <P> 为了记录，您的错误可能是因为您正在使用 <code> requests </code> 获取页面和您正在搜索的数据在ajax响应中。你可以看看 <code> selenium </code> 如果你想从脚本中获取更多数据 </p> <P> <a href="https://selenium-python.readthedocs.io/" rel="nofollow noreferrer"> Selenium文档 </A> </p> </DIV>

编辑

登录后才能参与评论