云服务器上运行爬虫

网站编辑2023-06-24 12:09:30345

```python import requests from bs4 import BeautifulSoup import time

上传文件的URL和文件名

url = 'http://example.com/uploads/' filename = 'uploads/' + url

发送请求，获取页面内容

response = requests.get(url) soup = BeautifulSoup(response.content, 'html.parser')

解析页面内容，提取所需的数据

data = [ 'title' => soup.title.string # 页面标题 'filename' => soup.filename # 上传文件的路径 ]

输出提取的数据

for item in data: print(item.get('title'), item.get('filename')) ```

注意，在使用此代码时，请确保使用合法的URL和文件名。如果文件不存在或无法上传，则会出现错误。此外，还应确保将代码中的路径替换为您实际上传的文件的路径。