这是一个简单的Python网页爬虫示例，它使用requests库获取网页内容并使用BeautifulSoup库解析HTML。请注意，爬虫需要遵守网站的robots.txt规则，并且尊重网站的使用协议。此外，频繁的爬取可能会对网站服务器造成压力，因此在使用爬虫时要谨慎。
这个例子将会爬取一个网页的标题和内容。请注意这个例子并不适用于所有网站，因为不同的网站可能有不同的HTML结构和标签。
首先，确保你已经安装了必要的库，如果没有安装，可以通过pip安装：
```bash
pip install requests beautifulsoup4
```
以下是Python爬虫代码示例：
```python
import requests
from bs4 import BeautifulSoup
def get_web_content(url):
# 获取网页内容
response = requests.get(url)
if response.status_code == 200: # 检查请求是否成功
return response.text # 返回网页内容
else:
return None # 如果请求失败则返回None
def parse_web_content(html):
# 解析HTML内容并提取标题和文本
soup = BeautifulSoup(html, 'html.parser') # 使用BeautifulSoup解析HTML内容
title = soup.title.string # 获取标题内容
content = soup.get_text() # 获取所有文本内容（不包括标签）
return title, content # 返回标题和内容作为元组
def main():
url = "https://example.com" # 输入你想爬取的网址
html = get_web_content(url) # 获取网页内容
if html is not None: # 如果获取成功则解析内容并打印出来
title, content = parse_web_content(html) # 解析内容并获取标题和内容
print("Title:", title) # 打印标题
print("Content:", content) # 打印内容的前两行，可以通过改变[:n]来改变显示的内容行数，或者改为需要提取的位置字符串。根据具体的html结构来决定如何提取内容。具体请参考BeautifulSoup的文档。这只是一个简单的例子。你可能需要修改或扩展此代码以适应特定的需求。在实际使用中，你可能还需要处理异常、设置更多的请求头、处理重定向等。另外，请注意不要违反任何网站的robots协议和服务条款，合法、道德且尊重隐私地进行爬虫活动非常重要。在实施大规模或频繁爬取时，应当采取额外措施（例如限制爬取速度等）来减轻对网站的压力和可能的负担。最后提醒一下：这只是一个基本的爬虫例子，具体的爬虫实现可能会涉及到更复杂的网络协议、数据结构、并发控制等问题。在实际应用中，请确保你了解并遵守相关的法律法规和道德准则。