python是一种广泛使用的编程语言，它有着简洁优雅的语法，丰富的第三方库，以及强大的跨平台能力。python在数据分析和机器学习领域有着广泛的应用，也是爬虫开发的首选语言之一。爬虫是一种自动从网络上获取信息的程序，它可以根据指定的规则和逻辑，从网页、API、文件等来源抓取所需的数据。
mongodb是一种非关系型数据库，它以文档（document）的形式存储数据，每个文档都有一个唯一的标识符（_id）。mongodb支持动态的数据结构，可以灵活地适应不同的数据类型和需求。mongodb还提供了高性能、高可用性、高扩展性等特点，适合处理大量的数据。
要实现数据的爬取和存储，我们需要以下几个步骤：
1. 安装python和mongodb。你可以从官网下载安装包，或者使用pip和brew等工具进行安装。安装完成后，你可以在命令行中输入python --version和mongo --version来检查是否安装成功。
2. 安装相关的库。我们需要使用requests库来发送网络请求，beautifulsoup库来解析网页内容，pymongo库来操作mongodb数据库。你可以使用pip命令来安装这些库，例如pip install requests。
3. 编写爬虫代码。我们以爬取豆瓣电影排行榜为例，展示如何用python编写爬虫代码。首先，我们需要导入相关的库：
然后，我们需要定义一个函数来获取网页内容，并返回一个beautifulsoup对象：
print('请求失败')
接下来，我们需要定义一个函数来解析网页内容，并提取我们需要的数据。我们可以使用beautifulsoup提供的方法来查找和遍历网页元素，例如find_all, find, get_text等。