豆瓣爬取电影数据1.2 需求分析 （主要内容：程序模块划分以及功能描述。一般应包含爬取模块（也叫数据采集模块），预处理模块，数据存储模块，可视化模块等。爬取模块要分析数据类型和格式要求，数量要求，数据质量要求等；预处理模块要分析需要对爬到数据进行哪些处理，才能满足后续的存储和可视化需求；数据存储模块要分析数据如何存储，比如存入文件还是数据库等，方便后续使用；可视化模块要分析对爬取的数据进行哪些方面的可视化展示。）

根据需求分析，我们可以将程序模块划分为以下几个部分：

1. 爬取模块（数据采集模块）：该模块用于爬取豆瓣电影网站上的电影数据，并将数据按照指定的格式进行存储。需要考虑数据类型和格式要求、数量要求、数据质量要求等。

2. 预处理模块：该模块用于对爬取到的数据进行预处理，以满足后续的存储和可视化需求。预处理的任务可以包括去重、数据清洗、数据标准化等。

3. 数据存储模块：该模块用于将预处理后的数据存储到指定的位置，方便后续使用。数据存储可以选择存入文件或者数据库等。

4. 可视化模块：该模块用于对爬取到的电影数据进行可视化展示。可视化的方式可以包括制作图表、制作词云等。

具体的功能描述如下：

1. 爬取模块：

- 爬取豆瓣电影网站上的电影数据，包括电影名称、评分、导演、主演、类型、上映时间、制片国家/地区、语言、剧情简介等信息。
- 对爬取到的数据进行去重、数据清洗、数据标准化等处理。
- 将处理后的数据按照指定的格式进行存储，如CSV、JSON等。

2. 预处理模块：

- 对爬取到的数据进行去重，避免重复数据。
- 对数据进行清洗，删除不符合要求的数据。
- 对数据进行标准化，如将日期格式进行统一。

3. 数据存储模块：

- 将处理后的数据存储到指定的位置，如本地文件或者数据库中。
- 存储的格式可以选择CSV、JSON、MySQL等。

4. 可视化模块：

- 制作电影评分排行榜图表，展示评分最高的电影。
- 制作电影类型分布图表，展示不同类型电影的数量分布。
- 制作电影制片国家/地区分布图表，展示不同国家/地区电影的数量分布。
- 制作词云图，展示电影剧情关键词的分布情况。

以上是豆瓣爬取电影数据程序模块划分及功能描述，根据具体需求可进行相应调整。