前后端分离外卖点单系统开发与爬虫工作流程

资源摘要信息:"前后端分离外卖点单系统，采用Shiro进行权限管理.zip" 本资源是前后端分离架构开发的外卖点单系统，其中后端基于SpringBoot框架，前端利用Vue技术栈，并用uni-app开发微信小程序支持微信登录功能。系统还包括了Redis缓存处理、quartz定时任务以及数据导出功能。此外，本资源还提供了一份关于Web爬虫技术的详细介绍，涵盖了从URL收集到反爬虫应对等爬虫工作的全流程。 ### 知识点详细说明： #### 前后端分离外卖点单系统 - **SpringBoot**: 是一个开源的Java框架，用于简化Spring应用的初始搭建以及开发过程。它使用了特定的方式来进行配置，使得开发者能够快速启动项目并进行开发。 - **Vue**: 是一套用于构建用户界面的渐进式JavaScript框架。它专注于视图层，易学易用且灵活性高，可以通过Vue CLI快速搭建项目结构。 - **uni-app**: 是一个使用Vue.js开发所有前端应用的框架，它允许开发者编写一次代码，发布到iOS、Android、Web（包括微信小程序）等多个平台。 - **微信小程序**: 是一种不需要下载安装即可使用的应用，它实现了应用“触手可及”的梦想，用户扫一扫或搜一下即可打开应用。同时它也支持微信登录，方便用户快速授权和登录。 - **Shiro**: 是一个开源的安全框架，用于身份验证、授权、加密和会话管理等。在本系统中，Shiro用于实现用户的权限管理。 #### Web爬虫技术 - **URL收集**: 爬虫的起点，从种子URL开始，递归或迭代地发现新的链接，构建待访问的URL队列。 - **请求网页**: 爬虫通过HTTP库向目标URL发起请求，获取网页的HTML源码。这一步是获取数据的基础。 - **解析内容**: 使用解析工具（如正则表达式、XPath、Beautiful Soup）对HTML进行解析，提取有用的数据信息。 - **数据存储**: 提取的数据被存储到数据库或文件中，以供后续的分析或展示。常见的存储形式有关系型数据库、NoSQL数据库、JSON文件等。 - **遵守规则**: 爬虫在工作中应遵守robots.txt协议，限制访问频率和深度，模拟人类行为访问网站，以减轻服务器负担并避免触发反爬机制。 - **反爬虫应对**: 由于网站可能部署反爬虫策略，爬虫开发者需要设计应对策略，例如处理验证码、绕过IP封锁等。 #### 其他相关知识点 - **Redis缓存**: 是一种内存中的数据结构存储系统，用作数据库、缓存和消息中间件。它支持多种类型的数据结构，如字符串、哈希、列表、集合等。 - **quartz定时**: Quartz是一个开源的任务调度库，可以集成到任何Java应用程序中，用于创建简单或复杂的定时任务。 - **导出数据**: 功能允许用户将系统内的数据导出为特定格式（如CSV、Excel等），以便进行分析或报告。 #### 标签说明 - **Java**: 一种广泛使用的面向对象的编程语言，本资源的后端部分使用Java开发。 - **小程序**: 指微信小程序，是本资源前端开发的另一个重要组成部分。 - **毕业设计/大作业**: 本资源可以作为一个IT专业的学生进行毕业设计或大作业的项目。 #### 文件名称列表 - SJT-code: 此为压缩文件中包含的代码或项目目录名称，具体包含哪些代码或文件结构未提供详细信息，但可以推测是包含前后端代码及相关配置和资源文件的总称。