微众银行DSS数据治理平台:一站式开发管理门户

需积分: 49 11 下载量 87 浏览量 更新于2024-07-09 收藏 14.63MB PDF 举报
"DSS 数据治理平台使用.pdf" DataSphere Studio(DSS)是由微众银行开发的一款一站式数据应用开发管理门户。它采用插拔式的集成框架设计,与计算中间件Linkis紧密配合,使得接入各类数据应用系统变得更加简单便捷。DSS提供了用户友好的界面(UI),便于数据开发者进行高效的数据管理和应用开发。 1.1 集成Linkis:DSS能够与Linkis无缝对接,提供强大的数据处理和分析能力。通过Linkis,DSS能够支持多样的计算框架,如YARN、Spark等,增强了平台的兼容性和灵活性。 1.2 AppJoint功能:AppJoint是DSS中的一个重要组件,它允许开发者将不同的数据应用系统进行集成,实现数据共享和协同工作。AppJoint与DSS的结合,为用户提供了一致的使用体验,简化了数据应用的开发流程。 1.3 项目管理:在DSS中,项目(Project)是组织和管理数据任务的基本单元。项目管理功能支持对多个项目进行分类、管理和协作,确保团队成员可以高效地进行数据工作。 1.4 Azkaban集成:DSS还支持与Azkaban作业调度系统的集成,这使得DSS具备了强大的作业调度能力。AzkabanAppJoint组件帮助用户在DSS中创建和管理复杂的作业流程,实现自动化执行和监控,提高数据处理的效率。 1.4.1 AzkabanAppJoint的具体作用在于,它为DSS提供了与Azkaban的接口,使得用户可以在DSS的环境中直接操作Azkaban的工作流,简化了调度任务的管理,同时也保持了Azkaban原有的强大功能。 总结来说,DSS数据治理平台是微众银行精心打造的数据开发管理工具,通过与Linkis和AppJoint等技术的集成,为用户提供了统一、高效的数据应用开发环境。其丰富的功能,如项目管理、作业调度等,旨在提升数据科学家和开发者的生产力,促进数据价值的挖掘和利用。