spark sql 外部数据源(external datasource)
时间: 2023-04-24 15:01:57 浏览: 165
Spark-SQL外部数据源.md
Spark SQL 外部数据源是指在 Spark SQL 中使用的数据源,这些数据源不是 Spark 自带的数据源,而是通过外部连接方式引入的。这些外部数据源可以是关系型数据库、NoSQL 数据库、Hadoop 文件系统等。Spark SQL 提供了一些内置的外部数据源连接器,如 JDBC、Hive、Cassandra、HBase 等,同时也支持自定义外部数据源连接器。通过使用外部数据源,可以方便地将不同的数据源集成到 Spark SQL 中,从而进行统一的数据处理和分析。
阅读全文