reading,使用mongodb spark连接器,使用集合模式从mongodb读取数据集

dl5txlt9  于 2021-07-09  发布在  Spark
关注(0)|答案(0)|浏览(239)

在mongodb中,可以对集合强制实施模式。
当使用javaspark连接器进行读取时,您可以选择通过对数据采样来推断模式,或者在代码中显式地为其提供模式。
https://docs.mongodb.com/spark-connector/current/java/datasets-and-sql/
对于大型异构集合,推断显然是一个问题。在代码中显式定义模式也会受到限制,因为无论何时更改集合的模式,都必须更改代码。
有没有办法读取mongodb集合模式并将其转换为spark模式,以便在读取数据集时使用?
代码示例?不同的mongodbSpark连接器?

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题