on-demand查询分区spark表

vbkedwbf 于 2021-05-27 发布在 Spark

关注(0)|答案(0)|浏览(202)

我已经能够将一些csv加载到synapse工作区的spark表中，但是每当我通过sql-on-demand查询该表时；过时的数据正在出现。每当我使用spark读取表格时，正确的数据就会出现。我想知道是否有办法将这个分区表作为视图或外部表公开给sql-on-demand，以便每次都获得新的结果。
谢谢

apache-spark Azure azure-synapse

来源：https://stackoverflow.com/questions/62079956/query-partitioned-spark-tables-via-sql-on-demand-in-azure-synapse-workspaces