spark postgres连接器(复制)

6kkfgxo0 于 2021-05-27 发布在 Spark

关注(0)|答案(0)|浏览(174)

全部，
我正在处理大量数据，在spark中处理完数据并应用所有转换后将数据写回postgres—我不知道什么是最好的方法，因为我想利用db copy实用程序将数据写入postgresql（正如dba所建议的）
你能让我知道是否有连接器或某种方式，我可以调用实用程序或直接模式，写到postgresql快速复制。
谢谢你的建议。。

postgresql jdbc apache-spark apache-spark-sql Driver

来源：https://stackoverflow.com/questions/63402026/spark-postgres-connector-copy