将大型 Oracle 表引入 Databricks 需要更长的时间

Question

我有一个 Oracle 表，其中包含 5000 万条记录和大约 13-15 列，并且具有复合主键。我正在尝试使用oracle.jdbc.driver.OracleDriver将此表提取到databricks中。我尝试了以下两种不同的方法：

方法 1

val myDF = spark.read.jdbc(url = url,
table = "TableName",
columnName="PartionColumn",
lowerBound=lowerBound,
upperBound=UpperBound,
numPartitions=10,
connectionProperties)

myDF.write.option("mergeSchema", "true").format("delta").mode("overwrite").saveAsTable("TableName")

方法 2

val myDF = spark.read.jdbc(url, query, connectionProperties)

myDF.write.option("mergeSchema", "true").format("delta").mode("overwrite").saveAsTable("TableName")

这需要超过 25 个小时。

另外，当我尝试将数据加载到数据框中并显示它时，它不显示结果。

有人可以建议我在这里做错了什么吗？或者任何有关实现这一目标的最佳方法的帮助将不胜感激。