生成TPCH-SF300和SF1000数据

问题描述

我正在尝试在Databricks上生成SF300和SF1000 TPCH数据。但是,我的脚本已经运行了24个小时以上,我想我做错了。

我遵循了https://github.com/databricks/spark-sql-perf上的指示。然后,我在其存储库中使用了笔记本(tpcds_datagen.scala)生成数据。当然,我修改了参数以将TPC-DS更改为TPC-H。但这非常慢。

有人可以提出一种更快的方法来帮助我吗?预先感谢。

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)