如何提高Talend Cloud Jobs的绩效以实现Salesforce

问题描述

我在Talend中创建了一个工作，以捕获来自Salesforce的数据并将其作为目标放在雪花中。为此，我遵循以下架构。

tsaleforceinputComponent -----> tsNowflakebulkoutput -----> tsNowflakeBulkExec

我在tsaleforcecomponent中使用查询模式，并试图捕获机会表数据。该表有大约400万条记录。当前作业首先使用tsNowflakebulkloutput将数据复制到蔚蓝斑点作为暂存区域，然后使用tsNowflkaebulkexec组件将其复制到雪花。

作业在远程服务器上使用以下配置执行：

Syntax error in sql statement "CREATE TABLE HIGHLIGHTS2 (
   ID BIGSERIAL PRIMARY KEY NOT NULL,USER_REF_ID UUID,BODY VARCHAR(10000) DEFAULT NULL,ANNOTATION_ID INTEGER UNIQUE DEFAULT[*] NULL
)"; expected "NOT,NULL,COMMENT,CHECK,REFERENCES,)"; sql statement:
CREATE TABLE highlights2 (
   id bigserial PRIMARY KEY NOT NULL,user_ref_id uuid,body varchar(10000) DEFAULT NULL,annotation_id integer UNIQUE DEFAULT NULL
) [42001-200] 42001/42001

此操作当前花费的时间约为11小时。

有什么方法可以将工作或远程服务器中的性能提高到更少的时间，因为市场上的其他工具所花费的时间却更少。

如果需要更多详细信息，请告诉我。 谢谢

解决方法

暂无找到可以解决该程序问题的有效方法，小编努力寻找整理中！

如果你已经找到好的解决方法，欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@）