Watson Discovery:通过 API 处理数据的问题

问题描述

我正在尝试使用 Watson discovery30Mb JSON 文件处理为 Node SDK,但它给出了文件太大的错误。在文档中,明确表示我们可以使用 API 处理最多 50Mb JSON 数据。

问题可能来自哪里?(JSON 有一个根数组元素,每个对象只包含两个字符串)

更新:JSON 文件具有以下结构

{
  "elements":[
    {
       "Q":" ... ","A":" ... "
    },...
  ]
}

解决方法

来自 API 文档 - https://cloud.ibm.com/apidocs/discovery-data#adddocument

413:太大。如果您尝试添加文档或文档,则返回 超出最大可能的元数据。

因此文档或元数据太大。您的数据不应该是,因此会留下元数据。再次来自 API 文档 -

元数据字符串 支持的最大元数据文件大小为 1 MB。 大于 1 MB 的元数据部分将被拒绝。

示例:{ "Creator": "Johnny Appleseed","Subject": "Apples" }