将json文件数据保存到Rails数据库中

问题描述

我有一个使用rails 5.2.1的Rails API，并且正在开发一个Web Scraping API，该API使用Mechanize Gem提取Web数据。

我要做的是，将所有这些Web抓取数据数据传递给React.js，但是首先我需要在数据库中获取这些数据，我很难确定这个。

因此，当我提取数据并将其全部接收到一个JSON文件（称为data.json）时，我惊讶地发现，直到这里哈哈。

{
  "Brazil":[
  {"Jungle Plants":[bla bla bla ]},{"Desert Plants":[ bla bla bla ]}],"Egypt":[
  {"Jungle Plants":[bla bla bla ]},{"Desert Plants":[ bla bla bla ]}]
  
  and so on...
}

因此，我下一步要做的是将JSON数据分离到数据库中，该数据库已经具有如下迁移设置：

class CreatePlants < ActiveRecord::Migration[5.2]
  def change
    create_table :plants do |t|
      t.string :country_name
      t.string :plant_categories

      t.timestamps
    end
  end
end

所以在表中我想要的是，我希望将“巴西”或“埃及”之类的国家名称或其他任何国家名称放入 country_name 列，对于 plant_categories 。

我的问题是，如何将data.json文件组织/分离到数据库中？非常感谢您的帮助！

解决方法

这是我的方法，我将使用JSON或JSONB列来保存每个数组来自主体的数组，因此我将迁移更改为：

class CreatePlants < ActiveRecord::Migration[5.2]
  def change
    create_table :plants do |t|
      t.string :country_name
      t.jsonb :data

      t.timestamps
    end
  end
end

因此，假设您具有已解析的响应（在主体上应用JSON.parse之后），则产生以下哈希值：

response =
  {
    "Brazil": [
      { "Jungle Plants": [ bla bla bla ] },{ "Desert Plants": [ bla bla bla ] }
    ],"Egypt": [
      { "Jungle Plants": [ bla bla bla ] },{ "Desert Plants": [ bla bla bla ] }
    ]

    and so on...
  }

我愿意：

response.each { |key,value| Plant.create!(country_name: key,data: value) }

那样，如果您在上一条语句之后执行以下命令：

Plant.find_by(country_name: 'Brazil').data

您将获得阵列：

[{ "Jungle Plants": [ bla bla bla ] },{ "Desert Plants": [ bla bla bla ] }]

但这是您的决定，可以用不同的方式完美解决此“问题”，例如，可以将数组另存为string，然后从数据库中检索它们并应用{{1} }或在模型定义中应用serialize method，以将它们再次转换为JSON.parse。另一个选择是进一步过滤响应并将其保存在更多列中。

我会说，最好的方法取决于您以后要处理的数据，但是出于灵活性的考虑，我选择的是我之前说过的方法，以将数组从API中保存到JSONB列中然后对它们执行我想要的任何操作（另一个优点是，将数据另存为JSONB允许您以无法仅使用字符串的方式对它们执行查询）