如何实现通用的Audit.NET json数据处理？

问题描述

我正在使用 Audit.Net 库将 EntityFramework 操作记录到数据库中（目前将所有内容都记录到一个 AuditEventLogs 表中，其中 JsonData 列以以下 Json 格式存储数据：

{
    "EventType":"MyDbContext:test_database","StartDate":"2021-06-24T12:11:59.4578873Z","EndDate":"2021-06-24T12:11:59.4862278Z","Duration":28,"EntityFrameworkEvent":{
        "Database":"test_database","Entries":[
            {
                "Table":"Offices","Name":"Office","Action":"Update","PrimaryKey":{
                    "Id":"40b5egc7-46ca-429b-86cb-3b0781d360c8"
                },"Changes":[
                    {
                        "ColumnName":"Address","OriginalValue":"test_address","NewValue":"test_address"
                    },{
                        "ColumnName":"Contact","OriginalValue":"test_contact","NewValue":"test_contact"
                    },{
                        "ColumnName":"Email","OriginalValue":"test_email","NewValue":"test_email2"
                    },{
                        "ColumnName":"Name","OriginalValue":"test_name","NewValue":"test_name"
                    },{
                        "ColumnName":"OfficeSector","OriginalValue":1,"NewValue":1
                    },{
                        "ColumnName":"PhoneNumber","OriginalValue":"test_phoneNumber","NewValue":"test_phoneNumber"
                    }
                ],"ColumnValues":{
                    "Id":"40b5egc7-46ca-429b-86cb-3b0781d360c8","Address":"test_address","Contact":"test_contact","Email":"test_email2","Name":"test_name","OfficeSector":1,"PhoneNumber":"test_phoneNumber"
                },"Valid":true
            }
        ],"Result":1,"Success":true
    }
}

我和我的团队有一个主要方面要实现： 能够创建一个管理员可以告诉的搜索页面

• 谁改变了
• 他们改变了什么
• 什么时候发生的变化

他们可以给出一个时间段，以减少审计记录的数量，有趣的部分来了： 应该有一个输入文本字段，可以让他们在“ColumnValues”部分的值中进行搜索。

我遇到的问题：

• 即使我将 Json 结构映射到关系行中，我也无法在保持通用性的情况下搜索每一列。
• 如果我不映射，我可以使用 LIKE mssql 函数在 Json 字符串中进行搜索，但是按照大约 100,000 条记录的顺序，查询需要一个永恒的时间来完成，所以它可能不是这样的。

保持通用性很重要，因此我们不需要每次创建或修改新实体时都修改审计搜索页面。

我只知道 MSsql，但是将审计日志存储在像 cosmosDB（或其他任何东西，这只是一个例子）这样的面向文档的数据库中是否有可能解决我的问题？或者我可以使用像 MSsql 这样的关系数据库达到所需的行为吗？

解决方法

看起来您是在征求意见，在这种情况下，我强烈推荐面向文档的数据库。

CosmosDB 可能是一个不错的选择，因为它支持 SQL 查询。

有一个扩展可以从 Audit.NET 登录到 CosmosDB：Audit.AzureCosmos

示例查询：

SELECT c.EventType,e.Table,e.Action,ch.ColumnName,ch.OriginalValue,ch.NewValue
FROM c 
JOIN e IN c.EntityFrameworkEvent.Entries
JOIN ch IN e.Changes
WHERE ch.ColumnName = "Address" AND ch.OriginalValue = "test_address"

Here 是一篇不错的帖子，里面有很多关于 CosmosDB 的复杂 SQL 查询的例子