数据转换

数据转换#

数据转换是一类数据预处理问题。

业务流程:

  1. 定义目标结构化数据的格式。由于增加了新的交付目标,我们需要定义最终交付的是什么,并且和需求方核对。

  2. 定义转换规则。JSON的哪一段对应哪个表的哪个或者哪几个字段。这也是要和需求方一起核对的。即数据转换的核心步骤。

  3. 正常的开发流程。自动化空间很大,后续可以内置在平台。

我们考虑将我们的数据全部转为json格式作为中转格式,再在与客户定义了目标结构化数据的格式之后,进行转换。

最后的格式转换代码可以由大模型去写。