SAP客户数据云（CDC），即Gigya客户身份和访问管理平台，旨在帮助公司与客户建立数字关系。它的平台允许公司管理客户的个人资料、偏好、选择加入和同意设置，让客户保持对其数据的控制。客户通过CDC的注册即服务选择加入并注册，数据库大数据，该服务解决不断变化的地理隐私问题，并管理法规遵从性要求，如《通用数据保护条例》（GDPR）。

CDC是SAP对提供个性化全渠道体验的回应，以透明的方式利用客户信息这将有助于组织遵守数据隐私、居留和保留法规，并遵守GDPR法规。

本博客提供了一种方法，介绍如何使用SAP云平台和IdentitySync组件将客户数据迁移到SAP客户数据云。

可以将大量数据从源系统迁移到SAP客户数据云使用IdentitySync组件，该组件是CDC的SaaS工具，用于通过SAP云平台集成数据服务导入、转换和导出数据。IdentitySync是Gigya强大的ETL解决方案（提取、转换、加载），提供了一种在平台之间批量传输数据的简便方法。下面的数字说明了批量迁移到SAP CDC的高级体系结构。

加载文件的推荐格式是JSON，但可能是提取数据或将数据转换成这种格式是不可能的。在这些情况下，物联智能家居，CDC将允许导入分隔文本文件中的数据。IdentitySync为一些数据流场景提供代码模板，可以根据客户要求定制，将CSV文件转换和解析为JSON。

在IdentitySync中，物联网和互联网的区别，组件是一个预配置的数据流元素，用于执行特定的数据集成操作。这些组件包括读卡器、编写器、转换器和查找。数据流是一系列步骤，包括CDC和第三方平台之间信息传输的完整定义。数据流可以按设定的时间间隔运行，也可以临时执行。

CDC导入数据流

第一步是创建数据流，并为Lite（即客户档案数据集的几个字段）和Full Account（即客户档案数据集的所有字段）的导入提供模板。

使用Full Account模板中，我们可以看到导入数据的基本过程：

在模板数据流中，首选的文件格式指定为JSON，这可以使用数据流选择屏幕中可用的附加组件进行更改：

在文件.parse.dsv步骤将帮助您解析CSV文件并将其转换为标准cdcjson格式。csv导入过程的一个限制是，不支持使用标准导入模板导入嵌套的阵列数据，例如电话号码。本机解析DSV不支持读取嵌套数组格式（例如，编号："+46704429999"，类型："Mobile"）

但是，有一个数据流步骤记录.评估"，它接收用户记录作为输入，使用自定义Javascript对其进行操作，并生成记录作为输出。

在这种情况下，可以使用脚本来转换包含电话号码和类型的字符串，好评返现模板，输入到一个嵌套的JSON对象中。

通常，文件中的某些数据元素可能是常量值，对正在导入的所有记录都有效。为了优化进口产品的性能，人工智能包含哪些方面，选择字段.添加"用于向记录中添加字段，并向每个字段插入一个值，而不是将其传递到文件中。

很可能导入的数据的字段名与CDC中的字段名不同。要成功导入数据，必须根据CDC字段名重命名字段。要完成此任务，请选择"数据流"选项字段.重命名"可用。在此步骤中，导入数据文件中的每个列标题必须正确映射到CDC中的相应字段。

导入帐户步骤将记录写入创建数据流的站点。错误处理是通过收集失败的记录并将它们写入一个文件保存在一个专用的位置来处理的，在这种情况下是一个SFTP文件夹。

计划和监视数据流

当数据流完成时，可以从数据流概述屏幕进行测试。打开Actions（操作）菜单显示一组选项：

"Run Test（运行测试）"启动数据流，并将只读取任何要处理的导入文件的前10条记录。这是一种快速迭代测试过程并微调数据流的方法。

当数据流准备好用更大的数据量（多个文件上的更多记录）进行测试时，可以使用"调度程序"启动导入过程。一旦安排好，数据流将按照初始读取步骤中定义的顺序从指定位置读取文件（通常先读取最旧的文件）。

可通过状态选项对流进行监控：

按详细信息按钮将打开作业状态，其中可以看到任何错误的进度和详细信息：

优化CDC数据流量负载性能

数据流将有多个到服务器的连接，可以在导入.帐户"迈步。建议的最大并行连接数为20：

建议将加载文件拆分为20万行，但任何单个文件不得超过2GB。一般来说，您应该估计每小时20万到30万条记录的负载率，但这取决于字段的数量和与服务器的连接数量。

结论

SAP Customer Data Cloud提供了一套强大而全面的工具，以帮助将大量数据迁移到其平台上。借助SAP Data Services或CPI–Data Services，可以设计一个高效的ETL过程，以确保数据从遗留系统顺利传输到CDC。与任何迁移项目一样，都会有挑战需要克服，因此以下提示可能值得记住：