云服务器价格_云数据库_云主机【优惠】最新活动-搜集站云资讯

金山云_美橙云主机_评分榜

小七 141 0

动机/简介

在第一部分中,我简要演示了如何使用数据仓库基金会的EDW模板项目创建本机数据存储对象(NDSO)。数据仓库的关键任务之一是整合和清理来自不同来源的数据。根据场景的复杂性和底层数据源的异构程度,在分层ETL过程中处理数据,首先进行技术清理,然后在后续步骤中,通过对数据应用(并添加)业务语义和规则来清理和合并数据。对于sapbw和sapbw/4HANA,SAP已经制定了一套全面的建议,以健壮和可扩展的方式对此类ETL流程进行建模。我们将此概念称为分层可扩展体系结构(LSA)++(请在本博客末尾的链接部分找到关于LSA的第一个指导文档的链接)

此类过程中的中心对象是BW和BW/4HANA中的advanced DataStore对象,它是SAP BW和SAP BW/4HANA中的一个标准对象,需要根据用户的需要进行定制专用用例(用于ETL目的或用作报告基础的对象)。此外,ADSO为可靠的开箱即用操作提供了有价值的服务,例如:

增量/满载能力回降(选择性)删除数据、单个请求或NDSO的完整内容请求管理

Data Warehousing Foundation提供的NDSO也在SAP HANA上本地提供这些服务。因此,与从头开始开发所有这些功能相比,它大大降低了开发成本……

由于它与SAP BW(由SAP HANA提供支持)或SAP BW/4HANA无缝集成,NDSO在混合场景(其中一部分处理是在SAP BW中完成的,另一部分也是在SAP HANA上完成的)以及BW/4 HANA和本机HANA/SAP SQL数据仓库(其中BW/4 HANA能够使用/访问来自知名NDSO数据结构的数据)之间的互操作性中发挥着关键作用!

增量能力

让我们回顾一下第1部分中创建的NDSO的状态。记得?我们已经开始初始加载到空的NDSO并激活它。

在这个博客中,轻淘客,我们使用的样本数据是基于提供NDSO功能的数据仓库基础上的标准模板EDW项目的一部分。

重要提示:有两个可用的平面文件,可以通过为测试目的手动添加、删除或更改记录。只有扁平文件"SalesOrder_1.csv"与数据加载相关。如果记录发生更改,武汉大数据,则需要将它们传输到SAP HANA DB上的缓冲区表中,在这种情况下,该表充当将数据加载到NDSO的源,并提供流程图(SO.hdb流图). 在更改了FlatFile之后,不要忘记执行"SourceData"文件夹的重新构建,以更新源表中的数据。此任务不是由流程图完成的。

在执行流程图之后,初始加载的数据在入站队列中可用:

注意:入站队列和ChangeLog有三个技术关键字段(红色框),用于跟踪每个请求加载的记录序列(LoadId,recordNo)和要执行的操作(recordmode:'N'=new record=INSERT)。由于我们进行了初始加载,物联网水表,所有记录都作为新记录插入(recordMode'N')。除了技术密钥外,开发人员还可以定义一个语义密钥来控制数据粒度。

激活后,数据被插入"活动数据"和"变更日志"表。

2.2)增量加载如果deltamode中加载了其他记录,我们来看看会发生什么。

前两条记录是对现有记录的更改(订单数量增加;recordmode'A'=ADD),物联网架构,第三条记录是新记录。激活请求后,Changelog数据如下:

对于客户Muhammed Eldon,现在有三条记录:

其中一条记录的Recordmode'N'表示加载的增量(orderquantity=6)类似的一个,带有Recordmode'X'和倒号,允许重述before image值(OrderQuantity=-6)以及一个带有空白记录模式""的记录,其中显示增量加载(图像后)后的实际情况,其中OrderQuantity=10(从初始加载开始为6+4)。

在活动表中,最后只更新图像后记录:

对客户的Barry French执行了相同的操作。由于客户"Carl Jackson"的订单是新的,因此记录也会保留在活动表中,而不进行增量计算。

如果已经加载并激活的请求需要删除,则可以随时使用ChangeLog中跟踪的信息(图像之前/之后)。

使用NDSO,有什么免费的云服务器,所有这些机制都会被传递开箱即用,可以根据给定场景的需求轻松定制。这大大减少了开发工作并确保了数据一致性。

更多信息

数据仓库基础(DWF)SAP帮助页:\u选项\u dwf

SAP HANA DWF社区博客:SAP HANA DWF社区博客

SAP HANA SQL数据仓库–数据仓库基础:HPSPS//BLUGS.SAPHANACOM/2017/10/30/SAP-数据仓库基础

产品可用性矩阵(PAM):https://support.sap.com/release-upgrade-maintenance/pam.htm

SWDC:https://support.sap.com/software/installations->A–Z索引->SAP HANA数据仓库基础

SAP HANA学院频道–数据仓库基础(DWF)https://www.youtube.com/playlist?列表=PLkzo92owKnVxZcLRGmfZS-bdlIFYRQ39R

第一个指导文件LSA++:https://assets.cdn.sap.com/sapcom/docs/2016/03/445ef806-647c-0010-82c7-eda71af511fa.pdf