两个世界的结合——大数据和后台的3比(数量、多样性和速度),在线自助建站系统,为商业世界带来了巨大的优势,也带来了技术上的挑战。
从业务分析到近实时操作,再到高管报告,公司几乎在所有方面都使用数据收集系统。随着组织正朝着将物联网集成到常规运营的方向发展,对实时(或近实时)数据集成到后台和运营的需求也越来越高。Apache Kafka是流式传输数据的领导者,也可以很好地管理3v。
当流式传输来自物联网设备的数据时,使用Kafka的CRM或ERP系统的数据生成软件和许多其他非常规用例,点云,其中客户希望有一点不同或业务流程需要比常规/正常情况多一点使用,这是一个挑战或缺口,由Advantco的适配器填补。
物联网到后端SAP系统
一家大型广告公司使用ApacheKafka在移动应用程序中传输从广告收集的数据。但是,教育大数据,数据需要传输到SAP ERP系统的后端流程,以便进一步处理和使用。
数据收集软件到后端SAP系统
具有在线和店内业务的零售商使用Apache Kafka从销售点(PoS)软件收集订单详细信息,但随后需要以特定的方式传输到SAP ERP系统实时或接近实时的频率。
限时清理过程
对于特定的监管目的,生产组织需要删除在指定时间后放置在Kafka云系统中的客户数据。
Advantco适配器正用于所有这些和更多用例。它能够通过Kafka API在非SAP系统和集成服务器或PCK之间交换数据。
Advantco Adapter for Kafka的优点
Advantco Adapter的主要优点是它与SAP适配器框架完全集成,这意味着可以配置Kafka连接,使用标准的SAP PI/PO和CPI工具进行管理和监控。凭借SAP可扩展性和稳定性,Advantco Kafka适配器确保了最高级别的可用性。它还与SAP日志记录/跟踪框架完全集成。
与SAP NetWeaver®集成:适配器构建在SAP NetWeaver®适配器框架上通过将SWCV传输(.tpz)导入集成存储库/enterpriseservicebuilder,并通过j2eesdm/JSPM部署J2EE软件存档(SDA或SCA),可以方便快捷地安装。与SAP NetWeaver®Runtime Workbench和SAP NetWeaver®J2EE日志记录/跟踪集成。支持SAP NetWeaver PI/PO 7.5、PI 7.4和SCPI。目标主题的配置以及如何读取数据流轮询配置适配器特定的消息属性内容转换
用于Kafka的Advantco适配器的主要功能
发送方适配器
发送方Kakfa适配器必须在Integration Builder或PCK中配置为发送方通道。在多集群环境中,发送方卡夫卡适配器隐式地保证一次所有服务器节点中只有一个会话处于活动状态。
发送方卡夫卡适配器用于消耗来自卡夫卡代理的数据,然后将数据发送到集成服务器或PCK。
接收方卡夫卡适配器
必须配置接收方卡夫卡适配器作为Integration Builder或PCK中的接收器通道。接收器Kafka通道将从集成服务器或PCK接收到的消息有效负载发送到Kafka服务器。
内容转换
内容转换或转换参数用于在普通,JSON和XML格式。
生产者API
生产者用于将消息发布到一个或多个卡夫卡主题。制作人将数据发送给卡夫卡经纪人。每次生产者向代理发布消息时,代理只需将消息附加到最后一个段文件中。实际上,什么是大数据概念,消息将附加到分区。生产者也可以将消息发送到自己选择的分区。
变量替换
为了使消息描述符能够在有效负载之外用于增强进程,变量替换可用于各种用例。
如果提供的基本参数不满足要求,则提前卡夫卡配置
,可以使用复选框启用高级卡夫卡配置,以指定卡夫卡生产者支持的配置。配置密钥与本机Kafka文档支持的配置密钥相同。
日志和跟踪配置
适配器使用标准SAP日志API将日志和跟踪消息写入标准日志和跟踪文件。
日志消息帮助用户获取有关适配器执行的信息,包括处理错误跟踪消息供Advantco的开发人员深入研究适配器执行,这有助于调试目的。
结论
用于Kafka的Advantco适配器能够通过Kafka API与集成服务器或PCK交换数据流。
其他好处包括
支持各种加密和身份验证的安全选项支持自由结构负载和Avro结构负载完全兼容0.11.0和1.0.0代理它由一个专门的团队提供全天候支持,并提供维护和升级等。
,大数据系统