正如在googlecloudnext'17上宣布的那样,googleclouddataflow通常可用于Python。使用apachebeam for Python构建的管道将能够使用云数据流服务提供的高级功能。apachebeam最近由Apache软件基金会作为顶级项目建立,它提供了一个统一的编程模型,允许您实现可以在任何执行上运行的数据处理作业引擎。云Dataflow是一个完全管理的、高效的服务,它为执行Beam管道提供了许多特性。该服务与Google云平台(GCP)的其余部分集成,为Google云存储和Google BigQuery等服务提供连接器。它提供自动调整功能,如自动缩放和动态工作重新平衡,可以在数据流作业运行时动态优化作业,并简化管道配置。Dataflow监视接口是一个简化的UI,用于监视、记录和理解管道的计时。
本文地址: /shujuku/22153.html
版权声明:本文发布于收集站云 内容均来源于互联网 如有侵权联系删除