GCP资料串流处理服务有新选择现在还可用Apache Kafka

社会动态2021-02-28 22:05:58
最佳答案

现在GCP资料串流撷取服务不再只有Google Cloud Pub/Sub单一选项,用户也能使用开源串流平台Apache Kafka,这项由Confluent提供的服务,一旦资料被串流传输到Confluent Cloud,用户便能马上在GCP上存取这些资料。

Google Cloud Pub/Sub产品经理Kir Titievsky表示,不少转换云端平台到GCP上的用户,都会询问Apache Kafka的託管服务。而由Apache Kafka专案起始人Jay Kreps、Neha Narkhede以及Jun Rao所创办的Confluent,现在提供企业用户云端託管Kafka服务。由于Apache Kafka受益于开源专案的特性,具备丰富的插件、监控以及配置工具,Confluent将这些Kafka生态系软体串起,提供使用者完整Kafka託管服务,且不须承担繁杂的管理工作。

Kir Titievsky提到,Confluent Cloud对企业建构混合系统架构特别好用,它能成为企业内部部署与公有云的中介桥梁,一旦资料串流进Confluent Cloud,用户便能直接在GCP上存取这些资料,而其跨公有云的的特性,也能被用来建构多云资料工作管线,以处理跨云所产生平衡与複製资料的工作负担。

GCP上的串流资料处理服务及支援Apache Beam的Cloud Dataflow服务,现在都原生整合Kafka。另外,在Kafka的资料也可以流进Google BigQuery、GCP云端资料仓储、Google的资料分析服务、机器学习服务甚至是无伺服器运算服务中。开发人员可以选择使用Kafka Streams和KSQL进行即时串流处理资料,并同时将资料存入Kafka生态系服务中。

现在Confluent Cloud提供专业版以及企业版两个版本。专业版提供用户自助服务工具配置Kafka环境,并提供低延迟Kafka服务、自动升级以及可加速开发Kafka应用程式的功能。另外,企业版还有提供99.95%正常运作时间的SLAs、VPC对等连接以及无限可扩展性等额外功能。

免责声明:本文由用户上传,如有侵权请联系删除!