云消息队列 Confluent 版正式上线！

作者：阿里云消息队列

前言

在 2023 年杭州云栖大会上，Confluent 成为阿里云技术合作伙伴，在此基础上，双方展开了深度合作，并在今天（3月1日）正式上线“云消息队列 Confluent 版”。

通过将 Confluent 在 Apache Kafka 领域的专业技术及实战经验与阿里云强大的云基础设施及服务体系相结合，基于 Apache Kafka 核心能力构建符合企业级标准的全托管消息队列服务，为企业客户提供更加高效、安全和兼容性更强的云原生消息队列解决方案。

详情请参见： Confluent 与阿里云将携手拓展亚太市场，提供消息流平台服务

什么是 Confluent Platform？

Confluent 是一家专注动态数据（Data In Motion）的公司，以开源技术 Apache Kafka® 为核心打造实时的消息流平台，在业内有着深厚的影响力，已被金融服务、全渠道零售、汽车和游戏等众多行业广泛应用。

Confluent Platform 是一个综合性的企业级数据流处理平台，用户能够以实时、连续的流形式，轻松地访问、存储和管理数据。它由 Apache Kafka 的原始创建者开发，不仅继承了 Kafka 的核心优势，还通过增加企业级特性来扩展其功能，同时大幅降低了对 Kafka 的管理和监控压力。Confluent Platform 通过引入高级特性，进一步增强了 Kafka 的能力，旨在加快应用程序的开发和集成，通过流处理实现数据转换，简化大规模的企业级操作，并满足严格的体系结构要求。

Confluent Platform 让用户专注于从数据中获取业务价值，而不必担心底层机制问题 —— 例如，数据如何在不同的系统之间进行传输或集成？具体来说，Confluent Platform 极大地简化了包括将数据源接入 Kafka、构建流应用程序，保护、监控以及管理 Kafka 基础设施的整个过程。

Confluent Platform 已广泛应用于众多行业，如金融服务、全渠道零售、自动驾驶、欺诈监测、微服务和物联网等。详情请参见 What is Confluent Platform [ 1] 。

Confluent 成为现代技术栈的中枢神经系统

图片

Confluent Placement 在 《Forrester Wave™》报告中的位置

图片

《Forrester Wave™》报告由 Forrester Research, Inc. 版权所有。Forrester 和 Forrester Wave™ 是 Forrester Research, Inc. 的注册商标。Forrester 不对《Forrester Wave™》中所描绘的任何供应商、产品或服务进行背书。信息基于最佳可用资源，并且意见反映的是当时判断，可能随时发生变化。

Confluent Platform 与开源 Kafka 的功能对比

图片

图片

云消息队列 Confluent 版发布速览

什么是云消息队列 Confluent 版？

云消息队列 Confluent 版是阿里云与 Apache Kafka 项目创始团队所创立的 Confluent 公司合作，在 Apache Kafka 核心能力基础上为企业提供的一站式、高效可靠的，集成消息流式处理与大数据系统的一体化解决方案。

利用云消息队列 Confluent 版，可以快速构建和扩展与生产集群规模相匹配的企业级 Kafka Confluent 集群，有效地应对以下常见痛点：

  1. 对云端全托管企业级 Kafka 服务有迫切需求

如果需要云端全面托管的企业级 Kafka 服务时， 云消息队列 Confluent 版能够提供官方授权的 Confluent Platform 许可证，以经济高效的途径获取全套企业级特性。

  1. Kafka 集群搭建及运维复杂性挑战大

借助云消息队列 Confluent 版的一站式服务， 在短短几十分钟内高效就能完成从机型选配、集群部署到消息事件处理的全流程操作，这将极大地节省用户自行部署和管理集群大数据系统的所需时间和成本投入。

云消息队列 Confluent 版是一个流消息平台，能够组织管理来自不同数据源的数据，是一个稳定高效的系统。如下图所示，它由六个组件构成，分别为 Kafka Broker、Rest Proxy、Connect、Zookeeper、ksqlDB、Control Center。

说明： 默认情况下，云消息队列 Confluent 版集群 Kafka Broker、Rest Proxy、Connect、Zookeeper、ksqlDB、Control Center 组件的副本数分别为 3、2、2、3、2、1，也可以根据实际的业务需求设置合适的副本数量。

图片

云消息队列 Confluent 版有哪些优势？

  1. Apache Kafka 原厂商业化产品

Confluent 团队倾力打造，其对 Kafka 项目贡献了超过 80% 的代码量，并积累了逾百万小时的技术实战经验；在 Apache Kafka 基础上进行了深度扩展和强化，为企业客户提供安全、稳定且性能卓越的企业级流数据处理平台。

  1. 高 SLA 保障，数据持久化

确保消息数据持久化存储于消息队列中，即使在海量消息堆积情况下，仍可保持集群的高吞吐能力；提供全自动巡检运维保障体系，服务可用性 99.95%，确保业务连续性和数据可靠性。

  1. 免运维，易观测

提供核心链路健康巡检，集群自动诊断及异常告警；每个消费组都可以针对消息堆积量设置监控和告警策略，以便及时发现和解决问题；提供完备的管控类 OpenAPI，实现各类资源的管理和运维。

  1. 开箱即用，无缝迁移

全托管的 Confluent Platform 服务，无需搭建和运维基础设施环境，真正做到开箱即用；支持无缝迁移现有工作负载，无需修改任何代码，大幅降低了迁移成本和技术风险，轻松享有云计算弹性扩展、高可用和全球部署等优势。

云消息队列 Confluent 版的核心功能

  • 多语言开发： 支持各种主流编程语言，如 Java、Python 和 Scala，便于开发团队使用熟悉的语言构建应用。
  • 丰富的内置生态系统： 内置企业级 Connectors，MQTT 代理以及 Schema Registry 等强大的生态工具。
  • 全兼容 Apache Kafka： 在 Apache Kafka 强大功能基础上构建，并始终保持对 Apache Kafka 的兼容性。
  • 消息流数据库 ksqlDB： 基于轻量级 SQL 语句的事件流数据库，极大地简化了数据流处理应用的构建过程。
  • 云资源弹性扩展能力： 基于强大的云基础设施，获得灵活且弹性的计算与存储资源，实现灵活地按需扩展。
  • 企业级安全能力： 支持 SSL 认证、RBAC 访问控制，以及可整合外部 LDAP，提供严格的企业级安全保障。
  • 企业级解决方案售后支持： 阿里云与 Confluent 共同提供全天候 24 x 7 x 365 专业客户服务和技术支持。
  • 阿里云产品集成互联互通： 阿里云 Flink、Databricks、EMR 等平台无缝集成进行数据消费和分布式计算。

云消息队列 Confluent 版的应用场景

  • 通用数据流动性

    拥抱云计算，并维护一个持久稳定的数据通道，以确保所有本地、混合云和多云环境中的数据同步。在逐步迁移到云端过程中，开发者能够充分利用先进的云计算工具，更高效地构建下一代应用程序。

  • 人工智能

    人工智能模型的性能优劣很大程度上取决于输入的数据质量。为人工智能系统和应用提供实时、上下文相关、高度管控、值得信赖的数据，能够高效地推动人工智能驱动的应用程序实现规模化生产与交付。

  • 客户洞察与体验优化

    实时响应客户互动行为，构建一个全面详尽的数据视图，去标识化地分析客户，以高效的方式实现与客户的互动——实时跨所有数据孤岛和系统，提供个性化的体验。

  • 事件驱动型微服务

    通过采用松耦合的微服务架构设计，能够实现更高的敏捷性和更快的创新。使用 Confluent 将微服务彻底解耦，统一服务间的通信标准，并且有效消除维护独立数据状态的繁琐需求。

云消息队列 Confluent 版的版本说明

云消息队列 Confluent 版对外提供两个版本，不同版本提供的功能不同，价格也不相同，详情请参见计费说明 [ 2] 。

版本的功能对比如下：

图片

如何快速上手云消息队列 Confluent 版？

  1. 集群资源规格评估

对于云消息队列 Confluent 版集群来说，影响资源使用的因素众多，包括使用的业务场景、业务应用程序性能等，我们结合一般场景给出云消息队列 Confluent 版集群资源评估参考建议，帮助用户在购买创建集群时评估集群规模。在集群创建完成后，仍然可以根据实际的资源使用率进行集群扩容来变更集群的资源配置。

  1. 购买和部署实例

在使用 Confluent 集群前，需要先购买和部署实例。部署完成后，在实例详情页面，通过登录控制台进行 Control Center 登录，对集群的主要操作将在 Control Center 中进行。

图片

  1. 权限管理

作为集群安全的一部分，云消息队列 Confluent 版提供了用户管理功能，可以在控制台用户管理页面完成新增用户、删除用户等操作。此外，云消息队列 Confluent 版还支持 ACL 授权、RBAC 授权功能，支持使用 Control Center 或者安装命令行界面（CLI）进行相关操作。

**在 Control Center 页面进行 RBAC 授权
**

图片

图片

图片

  1. 集群配置与使用

云消息队列 Confluent 版支持集群的网络访问与安全设置，跨集群进行数据的镜像和复制等操作，还可以通过云消息队列 Confluent 版的核心管理服务 Control Center 进行集群的可视化监控，以及检测监控数据中的异常事件并配置告警，还可以使用 Schema Registry 管理 Schema，使用 KsqlDB 简单的、完全交互式的 SQL 接口进行流处理操作。云消息队列 Confluent 版也支持安装命令行界面（CLI）进行相关操作。

Brokers Overview 查看 Producer、Consumer 监控指标

图片

基于 KsqlDB 应用的架构图

图片

阿里云和 Confluent 的合作始于 2021 年，双方联合发布了消息流服务，用户可以通过阿里云市场获得 Confluent 消息流平台服务，在节省部署集群大数据软件成本的同时，大幅度提升开发效率，并以企业级安全性处理消息流。

我们诚邀大家点击此处，浏览云消息队列 Confluent 版官网详情页了解更多产品功能与应用场景，也欢迎填写表单进行咨询：https://survey.aliyun.com/apps/zhiliao/bzT3AfPaq

相关链接：

[1] What is Confluent Platform

https://docs.confluent.io/platform/current/platform.html

[2] 计费说明

https://help.aliyun.com/zh/apsaramq-for-kafka/cloud-message-queue-confluent-edition/confluent-billing-overview

[3] 阿里云消息队列控制台

https://account.aliyun.com/login/login.htm?oauth_callback=https%3A%2F%2Fkafkanext.console.aliyun.com%2Fcn-hangzhou%2Fconfluent%3Ffrom%3Dlists&lang=zh

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：/a/434769.html

如若内容造成侵权/违法违规/事实不符，请联系我们进行投诉反馈qq邮箱809451989@qq.com，一经查实，立即删除！

相关文章

vue3学习(续篇)

vue3学习(续篇)

vue3学习(续篇) 默认有vue3基础并有一定python编程经验。 chrome浏览器安装vue.js devtools拓展。 文章目录 vue3学习(续篇)1. element-ui使用2. axios 网络请求1. 简介2. 操作 3. flask-cors解决跨域问题1. 简介2. 操作 4. 前端路由 vue-router1. 简单使用2. 配置路径别名和…
阅读更多...
基于远程NDIS的Internet共享设备驱动出现感叹号（Windows 仍在设置此设备的类配置 代码 56）解决办法

基于远程NDIS的Internet共享设备驱动出现感叹号（Windows 仍在设置此设备的类配置 代码 56）解决办法

USB共享网络出现了RNDIS/MBIM设备驱动显示感叹号（Windows 仍在设置此设备的类配置。 (代码 56)）的情况的解决办法： 1.设置中搜索安全模式/更改高级启动选项->立即重新启动 2.重启后界面中选择疑难解答->高级选项->启动设置->屏…
阅读更多...
触发HTTP preflight预检及跨域的处理方法

触发HTTP preflight预检及跨域的处理方法

最近在做需求的过程中，遇到了很多跨域和HTTP预检的问题。下面对我所遇到过的HTTP preflight和跨域的相关问题进行总结： 哪些情况会触发HTTP preflight preflight属于cors规范的一部分，在有跨域的时候，在一定情况下会触发preflig…
阅读更多...
迭代的 CKKS 高精度自举

迭代的 CKKS 高精度自举

参考文献： [KDE23] Kim A, Deryabin M, Eom J, et al. General bootstrapping approach for RLWE-based homomorphic encryption[J]. IEEE Transactions on Computers, 2023.[BCC22] Bae Y, Cheon J H, Cho W, et al. Meta-bts: Bootstrap** precision beyond the …
阅读更多...
Java基础概念 7-计算机中的数据存储

Java基础概念 7-计算机中的数据存储

目录 Java基础概念 7-计算机中的数据存储 计算机的存储规则 进制 十进制:0123456789 二进制:01 常见的进制 不同进制在代码中的表现形式 计算机为什么用二进制存储数据? 进制之间的转换 任意进制转十进制 公式: 系数*基数的权次幂 相加 二进制转十进制** 八进制转…
阅读更多...
基于springboot+vue的智能无人仓库管理系统

基于springboot+vue的智能无人仓库管理系统

博主主页：猫头鹰源码 博主简介：Java领域优质创作者、CSDN博客专家、阿里云专家博主、公司架构师、全网粉丝5万、专注Java技术领域和毕业设计项目实战，欢迎高校老师\讲师\同行交流合作 ​主要内容：毕业设计(Javaweb项目|小程序|Pyt…
阅读更多...
Java电梯模拟升级版

Java电梯模拟升级版

Java电梯模拟升级版 文章目录 Java电梯模拟升级版前言一、UML类图二、代码三、测试 前言 在上一版的基础上进行升级，楼层采用享元模式进行升级，并对楼层对象进一步抽象 一、UML类图 二、代码 电梯调度器抽象类 package cn.xx.evevator;import java.ut…
阅读更多...
cuda WSL2 无需单独安装

cuda WSL2 无需单独安装

https://docs.nvidia.com/cuda/wsl-user-guide/index.html 这个写的很详细
阅读更多...
正则化解决过拟合

正则化解决过拟合

拟合 蓝色的圈代表数据，红色的线和绿色的线分别代表我们学习到的曲线。 绿色曲线相对红色曲线更加平滑。绿色曲线才是我们想要的，红色曲线从某种程度上讲是过拟合的，可以从图上看到他的误差是很小的，每个点的误差都是很小很小的。…
阅读更多...
纯css+html实现拟态开关按钮面板

纯css+html实现拟态开关按钮面板

适合智能家居的开关面板UI 参考：https://drams.framer.website/
阅读更多...
网络聊天室

网络聊天室

Ser.c #include<myhead.h> #define SER_IP "192.168.159.148" #define SER_PORT 6666//因为客户端发送给服务器的消息是不同类型&#xff0c;所以定义结构体比较方便 typedef struct msg_TYPE {char type; // L:登录　　C:聊天　　Q:退…
阅读更多...
flowable的java class task,也叫服务任务

flowable的java class task,也叫服务任务

源码地址12级程序猿-新年正当红/flowable-ui和服务任务 启动flowable-ui-app 浏览器输入下面的地址 http://localhost:8080/flowable-ui/#/ 在服务任务这里设置java类的路径 com.dmg.flowabledemo.task.MyServiceTask 当请假任务完成之后&#xff0c;自动触发这个服务任务…
阅读更多...
网络信息安全：nginx漏洞收集（升级至最新版本）

网络信息安全：nginx漏洞收集（升级至最新版本）

网络&信息安全&#xff1a;nginx漏洞收集&#xff08;升级至最新版本&#xff09; 一、风险详情1.1 nginx 越界写入漏洞(CVE-2022-41742)1.2 nginx 缓冲区错误漏洞(CVE-2022-41741)1.3 nginx 拒绝服务漏洞&#xff08;CNVD-2018-22806&#xff09; 二、nginx升级步骤 &…
阅读更多...
奥壹oelove婚恋交友v10.0_10.1情感导师插件_商城插件SQL数据库导入升级方法

奥壹oelove婚恋交友v10.0_10.1情感导师插件_商城插件SQL数据库导入升级方法

大家注意哈奥壹oelove的系统默认是不含情感导师插件和商城系统的&#xff0c;这两个插件需要再官方独立购买&#xff0c;有幸公司付钱购买了系统及两套商业插件&#xff0c;可以看我昵称找我注明CSDN我已经把数据库及模板文件提取出来了&#xff0c;先说下数据库把&#xff0c;…
阅读更多...
基于Mindspore，通过Resnet50迁移学习实现猫十二分类

基于Mindspore，通过Resnet50迁移学习实现猫十二分类

使用平台介绍 使用平台&#xff1a;启智AI协作平台 使用数据集&#xff1a;百度猫十二分类 数据集介绍 有cat_12_train和cat_12_test和train_list.txt train_list.txt内有每张图片所对应的标签 Minspore部分操作科普 数据集加载 Mindspore加载图片数据集就直接调整成这种…
阅读更多...
uniapp H5 $el.querySelectorAll is not a function

uniapp H5 $el.querySelectorAll is not a function

在监听是否在可视区域遇到问题&#xff08;网页端&#xff09; 解决方案 <view class"container"> ...省略 业务代码... </view>参考 &#xff1a; https://blog.csdn.net/qq_18841969/article/details/134620559
阅读更多...
狼人杀 (狼人) 个人理解玩法

狼人杀 (狼人) 个人理解玩法

今天 我们来说说 狼人杀游戏 每个板子都有的一个角色 狼人 因为 动物园板子 平民被换成了 羊驼 所以 狼人也是唯一一个所有板子都有的角色 狼人的技能非常简单 每天晚上 可以袭击一名玩家 如果没有特殊情况 被袭击的玩家天亮时会直接出局 特殊情况包括 比较典型的有 守卫的盾…
阅读更多...
Matter 笔记1-环境准备，编译

Matter 笔记1-环境准备，编译

不要远程登录Ubuntu输入以下命令&#xff0c;原因&#xff1a;ubuntu/linux上的http代理设置 1. 准备 1.1 工具 Ubuntu 22.04 LTSClash 里General的端口设置到ubuntu 的网络设置里 1.2 代码 这里使用芯科整理过的代码 git clone https://github.com/SiliconLabs/matter.…
阅读更多...
Redis线程模型解析

Redis线程模型解析

引言 Redis是一个高性能的键值对&#xff08;key-value&#xff09;内存数据库&#xff0c;以其卓越的读写速度和灵活的数据类型而广受欢迎。在Redis 6.0之前的版本中&#xff0c;它采用的是一种独特的单线程模型来处理客户端的请求。尽管单线程在概念上似乎限制了其扩展性和并…
阅读更多...
实验笔记之——Gaussian Splatting SLAM配置与测试

实验笔记之——Gaussian Splatting SLAM配置与测试

之前博客对基于3DGS的SLAM进行了调研 学习笔记之——3D Gaussian Splatting及其在SLAM与自动驾驶上的应用调研_3d gaussian splatting slam-CSDN博客文章浏览阅读3.2k次&#xff0c;点赞40次&#xff0c;收藏58次。论文主页3D Gaussian Splatting是最近NeRF方面的突破性工作&a…
阅读更多...
最新文章

Copyright @ 2022~2023