Datastream 版本说明

Datastream 版本说明

本页面记录了 Datastream 的正式版更新。您可以查看此页面,以了解有关新增的功能、经过更新的功能、已弃用的功能、错误修复和已知问题的公告。

您可以在 Google Cloud 页面上查看所有 Google Cloud 的最新产品更新,在 Google Cloud 控制台中浏览和过滤所有版本说明,或者以编程方式在 BigQuery 中访问版本说明。

如需接收最新产品动态,请将本页面的网址添加到您的 Feed 阅读器,或直接添加 Feed 网址

2025 年 6 月 30 日

Datastream 现已在 northamerica-south1(墨西哥)区域发布。如需查看所有可用区域的列表,请参阅 IP 许可名单和地区

2025 年 6 月 23 日

Datastream 现在支持将 BigLake Iceberg 表作为目标位置,无论是在 Google Cloud 控制台中还是在 Datastream API 中。

如需了解详情,请参阅 Datastream 文档

2025 年 5 月 26 日

Datastream 现在支持将 MongoDB 作为来源。此功能处于预览版阶段。

如需了解详情,请参阅 Datastream 文档

2025 年 5 月 15 日

基于全局事务标识符 (GTID) 的 MySQL 来源复制功能现已正式发布 (GA)

2025 年 5 月 13 日

Datastream 现已在 europe-north2(斯德哥尔摩)区域发布。如需查看所有可用区域的列表,请参阅 IP 许可名单和地区

2025 年 5 月 5 日

您现在可以在 Datastream 中使用 Private Service Connect 接口作为专用连接方法。如需了解详情,请参阅文档

2025 年 4 月 9 日

Datastream API 现在支持将数据流式传输到 BigLake 托管式表。 如需了解详情,请参阅将数据流式传输到 BigLake 托管式表 (BLMT)

2025 年 3 月 20 日

您现在可以使用 Secret Manager 安全地存储 Datastream 的身份验证资源。如需了解详情,请参阅使用 Secret Manager 存储敏感数据

2025 年 2 月 27 日

Datastream 现在支持将 Salesforce 作为来源。此功能处于预览版阶段。

如需了解详情,请参阅 Datastream 文档

2024 年 12 月 9 日

Datastream 现在支持将二进制日志读取器作为 Oracle 源的 CDC 方法。此功能处于预览版阶段。

如需了解详情,请参阅 Datastream 文档

2024 年 11 月 12 日

Datastream 现在支持基于全局事务标识符 (GTID) 的 MySQL 源复制。此功能处于预览版阶段。

基于 GTID 的复制支持故障切换和受管理的数据库集群,例如 Cloud SQL 企业 Plus 版。如需了解详情,请参阅 Datastream 文档

2024 年 10 月 23 日

Datastream 现已在 europe-southwest1(马德里)区域推出。如需查看所有可用区域的列表,请参阅 IP 许可名单和地区

2024 年 10 月 18 日

Datastream 现已在 us-south1(达拉斯)区域推出。如需查看所有可用区域的列表,请参阅 IP 许可名单和地区

2024 年 10 月 11 日

Datastream 现已在 me-central2(达曼)区域推出。如需查看所有可用区域的列表,请参阅 IP 许可名单和地区

2024 年 10 月 7 日

现在,Datastream 在将数据流式传输到 Cloud Storage 时支持的最大行大小已增加到 100 MB。

2024 年 7 月 23 日

Datastream 对 SQL Server 作为数据源的支持现已正式发布 (GA)。如需了解详情,请参阅文档

2024 年 7 月 10 日

Datastream 现已在 us-east5(哥伦布)区域发布。如需查看所有可用区域的列表,请参阅 IP 许可名单和地区

2024 年 6 月 21 日

Datastream 现在支持 SQL Server 源的变更表 CDC 方法。如需了解详情,请参阅源 SQL Server 数据库页面。

2024 年 6 月 19 日

Datastream 现在支持在将数据提取到 BigQuery 时使用仅附加写入模式。如需了解详情,请参阅配置写入模式

2024 年 3 月 15 日

Datastream 现在支持 SQL Server 作为数据源。此功能处于预览版阶段。如需了解详情,请参阅使用 Datastream 中的 SQL Server 源支持简化数据集成Datastream 文档

2024 年 1 月 26 日

您现在可以恢复 Oracle 来源的数据流。您还可以从特定位置开始 Oracle 源视频流。如需了解详情,请参阅恢复直播管理直播

2024 年 1 月 23 日

Datastream 现在支持 Oracle 源的 JA16SJIS 和 JA16SJISTILDE 字符编码。

2024 年 1 月 16 日

现在,Datastream 在将数据流式传输到 BigQuery 时支持的最大事件大小已增加到 20 MB。

2023 年 11 月 22 日

Datastream 现在支持对不需要客户端证书的 PostgreSQL 源的连接进行 SSL/TLS 加密。

2023 年 11 月 10 日

您现在可以为 Oracle 源流式传输以下大型对象数据类型:

  • BLOB
  • CLOB
  • NCLOB

2023 年 11 月 9 日

您现在可以恢复永久失败的流。如需了解详情,请参阅恢复流

现在,您可以使用 Datastream API 从 MySQL 源的特定二进制日志位置开始数据流。如需了解详情,请参阅从特定二进制日志位置开始流式传输

2023 年 10 月 20 日

Datastream 现在支持 PostgreSQL ARRAY 数据类型。

2023 年 9 月 10 日

Datastream 现在支持对 Oracle 源进行 SSL/TLS 加密。如需了解详情,请参阅 Datastream API 参考文档。

2023 年 9 月 7 日

Datastream BigQuery 迁移工具包现已推出。该工具包是一款开源软件,可简化从 Dataflow Datastream 到 BigQuery 模板迁移到 Datastream 原生 BigQuery 复制解决方案的过程。如需了解详情,请参阅工具包文档

2023 年 6 月 30 日

现在,PostgreSQL 源支持 ENUMCITEXT 数据类型。

2023 年 6 月 7 日

Datastream 支持的最大事件大小现已增加。新限制为:将数据流式传输到 BigQuery 时为 10 MB,将数据流式传输到 Cloud Storage 时为 30 MB。

2023 年 5 月 11 日

Datastream 现在支持对任意大小的 PostgreSQL 表进行回填。如需了解详情,请点击此处

2023 年 4 月 17 日

Datastream 现在支持 Oracle 多租户 (CDB/PDB) 架构。如需了解如何配置可插拔数据库以供 Datastream 使用,请点击此处

2023 年 4 月 4 日

Datastream 支持将 BigQuery 作为目标,现已正式发布 (GA)。如需了解详情,请点击此处

Datastream 对 PostgreSQL 作为来源的支持现已正式发布 (GA)。如需了解详情,请点击此处

2023 年 2 月 27 日

Terraform 现在支持 Datastream 专用连接连接配置文件数据流资源。如需了解详情,请参阅使用入门:将 Terraform 与 Datastream 搭配使用

2023 年 2 月 21 日

您现在可以使用 Datastream API 为数据流设置并发回填任务的数量上限。如需了解详情,请参阅管理视频流

2023 年 1 月 11 日

向 Datastream API 中的 projects.locations.connectionProfiles 资源添加了 validate_onlyforce 参数。如需了解详情,请参阅 Datastream API 参考文档

2022 年 9 月 15 日

Datastream 现在支持将 BigQuery 作为目标位置。点击此处可访问相关文档。

Datastream 现在支持将 PostgreSQL 作为数据源。点击此处可访问相关文档。

我们对 Datastream 价格做出了一些变更。如需了解详情,请参阅价格页面。

2022 年 8 月 30 日

现在,您可以使用 Datastream API 为数据流设置最大并发 CDC 任务数。如需了解详情,请参阅管理视频流

2022 年 6 月 16 日

Datastream 现在支持在其资源(包括专用连接配置、连接配置文件和数据流)上使用标记。标记是可应用于 Datastream 资源以实现精细访问权限控制的键值对。如需了解详情,请参阅使用标记控制访问权限。如需使用标记,请参阅管理标记

2022 年 6 月 10 日

Datastream 现已符合 HIPAA 的规定。

2022 年 5 月 13 日

Datastream 现在支持回填超过 1 亿行的 Oracle 数据库表。点击此处可访问相关文档。

2021 年 12 月 14 日

Datastream 现在支持客户管理的加密密钥 (CMEK)。点击此处可访问相关文档。

2021 年 11 月 30 日

Datastream 现已在所有 Google Cloud 区域正式发布 (GA)

在此发布版本中,数据流详情页面新增了 OBJECTS(对象)标签页,其中包含有关数据流中包含的每个对象的详细信息(回填状态、对象级错误等)。

点击此处可访问相关文档。

2021 年 5 月 26 日

Datastream 是一种无服务器且易于使用的变更数据捕获 (CDC) 和复制服务。通过它,您能够可靠地跨异构数据库和应用同步数据,并且尽量减少延迟时间和停机时间。

Datastream 支持从 Oracle 和 MySQL 数据库流式传输到 Cloud Storage。该服务可与 Dataflow 模板进行简化的集成,以在 BigQuery 中生成最新的具体化视图,用于分析;将数据库复制到 Cloud SQL 或 Spanner 中,用于数据库同步;或直接利用 Cloud Storage 中的事件流来实现事件驱动型架构。

Datastream 的优势包括:

  • 采用无服务器模式,无需预配或管理资源,并且服务会根据需要自动扩容和缩容,停机时间极短。
  • 易于使用的设置和监控体验,超快时间实现价值。
  • 集成 Google Cloud 数据服务产品组合的强大功能,以便跨 Datastream、Dataflow、Data Fusion、Pub/Sub 和 BigQuery 等实现数据集成。
  • 跨异构数据库和应用同步和统一数据流。
  • 确保安全,具有专用连接选项以及您希望 Google Cloud 提供的安全性。
  • 准确可靠,同时提供公开透明的状态报告,而且在数据和架构变化时具有强大的灵活处理能力。
  • 支持多种使用场景,包括用于迁移和混合云配置的分析、数据库复制和同步,并支持构建事件驱动型架构。

Datastream 的文档包括快速入门、概念内容、如何通过界面、REST API 调用和 gcloud 使用此服务、API 教程和参考信息、支持信息以及资源相关信息。点击此处可访问相关文档。