IBM Netezza SQL 转换指南

IBM Netezza 数据仓储旨在与 Netezza 专属 SQL 语法协同工作。Netezza SQL 基于 Postgres 7.2。由于各种 SQL 方言有所不同，因此，如果不进行修改，则为 Netezza 编写的 SQL 脚本无法在 BigQuery 数据仓库中使用。

本文档详细介绍了 Netezza 与 BigQuery 在 SQL 语法的以下方面的异同：

• 数据类型
• SQL 语言元素
• 查询语法
• 数据操纵语言 (DML)
• 数据定义语言 (DDL)
• 存储过程
• 函数

您还可以使用批量 SQL 转换来批量迁移 SQL 脚本，或使用交互式 SQL 转换来转换临时查询。两个预览版的工具都支持 IBM Netezza SQL/NZPLSQL。

数据类型

时间戳和日期类型格式

如需详细了解 Netezza SQL 使用的日期类型格式，请参阅 Netezza 日期时间模板模式文档。如需详细了解日期时间函数，请参阅 Netezza 日期/时间函数文档。

在将日期类型格式元素从 Netezza 转换为 GoogleSQL 时，您必须特别注意 TIMESTAMP 和 DATETIME 之间的时区差异，如下表所述：

SELECT 语句

通常情况下，Netezza SELECT 语句与 BigQuery 兼容。下表列出了例外情况：

SELECT
  (subquery) AS flag,
  CASE WHEN flag = 1 THEN ...

SELECT
  (subquery) AS flag,
  CASE WHEN (subquery) = 1 THEN ...

SELECT
  q.*,
  CASE WHEN flag = 1 THEN ...
FROM (
  SELECT
    (subquery) AS flag,
    ...
  ) AS q

比较运算符

内置 SQL 函数

函数

本部分比较 Netezza 和 BigQuery 函数。

聚合函数

分析函数

日期和时间函数

字符串函数

数学函数

DML 语法

本部分比较 Netezza 和 BigQuery DML 语法。

INSERT 语句

INSERT INTO table VALUES (...);

INSERT INTO table (...) VALUES (...);

INSERT INTO table (...) VALUES (...);
INSERT INTO table (...) VALUES (...);

INSERT INTO table VALUES (), ();

BigQuery 中 DML 脚本的一致性语义与 Netezza 中的等效语句略有不同。另请注意，除了 NOT NULL 之外，BigQuery 不提供限制条件。

如需简要了解快照隔离以及会话和事务处理，请参阅一致性保证和事务隔离。

UPDATE 语句

在 Netezza 中，WHERE 子句是可选的，但在 BigQuery 中是必需的。

UPDATE tbl
SET
tbl.col1=val1;

UPDATE A
SET
  y = B.y,
  z = B.z + 1
FROM B
WHERE A.x = B.x
  AND A.y IS NULL;

UPDATE A
SET
  y = B.y,
  z = B.z + 1
FROM B
WHERE A.x = B.x
  AND A.y IS NULL;

UPDATE A alias
SET x = x + 1
WHERE f(x) IN (0, 1)

UPDATE A
SET x = x + 1
WHERE f(x) IN (0, 1);

UPDATE A
SET z = B.z
FROM B
WHERE A.x = B.x
  AND A.y = B.y

UPDATE A
SET z = B.z
FROM B
WHERE A.x = B.x
  AND A.y = B.y;

如需查看示例，请参阅 UPDATE 示例。

鉴于 DML 配额，我们建议您使用较大的 MERGE 语句，而不是多个单独的 UPDATE 和 INSERT 语句。BigQuery 中 DML 脚本的一致性语义与 Netezza 中的等效语句略有不同。如需简要了解快照隔离以及会话和事务处理，请参阅一致性保证和事务隔离。

DELETE 和 TRUNCATE 语句

DELETE 和 TRUNCATE 语句都是在不影响表架构或索引的情况下从表中移除行的方法。TRUNCATE 语句与 DELETE 语句具有相同的效果，但对于大型表，比 DELETE 语句快得多。Netezza 支持 TRUNCATE 语句，但 BigQuery 不支持。但是，您可以在 Netezza 和 BigQuery 中使用 DELETE 语句。

在 BigQuery 中，DELETE 语句必须具有 WHERE 子句。 在 Netezza 中，WHERE 子句是可选的。如果未指定 WHERE 子句，则 Netezza 表中的所有行都会被删除。

BEGIN;
LOCK TABLE A IN EXCLUSIVE MODE;
DELETE FROM A;
INSERT INTO A SELECT * FROM B;
COMMIT;

bq query \

--replace \

--destination_table \

tableA \

'SELECT * \

FROM tableB \

WHERE ...'

bq cp \

-f tableA tableB

DELETE FROM database.table

DELETE FROM table WHERE TRUE;

MERGE 语句

对应每个目标行，MERGE 语句最多只能匹配一个源行。BigQuery 中 DML 脚本的一致性语义与 Netezza 中的等效语句略有不同。如需简要了解快照隔离以及会话和事务处理，请参阅一致性保证和事务隔离。如需查看示例，请参阅 BigQuery MERGE 示例和 Netezza MERGE 示例。

DDL 语法

本部分比较 Netezza 和 BigQuery DDL 语法。

CREATE TABLE 语句

DROP 语句

列选项和特性

临时表

Netezza 支持在会话期间存在的 TEMPORARY 表。

如需在 BigQuery 中构建临时表，请执行以下操作：

1. 创建一个存留时间较短的数据集（例如 12 小时）。

2. 在数据集中创建临时表，表名称前缀为 temp。例如，如需创建在一小时后到期的表，请执行以下命令：

   CREATE TABLE temp.name (col1, col2, ...)
   OPTIONS(expiration_timestamp = TIMESTAMP_ADD(CURRENT_TIMESTAMP(),
   INTERVAL 1 HOUR));

3. 开始读取和写入临时表。

您还可以单独移除重复项，以发现下游系统中的错误。

请注意，BigQuery 不支持 DEFAULT 和 IDENTITY（序列）列。

过程 SQL 语句

Netezza 使用 NZPLSQL 脚本语言来处理存储过程。NZPLSQL 基于 Postgres 的 PL/pgSQL 语言。本部分介绍如何将存储过程、函数和触发器中使用的过程 SQL 语句从 Netezza 转换为 BigQuery。

CREATE PROCEDURE 语句

Netezza 和 BigQuery 都支持使用 CREATE PROCEDURE 语句创建存储过程。如需了解详情，请参阅使用 SQL 存储过程。

变量声明和赋值

异常处理程序

Netezza 支持可针对某些错误条件触发的异常处理程序。BigQuery 不支持条件处理程序。

动态 SQL 语句

Netezza 支持在存储过程中使用动态 SQL 查询。BigQuery 不支持动态 SQL 语句。

控制流语句

其他语句和过程语言元素

多语句和多行 SQL 语句

Netezza 和 BigQuery 都支持事务（会话），因此支持用分号分隔并始终一起执行的语句。如需了解详情，请参阅多语句事务。

其他 SQL 语句

一致性保证和事务隔离

Netezza 和 BigQuery 都是原子性的，也就是说，跨多行的每个变更都符合 ACID。例如，即使插入了多个值，MERGE 操作也是完全原子化的。

交易

Netezza 在语法上接受 ANSI SQL 事务隔离的所有四种模式。但是，无论指定哪种模式，系统只会使用 SERIALIZABLE 模式，它可提供尽可能高的一致性级别。此模式还可避免并发事务之间的脏读、不可重复读和幻读。Netezza 不使用传统锁定来实现一致性。当两个事务尝试修改相同数据时，它使用序列化依赖检查（一种乐观并发控制）来自动回滚最新事务。

BigQuery 也支持事务。BigQuery 使用快照隔离帮助确保乐观并发控制（首先提交优先），其中查询在查询开始之前读取最后提交的数据。此方法可保证每行的每个变更和同一 DML 语句中的各行具有相同的一致性级别，同时避免死锁。如果对同一个表进行了多个 DML 更新，BigQuery 会切换为悲观并发控制。加载作业可以完全独立运行并附加到表。

回滚

Netezza 支持 ROLLBACK 语句以中止当前事务并回滚在该事务中进行的所有更改。

在 BigQuery 中，您可以使用 ROLLBACK TRANSACTION 语句。

数据库限制

后续步骤

• 查看从 IBM Netezza 迁移到 BigQuery 的分步说明。