从 SQL Server 迁移到 PostgreSQL 时，对 PII 数据实施 SHA1 哈希处理

查看 SQL 服务器代码。

要查看生成 SHA1 哈希值的 SQL Server 代码，请执行以下操作：

要记录确切的哈希算法和数据转换，请执行以下操作：

要记录确切的哈希算法和数据转换，请执行以下操作：

创建 pgcrypto 扩展。

要创建 pgcrypto 扩展，请使用 pgAdmin/psql 运行以下命令：

CREATE EXTENSION pgcrypto;

实现 PostgreSQL 函数。

实现以下 PostgreSQL 函数来复制 SQL Server 的哈希逻辑。简而言之，此函数会使用以下步骤：

CREATE OR REPLACE FUNCTION utility.hex_to_bigint ( 
     par_val character varying, 
     par_upper character varying DEFAULT 'lower'::character varying) 
RETURNS bigint 
LANGUAGE 'plpgsql' 
AS $BODY$ 
DECLARE 
    retnumber bigint; 
    digest_bytes bytea;
BEGIN 
    if lower(par_upper) = 'upper' 
    then 
        digest_bytes := digest(upper(par_val), 'sha1');
    else 
        digest_bytes := digest((par_val), 'sha1');
    end if; 
    retnumber := ('x' || encode(substring(digest_bytes, length(digest_bytes)-10+1), 'hex'))::bit(64)::bigint; 
    RETURN retnumber; 
END; 
$BODY$;

测试函数。

要测试该函数，请使用来自 SQL Server 的示例数据来验证匹配的哈希值。运行如下命令：

select 'alejandro_rosalez@example.com' as Email, utility.hex_to_bigint('alejandro_rosalez@example.com','upper') as HashValue;

--OUTPUT
/*
email 	        hashvalue
"alejandro_rosalez@example.com"	451397011176045063
*/

在相关表上创建触发器。

要在相关表上创建触发器以在插入或更新时自动生成哈希值，请运行以下命令：

CREATE OR REPLACE FUNCTION update_email_hash() 
RETURNS TRIGGER 
AS $$ 
BEGIN 
    NEW.email_hash = utility.hex_to_bigint(NEW.email, 'upper'); 
    RETURN NEW; 
END; 
$$ LANGUAGE plpgsql;

CREATE TRIGGER email_hash_trigger BEFORE INSERT OR UPDATE ON users FOR EACH ROW EXECUTE FUNCTION update_email_hash();

开发迁移脚本或使用 AWS DMS。

开发迁移脚本或使用 AWS DMS 为现有数据（包括存储在源系统BIGINT中的哈希值）填充哈希值。完成以下任务：

使用新的 PostgreSQL 哈希函数。

要使用新的 PostgreSQL 哈希函数以确保一致性，请执行以下操作：

识别应用程序查询。

要识别使用哈希值的应用程序查询，请执行以下操作：

修改查询。

如有必要，可以修改查询以使用新的 PostgreSQL 哈希函数。执行以下操作：

执行测试。

要对生产数据的子集执行全面的测试，请执行以下操作：

验证哈希值是否匹配。

要验证 SQL Server 和 PostgreSQL 之间的哈希值是否匹配，请执行以下操作：

验证应用程序功能。

要使用迁移的数据和新的哈希实现来验证应用程序功能，请执行以下操作：