Implemente SHA1 o hashing para dados de PII ao migrar do SQL Server para o PostgreSQL

Analise o código do SQL Server.

Para revisar o código do SQL Server que gera SHA1 hashes, faça o seguinte:

Documente informações sobre o algoritmo de hash e as transformações de dados.

Para documentar o algoritmo de hash específico e as transformações de dados, execute as etapas abaixo:

Crie a extensão pgcrypto.

Para criar a extensão pgcrypto, use pgAdmin/psql para executar o seguinte comando:

CREATE EXTENSION pgcrypto;

Implemente uma função no PostgreSQL.

Implemente a função apresentada a seguir no PostgreSQL para replicar a lógica de hash do SQL Server. De forma geral, esta função conta com as seguintes etapas:

CREATE OR REPLACE FUNCTION utility.hex_to_bigint ( 
     par_val character varying, 
     par_upper character varying DEFAULT 'lower'::character varying) 
RETURNS bigint 
LANGUAGE 'plpgsql' 
AS $BODY$ 
DECLARE 
    retnumber bigint; 
    digest_bytes bytea;
BEGIN 
    if lower(par_upper) = 'upper' 
    then 
        digest_bytes := digest(upper(par_val), 'sha1');
    else 
        digest_bytes := digest((par_val), 'sha1');
    end if; 
    retnumber := ('x' || encode(substring(digest_bytes, length(digest_bytes)-10+1), 'hex'))::bit(64)::bigint; 
    RETURN retnumber; 
END; 
$BODY$;

Testar a função.

Para testar a função, use os dados de amostra do SQL Server para verificar se os valores de hash coincidem. Execute este comando: .

select 'alejandro_rosalez@example.com' as Email, utility.hex_to_bigint('alejandro_rosalez@example.com','upper') as HashValue;

--OUTPUT
/*
email 	        hashvalue
"alejandro_rosalez@example.com"	451397011176045063
*/

Crie acionadores nas tabelas relevantes.

Para criar acionadores nas tabelas relevantes que gerem automaticamente valores de hash em operações de inserção ou atualização, execute o seguinte comando:

CREATE OR REPLACE FUNCTION update_email_hash() 
RETURNS TRIGGER 
AS $$ 
BEGIN 
    NEW.email_hash = utility.hex_to_bigint(NEW.email, 'upper'); 
    RETURN NEW; 
END; 
$$ LANGUAGE plpgsql;

CREATE TRIGGER email_hash_trigger BEFORE INSERT OR UPDATE ON users FOR EACH ROW EXECUTE FUNCTION update_email_hash();

Desenvolva ou use um script de migração AWS DMS.

Desenvolva um script de migração ou use AWS DMS para preencher valores de hash para dados existentes (incluindo valores de hash armazenados como BIGINT no sistema de origem). Complete as seguintes tarefas:

Use a nova função de hash do PostgreSQL.

Para usar a nova função de hash do PostgreSQL e garantir consistência, execute as etapas abaixo:

Identifique as consultas da aplicação.

Para identificar as consultas da aplicação que usam os valores de hash, execute as etapas abaixo:

Modifique as consultas.

Se necessário, modifique as consultas para usar a nova função de hash do PostgreSQL. Faça o seguinte:

Realize testes.

Para conduzir testes completos com um subconjunto dos dados de produção, execute as etapas abaixo:

Valide a correspondência dos valores de hash.

Para validar que os valores de hash correspondem entre SQL Server e PostgreSQL, execute as etapas abaixo:

Verifique a funcionalidade da aplicação.

Para verificar a funcionalidade da aplicação usando os dados migrados e a nova implementação de hash, execute as etapas abaixo: