Preciso gerar identificadores estáveis para strings para que eu possa desduplicar entradas sem manter os valores brutos.

Este recurso gera identificadores estáveis a partir de strings de entrada, permitindo reconhecer e desduplicar valores repetidos sem armazenar o texto original. Ele ajuda a reduzir a retenção de dados sensíveis enquanto mantém uma referência consistente para correspondência e agrupamento.

Este recurso produz um identificador estável para uma determinada string, de modo que a mesma entrada sempre resulte no mesmo identificador de saída. Ele foi projetado para oferecer suporte a fluxos de trabalho de desduplicação onde você deseja detectar valores repetidos sem persistir as strings brutas. Você pode usar o identificador como uma chave substituta ao inserir, mesclar ou comparar registros entre execuções ou sistemas. Ao armazenar apenas o identificador, você pode minimizar a exposição de valores sensíveis ou proprietários, mantendo a capacidade de corresponder entradas idênticas. Os identificadores podem ser usados para agrupar análises, aplicar restrições de exclusividade ou evitar envios duplicados. Ele também oferece suporte a pipelines de normalização de dados onde campos brutos são transformados em referências consistentes antes do armazenamento. Casos de uso comuns incluem a desduplicação de e-mails, nomes de usuário, IDs de dispositivos, SKUs de produtos ou rótulos de texto livre, evitando a retenção de valores brutos. O recurso é especialmente útil em ambientes preocupados com a privacidade, onde o armazenamento de strings originais não é desejável. Ele pode ser integrado à lógica de ingestão, ETL e camada de aplicação sempre que for necessária uma correspondência consistente.