Ecmascript - Busca usando json com milhões de objetos

Fala aí Diogo, beleza? Tente dar uma olhada no Set, ele é uma Collection que não permite valores repetidos, ao contrário do Array.

Espero ter ajudado.

Opa Matheus, boa noite.

Fiz um teste aqui e cheguei na seguinte conclusão:

Exemplo 1

let result = new Set([1, 1, 2, 3, 4]);
console.log(result);

retorna:

[1,2,3,4]

Exemplo 2

result = new Set([{id:1},{id:1},{id:2},{id:3},{id:4}]);
console.log(result);

retorna:

[{id:1},{id:1},{id:2},{id:3},{id:4}]

Como resolvo o segundo exemplo?

Fala aí Diogo, verdade, como são objetos com referências diferentes vai repetir mesmo, voltando ao array, verifique se o item já não está na lista, se estiver, você não adiciona:

const list = []
const array = [
    { id: 1, name: 'Matheus' },
    { id: 1, name: 'Matheus' },
    { id: 2, name: 'Henrique' },
    { id: 2, name: 'Henrique' },
    { id: 3, name: 'Castiglioni' }
]

array.forEach(item => {
    if (list.findIndex(i => i.id === item.id) < 0) {
        list.push(item)
    }
})

console.log(list)

Espero ter ajudado

Opa Matheus, tudo bem?

Mas aí acabo voltando para o primeiro exemplo que expus nesse post. Onde a única diferente é o uso do "forEach" neste caso.

De qualquer forma, obrigado pela ajuda.

Abraços!

Fala Diogo, daria para fazer com Set, basicamente o ifdeveria ser feito do mesmo jeito, isso porque são objetos com referências diferentes.

Abraços