JSON de >2 gb no elasticsearch??
Bom dia!
Alguém que ja trabalhou com o elastic search ja viu/usou essa abordagem? Problemas? Vantagens? Desempenho?
tenho usado o elk a pouco tempo, mas para coisas mas normais(logs, e controle de microsservicos) são json pequenos e funciona muuuuuuuuito bem.
O problema começa quando meu time de negócio vem com um regra onde é preciso avaliar valores nas chaves de um json, problema, o json pode chegar a tamanhos ilógicos (o maior que vi foi 3.2gb), as abordagem anterior(não fui eu) foi colocar isso no postgres mas isso nao ia dar certo mesmo, e agora estamos mudando a arquitetura e estão tentando manter essa busca, mas ela pode ser removida desde que seja inviável tecnicamente.
Sugeriram o elk mas nao sei se isso resolve(minha intuição diz que vai dar problema), sou do time "joga pro s3" e usa outra tecnologia pra tratar e avaliar os dados.
Diz ai a sua opinião/experiencia