Apache Spark agora aceita inglês

Foi lançado um SDK para Apache Spark que pega instruções em inglês e as compila em objetos PySpark , tornando o Spark mais fácil de usar e acessível.

Esperava-se que em algum momento alguém usasse Generative AI para compilar inglês para SQL ou código. O SQL, embora fácil de entender, tem sido a barreira para a interação direta da administração com os silos de dados da organização.

Mas, na verdade, o desenvolvedor era a ponte entre essas duas arestas. Ele recebia o pedido da Gerência em inglês ou outro idioma natural e traduzia para SQL/código para gerar o relatório necessário. Essa função agora é desempenhada pela IA, de modo que mesmo aqueles que não entendem as operações SQL podem facilmente usar a capacidade de consultar rapidamente dados de negócios e gerar relatórios.

Mas... a vantagem do desenvolvedor é que ele tinha conhecimento do esquema, dos detalhes internos do banco de dados, da lógica de negócios que utilizou para construir a consulta. Um sistema de IA sem esse conhecimento estava fadado ao fracasso. Hoje em dia, no entanto , os LLM 's podem ser treinados em seus dados e, assim, obter o conhecimento que faltava.

Tal tentativa de usar linguagem natural para acessar dados é o Chat2DB do Alibaba, um cliente SQL de uso geral e ferramenta de relatórios para bancos de dados que integra recursos ChatGPT que integra recursos AIGC e é capaz de converter linguagem natural em SQL. Ele também pode converter SQL em linguagem natural e fornecer sugestões de otimização para SQL para aumentar consideravelmente a eficiência dos desenvolvedores.