Acho que ainda falta muito para um Jarvis, primeiro que o que temos hoje e que chamamos de "Inteligência" nada mais é que uma função complexa, ela é executada recebendo props (prompt do usuário), aplica muita lógica baseada em dados e faz um return de uma string que os pesos julgaram ser relevante, só isso. Uma inteligencia como Jarvis e que interage com diversos sistemas tem a capacidade de decidir o que é relevante e então toma uma ação de acordo, se tentassemos fazer algo similar com a "Inteligência" que temos hoje, ela iria tomar uma ação para cada prompt que receber e que poderia ser conflitante, por exemplo:

• Sensor interno da casa avisando que ar não está com qualidade ideal: IA decide abrir janela
• Sensor externo da casa avisando que foi detectada fumaça: IA decide fechar janela

Essa situação provavelmente causaria um loop.

Precisariamos criar uma "Inteligência" que recebe todos os promps, junta os que fazem sentido estarem juntos, isole os que não fazem sentido (wifi ficou indisponível), calcule de acordo com as props como deve reagir (se deve ou não abrir janela).