Guia atualizado e definitivo - Adicionando IAs no Home Assistant ( Descrição de Imagens / Assistentes )

Fala pessoal!!

Bora para frente, nesse vídeo tutorial irei mostrar como integrar as I.As Generativas mais famosas no seu HA, aqui você conseguirá:

  • Descrever Imagens/Vídeos
  • Comandos via assistente com a I.A

E mostro ainda aplicações nas automações para ficar completo!

Considerem deixar o like e comentário, ajuda muito!!

Tmj!

3 curtidas

Consegui resolver um problema com a ajuda do @Choske !

Coloquei pra verificar a imagem da foto ao invés da câmera!

{
    "provider":"numero",
    "message":"Decreva a imagem resumidamente",
    "image_file":"/config/www/imgs/cameras/camera_porta.png",
    "target_width":1280,
    "max_tokens":100,
    "temperature":0.5
}

Ali em provider vai por o número que aparece na parte de Ações em Ferramentas do desenvolvedor! Se colocar só “google” vai dar erros.

Coloquei o texto na imagem! Coloquei um segundo função!

Nó função 01

msg.retorno = msg.retorno_ia.response_text

msg.mensagem = "Google, me diz o que vê na foto?!" + '\n\n' + msg.retorno

msg.payload = {
    options: {
        parse_mode: "Markdown",
    },
    chatId: numero,
    type: 'message',
    content: msg.mensagem
}
return msg;

Nó Função 02

msg.payload = {
    chatId: numero,
    type: 'photo',
    content: '/homeassistant/www/imgs/cameras/camera_porta.png',
    caption: 'Asuna: ' + msg.mensagem
}

return msg;

No final ficou assim:

Ao abrir e fechar a porta ele separa em 2 fluxos, um deles salva a foto, analisa e me envia. No outro tbm mas como outro arquivo de foto!

Colegas, se for usar + de um chatId, é pra usar assim:

E não esquece de por no nó sender do telegram nas configurações do bot os 2 chatId!