Se você estiver usando o Home Assistant Supervised (Debian + Docker) dá uma olhada nesse vídeo abaixo:
Como acessar o Home Assistant Supervised remotamente com cloudflared - Tutoriais - Fórum Home Assistant Brasil
O uso padrão do cloudflare para acesso externo já bastante seguro. E ainda dá para habilitar outros recursos para aumentar a segurança. Atualmente para mim é a melhor solução.