Con un buen uso de la extensión y no compartiendo nunca la clave semilla, no tendrías que tener ningún problema, pero como comentaba otro forero, si puedes permitirte una wallet fría y conectarla a Metamask mejor, ya que así la clave semilla estará almacenada en el hardware.