Mais uma vez ... "Ele não disse que seria fácil, mas disse que valeria a pena" ...

Nenhuma agressividade é justificável. Esta é uma grande verdade. Melhor seria se não acontecesse. Mas, não vivemos em um mundo utópico. Então, é importante buscar a sabedoria...
Quando alguém é agressivo conosco ( e há - também - casos em que este erro é nosso), creio que devemos orar e pedir sabedoria a Deus para lidar com estas energias.
Podemos, sim, quando necessário, explicitar ao próximo nossos limites e a forma com a qual não gostamos de ser tratados. Mas, se isso for necessário,  é interessante só abrirmos nossa boca quando estivermos calmos o suficiente para não aumentarmos o mau.

E como é difícil ...

" A resposta branda desvia o furor, mas a palavra dura suscita a ira" (Provérbios 15-11)