O que fazer com Condômino que ameaça e calunia todos os síndicos?

Sou síndica a mais de 2 anos e tem um condômino no edifício que se acha o dono do condomínio, ele faz ameaças, calunia e ainda faz obras irregulares. Ocorre que isso aconteceu com os síndicos anteriores também. Teve um momento que ele disse que a síndica estava desviando verba do condomínio, fez assembléia e não provou nada. Em uma assembléia, esse condômino não somente me ameaçou, como ainda caluniou o meu padrasto (que eu considero como pai e faleceu a 4 anos). Estou cansada...mas não vou desistir, ficarei até o final do meu mandato, pois o mesmo já disse que tira e coloca qualquer síndico no momento que quiser. Devo ingressar na Justiça???