Como destituir um conselheiro ? Ele não foi votado como síndico mas sim, voluntário sem remuneração.

Preciso trocar alguns conselheiros , tenho que fazer assembleia para isto ou posso fazer sozinho, meu conselho é voluntário e não possui nenhum tipo de remuneração ou benefício.