Há horário específico para retirar carro do vaga presa?

Na meu prédio a maioria das vagas são presas. O meu carro prede do meu vizinho e nunca me recusei ou criei problema para retirar, muito pelo contrário. Ele me manda um “oi” e imediatamente já aviso que vou descer porque sei que não posso impedi-lo retirar o carro. No entanto, ele já me pediu para retirar o carro algumas vezes 1 hr da manhã para ele poder entrar com o carro dele. Em uma das vezes demorei a responder porque estava dormindo. Eu tenho que estar a disposição dele até de madrugada para ele colocar o carro no garagem? Porque não posso dormir esperando ele chegar, sem falar que me coloca em risco de ser assaltada porque preciso colocar o carro na rua para ele entrar. A lei do sossego se aplica neste motivo ou apena com barulho?