quando um pai separado por direito de visita externa

Boa tarde, Sou mãe solteira, fiquei namorando o pai do meu filho á 5 anos...Nesse período, tive problemas com ele de agressividade verbal e física...a maioria do momento da minha gravidez, não esteve ao meu lado, em momentos no hospital também não...Ele nunca soube ser um pai...até mesmo no momento de uma discussão nossa, que eu queria estar com ele e me disse que não porque estava com conjutivite e o nosso filho poderia pegar, mas eu havia dito que isso não pega no ar e só com contato, ele se irritou e passou a mão no olho dele e do filho dele, consequencia, o nosso filho quando tinha 1 ano e meio pegou conjutivite pela imaturidade e estupidez do pai... Quero saber, mesmo com tudo isso, ele pode pegar o filho no período da manhã e levar de volta a tarde, ou tem que ver apenas em minha casa? O meu filho tem apenas 2 anos e meio... Aguardo resposta desesperadamente, porque ele está brigando comigo por causa disso e atá me ameaçou, dizendo que ele te coragem de fazer qualquer coisa comigo e não seria pelas próprias mãos. Obrigada.