Guarda definitiva para a mãe. Minha filha mora com o pai

Tenho uma filha de 3 anos. Quando me separei do pai dela, ela tinha 8 meses e como eu tinha que trabalhar e a deixava numa creche particular. Ela começou a ficar muito doente e eu não tinha condições de cuidar dela como era necessário, e minha mãe decidiu que ela ficaria melhor com o pai por uns tempos, até minha situação melhorar. Com o tempo ela foi ficando com o pai e hoje tem quase 3 anos, mas eu quero a guarda dela. Mudei para uma cidade proxima, estou casada e vejo minha filha todos os fins de semana, mas o pai dela tem me proibido de ve-la em alguns destes fins de semana. Quero entrar na justiça pra ter minha filha morando comigo, pois hoje sei que tenho melhores condições de cuidar dela e a avó e o pai dela criam la de forma q eu não acho certo. Gostaria de saber se é muito difícil conseguir a guarda dela agora.