Я працювала на декретному місці і пішла в декрет, а тепер хочу вийти

Я працювала на декретному місці основного працівника, потім сама пішла в декрет, а на моє місце взяли іншу працівницю. Основний працівник не виходячи з декрету пішла одразу в інший, а я хочу достроково вийти з декрету. Чи мають право мені відмовити. Директор сказав, що тільки за власним бажанням працівника, який прийшов після мене.