El verbo to refuse tiene varios sinonimos en español algunos de los cuales son: molestar, rechazar, privarse, etc.
En este caso puedes hacer uso del verbo -molestar.
Me molesta levantarme temprano los fines de semana.
Me molesta levantarme por la mañana.
No me gusta levantarme temprano los fines de semana.
No me gusta levantarme de la cama.