Давайте попробуем разобраться. Давайте переведем данный вопрос.
Won't you come? Aren't you coming?
Если говорящий соглашается с идеей вопроса, то он должен дать отрицательный ответ.
No, I won't. No, I am not. - Нет, не приду.
А если говорящий не соглашается с идеей вопроса, как в Вашем случае, то он должен дать положительный ответ.
Yes, I will. Yes, I am. - Да нет же, приду.