不愿意不答应别人的事，可以用以下成语来表达：

却之不恭：

指对别人的邀请、赠与等，如果拒绝接受，就显得不恭敬。

盛情难却：

形容别人的热情难以拒绝。

义不容辞：

指道义上不允许推辞。

受之有愧：

指接受别人的好意或赠予时感到惭愧。

这些成语都表达了在不愿意的情况下难以拒绝别人的好意或请求，希望以上信息对你有所帮助。