可以免除扶養義務嗎?

近日有網友私訊,表示他的父親在其幼小時沾染賭博惡習,敗光家產後隨即離家出走,對其母女不聞不問,在他母親身兼數職後,終於扶養他們成年。但是三十年過去,他的父親因貧病交加,想起還有女兒,返家要求他扶養,實在無法接受,可以拒絕給付扶養費嗎?