根据刑法的规定,只有在遗弃行为或者虐待行为的情节达到极端恶劣的程度,才能构成犯罪。而衡量情节恶劣的标准是是否导致被害人遭受严重伤害或死亡等极其严重的后果。这样才能确保那些虐待、忽视子女或未尽到监护义务的人受到应有的惩罚。