居民委员会、村民委员会及所在单位的责任

根据《婚姻法》第四十四条的规定，对于遭受遗弃的家庭成员，受害人有权提出请求。居民委员会、村民委员会以及所在单位有责任进行劝阻和调解。如果受害人提出请求，人民法院应当根据相关法律作出支付抚养费、扶弃费、赡养费的判决。

重婚、家庭暴力、虐待或遗弃家庭成员的刑事责任

根据《婚姻法》第四十五条的规定，对于重婚、实施家庭暴力、虐待或遗弃家庭成员构成犯罪的行为，应当依法追究刑事责任。受害人可以根据刑事诉讼法的相关规定，向人民法院自诉。公安机关应当依法展开调查，人民检察院应当依法提起公诉。

拒绝扶养行为的刑事处罚

根据《中华人民共和国刑法》第二百六十一条的规定，对于有扶养义务但拒绝扶养年老、年幼、患病或其他没有独立生活能力的人的行为，如果情节恶劣，将会受到五年以下有期徒刑、拘役或管制的处罚。

情节恶劣的定义

在此处，情节恶劣指的是遗弃行为的实施者，导致被害人无房屋居住而流落街头、无固定生活来源，甚至被迫乞讨。这种遗弃行为的动机卑鄙，手段极其恶劣，导致被遗弃人病痛、残疾、精神失常甚至自杀等严重后果。

寻求司法机关的帮助

面对遗弃行为，被害人应当勇敢地运用法律武器。如果居民委员会、村民委员会及所在单位的劝阻和调解无效，应当寻求司法机关的帮助，依法对遗弃人予以刑事处罚。