我這樣的情況...遺棄罪可以被構成嗎? - 生活

各位好,
小弟今年父逝, 母親 為洗腎之極重度殘障病人,
姐姐今年工作沒了,已找了3個月的工作 面試無數次,仍不得其門.
我是學美工的,找工作也是找了快1年.. 目前只能靠朋友願意給案子,
一個月 偶爾接接案子,可能才1~2個 ,5~6000千收入, 多少貼補家用.
弟弟退伍不到半年. 目前也是正在找工作中..
父親留下一筆遺產 ,及農地,農地租人 我們家目前就靠一個月2萬整的
租金過日子, 遺產 數目不大, 隨著生活 水電支出,也是不斷減少中.
最近,住在外地的奶奶 也腎臟病,也是洗腎病人.
從奶奶開始洗腎後, 我的姑姑們開始出現, 她們的意思很明顯是要我們
接下扶養奶奶的義務...
當然,扶養家中的長輩是天經地義,但是我們有能力的話,當然是毫不考慮!
奶奶的親生5名女兒跟1名兒子, 本來是2名;但我父親已過世.
我父親是長子,我等於是長孫. 因此他們決定要我來接下奶奶的撫養.
但事實上..我們家的狀況 ,已經很拮据了, 我母親也是洗腎病人,
照顧一個人重症者... 其實這樣的生活情況,我已經不知道有多少次...
經過鐵軌時,想把這個擔子放下....
現在我的親戚們, 姑姑們 說, 我不把奶奶接過來住,她們要告我遺棄...
法律真的是用來專殺無能力反搏的人嗎?
還是法官 就是希望我們一家四口 一起自殺,然後把我們家的地拿去拍賣,
給奶奶過生活, 這樣的法律才叫公平嗎?
Update:
感謝三位大大專業的法律常識及建議,
小弟稍為能放心,至少知道在 法 來看.. 我不會淪為他們口中的不孝子孫,
想另請教.
因為奶奶跟我們是住不同地區,叔叔及姑姑 有與奶奶住鄰近,
姑姑裡也有年收入 約70~100萬左右的(這是我母親說的,我不確定)
如果她們執意提告,証據就是 我之前都沒照顧過奶奶,都她們在照顧而已.
我也不過前年退伍而已,至今也沒固定工作.
這樣的情況,我是不是會如 NICHOLAS大說的, 成立這個罪.....