パートを辞めたいのですが近所なので今後の付き合いが怖くて辞められません


自宅から50m先に建設会社があり、家族経営(身内10人程)の中、唯一私だけ他人で雇用されました。5年目になります
今年30歳になりダラダラと続けていますが家族経営特有の身内贔屓が精神的にも体力的にも辛く辞めたいと思っています
ただ、自宅近くのためゴミ出しで顔を合わせる、その辺を歩いていても近所のスーパーでも、自治体でも関わるので恨みを買いたくありません
アンタ達なんて興味ないわ！と割り切れたらいいのですがどうも気が弱くて出来ません
私の家族や実家情報などは把握されているため下手に嘘がつけません
田舎特有の悩みだと思いますが円満に辞められる理由はありますでしょうか

・子供の世話(小梨夫婦)
・親の介護(既に鬼籍、又は飛行機の距離)
・転職のフリ(近所なので在宅丸分かり)
・夫が家にいてほしい等と言う(人形なの？言いなりなの？辞める理由にならない！等、荒ぶると思われる)