出張が多くてちょっとしんどくなってきた。

会計年度任用職員です。
私の課は会計年度任用職員も出張があります。面接時に、出張がけっこうありますが大丈夫か？と聞かれ、その時ははいと答えるしかなく、まさか採用になるとは思わなかったし、採用されたら出張も楽しいかもなぁ〜程度に考えていました。
しかし、蓋を開けてみると、出張のシーズン以外は狂うほど暇で、辞めたいと何度も思い、出張シーズンになると毎週のように泊まりがけで出張で、多忙というか、気持ち的に疲れてきました。これがずっと続くと思うと余計に。しかも閑散期は死ぬほど暇。
結婚しているのですが子供はおらず、予定もまだありません。子については今後予定するかもわかりませんが、私は旦那がとても好きで、家も大好きなので出張で旦那を置いていくのも辛く、その間旦那がコンビニ飯で済ますのも心配というか、申し訳なく感じてしまいます。
これでも給与はパートなので10万円程度。旅費を建て替えるときは貯金をいちいち崩さなくてはならず大変です。
今年度で辞めたいな〜なんて思ってしまいますが、人間関係はまあまあ良好です。更新すればまた死ぬ程暇なシーズンもやってきます。始めに確認されたにも関わらず、やっぱりしんどいので辞めますみたいなのは甘えなのはわかっています。
今年で辞めても所詮会計年度。周りはあまり気にしないものでしょうか。