市役所で短期賃金職員です

2カ月短期で残り4日間の契約です。
課の職員が仕事で別棟に移ります。
仕事をくれる職員も同様です。
私と常勤の賃金職員のみ現在のデスクに残り、基本別棟ですが職員の中でも別棟で出来ない仕事のみ現在のデスクに来るらしいです。
残り4日間ですが本当にする事が無さそうなので、話の中で辞めても良い旨を伝えました。
担当職員には契約はそのまま無給で休むことを提案されました。私は失業手当の受給を一時停止しているため契約終了日を前に変更は出来ないかと思い、確認してもらうと難しいとの事でした。
仕事がなく、辞めてもいいよと言うのなら、使用者の責に帰すべき事由には当たらないのでしょうか？
無給か、本当に何もする事がないのに出勤すべきでしょうか？
現在、人事課で良い方法を考えてくれているらしいのですが、こちらから希望など言える事はありますか？