主人の職場の方との付き合いについて。

くだらない質問で失礼します。
最近、結婚したのですが、金銭的に色々厳しいこともあり
元々、結婚式とかお互い派手な事も苦手でもあったので
結婚式はしていません。
主人も、結婚式をするとなると職場の方などにご挨拶を頼んだり
色々お世話になることになるので、それもそれで面倒だし、
後々お礼なども大変だし、ということであまり気が進んでなかったし
私も遠い県外から嫁いできたので、こちらで結婚式をしても
知らない方ばかりでちょっと・・・という気もあったので
結婚式はいいよね、っていうことになりました。
それはいいのですが・・・
最近、主人の職場で私も呼んでお祝い会をしようという話が
出てるそうです。
主人は「また相談してみます。」と返事をしてきたようですが
私的には行きたくはありません。
主人の職場での付き合いもあるのでしょうが、まったく知らない方々の中に
いきなり入って、お祝いをしてもらうのも居心地が悪いし、してもらうだけでは
当然いかないので、またお返しなどもしないといけないと思います。
そのような事を考えると、ありがたいのですが行きたくはありません。
主人の職場は、付き合いがちょっと濃いというのか、同僚で泊まりで遊びに行ったり
飲み会や、家での食事会、休日に遊びに行ったり、と、色々と前からよく聞きます。
職場でも他の方（女性）が結婚された時に、ご主人を呼んでお祝いをしたことがあるらしく
うちも、という話になっているようです。
行きたくはありませんが、主人の立場を考えで行くべきでしょうか。
こうゆう場面で、みなさんはどう乗り切っていますか？
あまり角が立たず、断る方法があればよいのですが・・・
主人は人がよく、あまりはっきりと言えないタイプです。