パワハラを周囲に訴えるか？先輩への対応のしかた

新しい上司（A）がパワハラ気味でした。私と先輩が特に困って、2人で上司の上司（B）に相談しました。B からの指導とアドバイスを受けて、Aと私の関係は改善しつつあります。人と人との関係はすぐには良くならないけど、これからもっと良くなると思える状況です。

一方で先輩は未だにAとうまくいっておらず、Bに対しても不信感を募らせているようで、人事や他の部署の部長にまで相談しています。その中で先輩は、一緒に訴える人数は多い方が良い、と認識したようで、私に一緒に相談しようと持ちかけてきました。

正直私はこれ以上話を大きくする必要はないと思うし、そこに労力をかけたくありません。しかしそれを先輩に伝えると、じゃあ今後パワハラが酷くなっても誰も助けないからそのつもりで、と謎の脅しをされました。これでは誰が敵で誰が味方かわかりません。個人的には、先輩はAからの提案も全て拒否して大騒ぎしているように見えます。もう少しAに歩み寄ってみればいいのにと思います。

先輩の誘いは改めて断るつもりですが、断る時の注意点や工夫はありませんか？
理想としては、先輩もAに歩み寄る気持ちになれるような断り方をしたいです。