App Store - US版で使えたクレジットカードが日本版で使えない

＞日本の設定に戻して使ったりしていました

よくできましたね。

普通はAppleアカウントの国を変更すると、元に戻すのはかなり時間（半年とか1年とか）が経ってからでないとできないと聞いてます。

頻繁にAppleアカウント国を変える必要があるなら、それぞれの国で使えるアカウントを別々に作成する方が便利と思いますけど。その場合なら、メディアと購入のアカウントを変更するだけで済みます。これなら別のアカウントで切り替えるだけですから、頻繁に交換もできます。

別々のアカウントを作成する場合でも、支払い用のカードは別にする方がトラブルは起きないと思います。以前だと、その国の金融機関が発行したカードという制限がついてました。今はその制限はないようですが、昔の制限に準じて設定してれば問題は起きないと思います。

支払いに関するトラブルはここでははっきりしたことは分かりませんので、直接それぞれの国のアップルサポートに聞いてください。