現在日本にお住いとのことですが、日本にまだ1-2年いらっしゃるようなら、日本でフランス語の学校に通って中級くらいまで進んでおけば、後は現地で適応して行くだけだと思います。フランス人のご主人の協力を得て、なるべくフランス語で会話をするようにして置かないと大変かもしれないですね。日本に居ても、フランスのテレビのニュースを見たり、雑誌などを読んで理解できるようにする必要があると思います。現地で時間がある友人を作ることも有益な事です。英語で会話をするのを辞めないと、中々フランス語は上達しませんよ。
リモージュなど田舎だと、仕事探しもきっと大変でしょう。人種差別などもあるかもしれませんが、強い気持ちを持って生活してください。フランス人は良い意味でも悪い意味でも、フランス人です。割り切ってポジティブに暮らして行けるように祈ってます。頑張って下さい。