Seine Befürchtungen erwiesen sich durchaus als begründet. Als Regisseur am Münchner Residenztheater verantwortete er zwar zahlreiche herausragende Inszenierungen, die deutsche Sprache war dabei aber eine echte Barriere für ihn. Er schreibt dazu in seiner Autobiographie: "Die ersten Jahre wurden schwierig. Ich fühlte mich wie ein Invalide, den man seiner Arme und Beine beraubt hat und sah ein, dass das rechte Wort zum sekundenschnell vorüberfliegenden rechten Augenblick mein bestes Instrument bei der Schauspielerführung gewesen war".

Zusätzlich zu dieser Sprachbarriere taten sich in München auch schnell zwischenmenschliche Barrieren auf und Bergman gelang es nach eigener Einschätzung, sich trotz überwältigender Vorschusslorbeeren in seiner Münchner Zeit mit fast allen zu überwerfen, die in der damaligen Kulturszene Rang und Namen hatten. Er selbst erklärt diese Ablehnung in seiner Autobiographie damit, dass seine ersten Inszenierungen tatsächlich schlecht waren und dass es dann, als er besser wurde, bereits zu spät war: "Als ich später tüchtiger und manchmal richtig gut war, war das Unglück schon geschehen. Man hatte ganz allgemein eine Wut auf diesen unausstehlichen Skandinavier, der von sich glaubte, er sei wer."
Lobende Worte findet Bergman dagegen für das großartige Münchner Theaterpublikum, dass sich auch von negativen Kritiken in der Presse nicht beirren ließ und sich stets eine eigene Meinung über die Qualität eines Stücks bildete. Ebenfalls unvergessen blieb ihm die Begegnung mit Franz Josef Strauß, der ihn "zärtlich an die bärenstarke Brust drückte" und die Fotos dieser Begegnung dann so lange im laufenden Wahlkampf einsetzte, bis Bergman dagegen protestierte.