Das Problem ist...

dass du dich selber initiativ in der "Arbeitsplatz-Hierarchie" nach unten befördert hast und jetzt natürlich alle der Meinung sind, da du ja sogar freiwillig in dieses Büro gegangen bist, scheint es dir ja nicht viel auszumachen.
Ich würde mich von der Genervtheit des Chefs nicht beeindrucken lassen und ihm gegenüber betonen, dass du dieses Angebot aus Kollegialität gemacht hast und es sehr schade fändest, wenn du merken musst, dass einem sowas so gedankt wird und dass zu einem Arbeitsverhältnis ein gewisses Vertrauen gehört und das mit einschließt, dass man sich an getroffene Absprachen hält. Hinter dem Rücken des Chefs mich irgendwo beschweren würde ich nur im äußersten Notfall, wenn alles Andere keine Wirkung gezeigt hat.