Vermieter zahlt Nebenkostengutschrift nicht aus

Hallo,
ich habe am 31.5.03 meine Wohnung ordnungsgemäss übergeben, habe dafür ein Übergabeprotokoll und erhielt meine Kaution 8 Wochen später vollständig zurückerstattet. Nach weiteren 8 Wochen kam eine Nebenkostenabrechnung, die eine Gutschrift von 246,- Euro aufwies. Seit September versuche ich nun, diese ausgezahlt zu bekommen. Nun erreichte mich ein Brief des Vermieters, dass die NK nicht ausgezahlt würden, da mein Mieterkonto eine Differenz aufwies (im Jahr 2002), die mit den Nebenkosten verrechnet wurde - nun möchte der Vermieter noch 40,- Euro von mir. Die Differenz resultiert aus einer Mietminderung wegen Schimmel - ich habe ab Nov. 2001 weniger Miete gezahlt und der Vermieter hat die Minderung erst ab Jan. 2002 anerkannt. Aber ist es dafür nicht schon ein wenig zu spät? Hat er das Recht, jetzt nach der Übergabe (bei der nie die Rede war von Mietrückständen) die Nebenkostengutschrift einzubehalten??
Danke
Bettina