Besucherkind der Nachbarn ...

Selbstverständlich hast du Recht, die Eltern des Kindes darauf hinzuweisen, das du das so nicht willst und zudem Dinge kaputt gemacht wurden. Das es bei Ihnen anders ist, spielt nur in so fern eine Rolle, als das man das Grundsätzliche Verhalten nachvollziehen kann. Aber als Besucher passt man sich doch eher an, als auf seine "Rechte" zu bestehen.
Ich würde - da die Eltern uneinsichtig scheinen - das Kind direkt ansprechen. Mit 5 Ist es alt genug, das zu verstehen. Gehört ja zum frei sein auch dazu - Entscheidungen zu treffen und damit auch mal auf Gegenwehr zu stoßen ;-)
Und dann würde ich die Nachbarn ansprechen, ihnen die Situation schildern und darum bitten, mit den Eltern (ist ja ihr Besuch) nochmal zu sprechen. Du hättest das getan, bist aber auf eher taube Ohren gestoßen.