Ist das Vernachlässigung ?

Ja, das ist Vernachlässigung.

Ich würde tatsächlich das Jugendamt informieren und anbieten das Kind in den nächsten Wochen oder in unregelmäßigen Abständen einfach mal mit in Empfang zu nehmen. In die Wohnung des KVs darf man ja rein.

Außerdem würde ich schleunigst einen (neuen) Antrag auf geteiltes Sorgerecht stellen. Nach der aktuellen Rechtsprechung sollte er dies erhalten, auch wenn die KM die Kommunikation verweigert.
Dann würde ich sukzessiv bei Lehrern, Betreuern und Ärzten des Kindes vorstellig werden und mir deren Eindruck mal anhören.