Je me réponds à moi même, si ça peut éviter à d'autres d'avoir le problème!
J'ai pris 5mn, calmement hier pour regarder ce support de ceinture centrale.
Il n'a apparemment pas de bouton poussoir mais une sorte de fente dans le plastique, bouchée par du métal qui n'a pas l'air de vouloir bouger. Il se trouve qu'en prenant quelque chose de fin et dur, comme une autre boucle de ceinture par exemple, on arrive à rentrer dans cette fente, libérant ainsi la ceinture !
Une photo aurait été bienvenue mais j'ai fait ça hier soir, à la lampe de poche...