Droit civil: Obliger d'adhérer louons actuellement comptent 120 p 2008-03-08

Bonjour,
Nous louons actuellement un local (les lieux en comptent 120), afin de pouvoir y jouer de la musique.
Un contrat a été édité et signé des 2 parties (nous, et le bailleur), et il n'est pas fait mention que nous devions adherer à une association.
Aprés un peu plus de 6 mois d'adhésion, il nous indique que nous devons OBLIGATOIREMENT adhérer à son association (10 Euros par personne), afin de pouvoir beneficier du local (240Euros par moi par local charge comprise).
La carte d'adhérent, nous permettrait de pouvoir traverser les lieux commun ou nous récupérons les cléfs, et que nous devons traverser afin de pour nous rendre à notre local. (d'autres choses sont permis également comme organiser des concerts...)
Nous ne voulons pas prendre la carte car nous n'envisageons pas d'organiser des concerts, et 10 Euros par personne pour pouvoir prendre les cléfs, et traverser les lieux, nous apparait comme abusif.
Nous avons tenter de discuter avec lui, mais pas moyen de trouver une solution.
Si nous refusons, il nous a indiquer qu'il ne nous fournira plus les clés des lieux, même si nous payons notre loyer, ce que nous avons toujours fais depuis le 1er jour.
merci de m'éclairer sur les procédures à suivre afin de pouvoir sortir de cette situation qui est assez génante (nous sommes environs 40 et nous n'avons pas fait le tour de tous les locaux!).
Cordialement
JP