Por lo que comentas parece ser que el jardín está en un patio de luces, a no ser que te ponga otra cosa en escritura o estatutos estos suelen ser comunes pero con derecho de paso de uno de los vecinos, o sea, tal y como dice tu administrador común de uso privativo.
El hecho de ser común hace que se limite bastante tus posibilidades de uso.
Saludos