Háček je však v tom, že město nemá k dispozici žádnou vhodnou budovu pro pražskou konzervatoř, která v Pálffyovském paláci sídlí.
Do zrekonstruovaných, bohatě zdobených interiérů barokního paláce by se měl vrátit původní mobiliář, a palác by tak mohl tvořit důstojné entrée k pěti historickým zahradám pod Pražským hradem. "Již v minulosti byl totiž interiér koncipován tak, aby se zahradami komunikoval," podotkl Josef Štulc, ředitel Státního ústavu památkové péče, který zahrady spravuje.
Ministerstvo kultury je připraveno vložit do restaurování paláce i zahrady nemalé částky. Podle Štulce se současný hrubý odhad potřebných investic pohybuje kolem 250 až 300 milionů korun.
Lákavý projekt však ohrožuje výrazná slabina: od roku 1992 je budova obsazena pražskou konzervatoří. Ta se sem přestěhovala z Rudolfina, které musela uvolnit výstavním sálům. Teď však pro školu město ani stát nemají vyhovující náhradní prostory.
Vedení školy by přitom alternativní prostory přivítalo. "Pořád se domáhám, aby nám ministerstvo nabídlo nějaké prostory, které se uvolnily při optimalizaci a slučování škol - avšak marně," posteskl si ředitel konzervatoře Věroslav Neumann. Pálffyovský palác totiž škole prostorově nestačí a podle něho je navíc jako památkově chráněný objekt černou dírou na peníze.
Magistrátní odboru správy majetku trvá na tom, aby se stát o konzervatoř postaral. Pokud se tak nestane, vyměnilo by s ministerstvem pouze zahrady. Podle mluvčí ministerstva kultury Dity Fuchsové však stát o zahradu bez paláce nestojí.