Le palais actuel a été édifié vers 1645 par le 5e dalaï-lama. Véritable ville avec deux tours rondes et treize étages hauts de 178 m, il est typique de l'architecture transhimalayenne légèrement trapézoïdale, aux fenêtres rectangulaires et aux toits plats. Il abrite de nombreux trésors.