加里王府宮殿位于縣城南側的高臺地北緣，建筑群所在地屬下江鄉(xiāng)，海拔3880米。
宮殿現(xiàn)存建筑遺存根據(jù)其始建年代大致可分為三期：
早期建筑——舊宮“扎西群宗”
中期建筑——新宮“甘丹拉孜”（亦稱拉加里頗章）
晚期建筑——夏官
一、舊宮“扎西群宗”
該建筑位于新宮甘丹拉孜西側約180米處，位置稍低于新宮，占地范圍南北長100米，東西寬70米，總面積7000平方米。
宮殿由石砌圍墻環(huán)繞，現(xiàn)僅存東、南墻體及西墻殘段。西墻殘長16米，殘高5——8米；東墻基本完整，走向有轉折，其內墻尚存一段，內、外墻分別長40、70米；南墻與南宮門相連，其西端已頹毀。宮墻所用石塊較規(guī)整，石塊同以黃泥漿為粘合劑，外壁修抹整齊，最高處15米。
該建筑原在南、北兩面辟有門道，北門已完全坍頹不存，南門尚存遺跡。南門共有兩重，第一重設在宮墻外的東西向門廊，門朝西，寬６米，有石塊砌出的石階數(shù)級，由下而上通進門廊；第二重門道直接辟于南宮墻上部，門朝南，有高達十余米的階梯通達門道宮殿的北部第二重門道辟于正北方向，由正門和側門構成。正門沒有門廊，闊7．5米，進深2．6米，共2柱，柱高2米；門廊高3．2米，寬3．2米。正門有本質門檔三重，其上雕刻有蓮瓣、連珠紋等，門枋上有彩繪蓮花、牡丹等圖案。門柱上有雕刻及彩繪圖案，上承門檔四重，其上亦有彩繪蓮花等圖案。側門位于正門東側，亦面向北，為甬道式。門道高6、寬1．6、深12米，全為石砌建筑，僅在門枋上有兩朵木質斗枋以承門媚，門道頂部橫設細木條，其上鋪蓋泥石。
宮墻內建筑多已頹毀或利用其殘垣改建為民居，故其布局、形制已不可察。在甬道式側門之上尚存門樓一間，面積約10平方米，南北辟有采光小窗一扇。
二、新宮“甘丹拉孜”甘丹拉孜是拉加里王宮現(xiàn)存建筑的主體部分，位于整個建筑群的東北部，由王宮、倉庫、拉康、廣場、馬廄等一系列建筑單元構成，該建筑群北臨河谷，東側是一條人工壕塹，占地范圍南北長120米，東西寬130米，總面積近16萬平方米。
三、夏宮
夏宮位于新宮甘丹拉孜東北方向約1000米處的羅布林卡之中（現(xiàn)縣行政大院內），北臨江扎普久河，南依高崖，海拔3840米。
原建筑包括宮墻、浴池及宮殿等，現(xiàn)多已不存。夏宮原為拉加里王府避暑消夏游樂之處，現(xiàn)僅存一小型宮院。
該宮院位于今縣行政辦公大樓東北約50米處，為一四合院式宮殿。宮院坐北朝南，北面正房一排三問，通面闊18米，進深4米。東、西面各有廂房一間，中央為庭院。正、廂房前各沒有石階四級。正、廂房門窗皆設計成漢式格子欞窗及版門式樣。正房明、次間辟版門共14槽，門上垂檐及窗上窗媚均鏤刻彩繪有牡丹、蓮花、鳳凰、卷草等圖案，一派漢式風格。
拉加里王系，是西-史上一支獨立的地方割據(jù)勢力，其先祖為吐蕃王室后裔鄂松的嫡系。公元10世紀后，該王系在山南曲松一帶逐漸形成并發(fā)展起來，歷經(jīng)薩迦王朝（約1255——1353）和帕竹王朝（1354——1617）統(tǒng)治時期，仍保持著相對獨立的地方統(tǒng)治特權。直至1959年西藏進行民主改革之前，拉加里王系還統(tǒng)轄有拉加里、桑日、加查、隆子四個宗，方圓達三、四里的廣大地區(qū)。
拉加里王府宮殿的始建年代已難詳考，僅從現(xiàn)存建筑遺存的諸特點加之實地調查資料綜合分析，推測其三期建筑的大致年代如下：
早期建筑：約始建于公元13——14世紀左右。
中期建筑：主體部分始建于公元15——18世紀。
晚期建筑：約始建 于公元15世紀末，現(xiàn)存部分已為現(xiàn)代所改建。
上述建筑在近現(xiàn)代都曾經(jīng)過改建、修茸或移作它用的情況，所作年代推測均就其主要部分的始建時期而言。
王宮建筑是西藏古代建筑中的一個重要門類，能較為完整地保存至今者已十分罕見。拉加里王府宮殿建筑基本保持了原有的平面布局和建筑結構，在西藏古代王宮這樣一個獨特的門類中更是極為珍貴的。作為藏式王宮建筑，其中一些小木作，尤其是門枋之上斗拱的使用，無疑是融合了漢地古建筑的某些因素，因而也就具有了更為重要的研究價值。
拉加里王宮于1996年4月16日被列為自治區(qū)級重點文物保護單位，2001年6月25日被列為全國重點文物保護單位。