Kiltsi loss on püstitatud 15.-16. saj pärineva vasall-linnuse varemeile. 19. saj kuulus loss von Krusensternide suguvõsale. Adam Johann von Krusensterni juhtimisel teostus Vene esimene ümbermaailmareis (1803-1806), mille põhjal koostas ta just Kiltsis elades “Lõunamere atlase”.
Mõisa on võimalik rentida sünnipäeva- ja pulmapidude, koolituste ja seminaride korraldamiseks, alates 2023 suvest on mõis avatud ettetellimisel ainult gruppidele.