Castelul Läckö este cel mai bine cunoscut sub numele de magnificul castel/conac al lui de la Gardie de pe malul lacului Vänern, dar este mult mai vechi. În 1298 Brynolf Algotsson, Episcop de Skara, a pus bazele unui castel fortificat aici. Probabil nu mai mult decât o redută care înconjoară câteva case simple, a fost totuși amplasată strategic în mijlocul eparhiei sale. După reforma din 1527, Läckö a încetat să mai fie Castelul episcopului, revenind în schimb la Coroană. Gustav Vasa a intrat în posesie. Pentru o vreme, Läckö a fost slab întreținut până când cumnatul său, Svante Sture, a intrat în posesie, a reparat și a îmbunătățit proprietatea. El a fost urmat de Hogenskild Bielke, căsătorit cu fiica lui Sture, Anna. A fost numit baron și i-a acordat lui Läckö titlul de baron în 1571. Conturile și scrisorile sale descriu toate sarcinile și inventarele de la castel. Tradiția spune că el a fost cel care a comandat pictura încă existentă în câteva camere. Cuplul era cunoscut și pentru că deținea una dintre cele mai mari biblioteci din acea perioadă. După diverse probleme, Hogenskild Bielke a fost condamnat la moarte și executat la Stockholm în 1605. Mareșalul Jacob Pontusson de la Gardie a primit proprietatea în 1615. Contele de la Gardie sa angajat într-o clădire extinsă, inclusiv la etajul al treilea al keep. Portalul către curtea principală a fost adăugat în această perioadă, la fel ca frescele care înfățișau oameni și plante șerpuitoare găsite în nișe, scări și camerele de la etajul al treilea.
Contele Magnus Gabriel de la Gardie avea doar 30 de ani când a preluat castelul și județul. În 1654 a inițiat proiecte de construcții imense la Läckö, inclusiv camere noi și locuințe pentru personalul din casă. El a adăugat, de asemenea, aripa de bucătărie, capela castelului și un al patrulea etaj pe keep. Chiar dacă Evul Mediu trece peste părți mari ale castelului, este Castelul baronului pe care îl vedem astăzi când vizităm Läckö.