戦国時代、京極氏は交通の便がよく、軍事的にも都合の良かった伊吹山麓に館を建てており、その跡が伊吹神社境内に残されています。京極氏の屋敷があったとされる場所にある庭園跡には、池跡や巨石など見られる。（国指定史跡）