Засноване 1844 року, назва досілівно перекладається як Сільке-замок. Замок справді існував з 15 століття неподалік, до наших днів не зберігся. Заснування міста пов'язане із будівництвом братами Християном та Міхаелем Дрюсенами Сількеборзької паперової фабрики. Нині пам'ятник Міхаелу Дрюсену височить навпроти міської ратуші.
Сьогодні виробництво паперу у місті не здійснюється, фабрику 2000 року закрито, а у перебудованих корпусах розмістилися готелі, концертні зали та кінотеатри. Частина колишньої промислової зони була віддана під житлову забудову.