Chełmsko Śląskie založili pravděpodobně v roce 1214 čeští osadníci, první písemná zmínka ale pochází teprve z roku 1289. V letech 1343–1810 patřilo Chełmsko cisterciákům a následně benediktinům z nedalekého Křešova. Bylo několikrát poničeno – nejdříve husity v roce 1426, později požáry v letech 1567 a 1629. V roce 1580 udělil rakouský císař Chełmsku městská práva, jež mu ale byla o čtyři desítky let později opět odebrána. Hlavní atrakcí je dnes řada domů nazvaných „Dvanáct apoštolů“, postavených v roce 1707 pro tkalce přicházející z Čech. Domy s podloubími jsou dvoupodlažní, zčásti dřevěné, zčásti zděné. Sedlové střechy jsou pokryty šindelem. V jednom z domů je dnes malé muzeum prezentující světničku tkalce s vystavenými starými stavy, modelem Dvanácti apoštolů a jinými exponáty, v dalším domku pak sídlí infocentrum. Domů je dnes ale pouze jedenáct, jeden z nich v minulosti shořel.
V roce 1763 pak vznikl další komplex částečně zděných a částečně dřevěných domů, tentokrát pro tkalce damašku z Bavorska s názvem „Sedm bratrů”. Po sedmnácti
letech je ale zachvátil požár, takže se do současnosti bohužel dochoval jen jeden z nich v dnešní ul. Kamiennogórska. Následná vzpoura tkalců v roce 1793 a požáry v letech 1829 a 1848 dalšímu rozvoji také příliš nepomohly, na lepší časy se začalo blýskat teprve s výstavbou železnice na konci 19. století. To už bylo město známé také jako populární turistické letovisko. Dnešní název města pochází z roku 1947.
