Karel Pazderský se narodil 29. dubna 1894 v Krchlebech jako předposlední z jedenácti dětí. Po absolvování učitelského ústavu v Hradci Králové v roce 1913 působil v různých obcích na Čáslavsku a okolí, mimo jiné v Třeboníně, Horušicích, Chotusicích, Zboží či v Míčově.
Jeho životním koníčkem bylo malování. Na jeho akvarelech a olejomalbách jsou zachycena zákoutí Čáslavi i okolních obcí, věnoval se i krajinomalbě. Je reprezentován ve stálé expozici galerie Městského muzea a knihovny Čáslav.
Za okupace r. 1942 byl pro neárijský původ manželky, se kterou se odmítl rozvést, propuštěn ze školství. Dne 16. ledna 1943 byl zatčen gestapem a převezen nejprve do Kolína, poté do Terezína a nakonec do koncentračního tábora Sachsenhausen. Zemřel na přelomu dubna a května roku 1945 po evakuaci (pochodu smrti) v koncentračním táboře Mauthausen.
Vnučkou Karla Pazderského je známá výtvarnice Kamila Ženatá.