Obec Kadolec je známá z písemných pramenů z roku 1364, kdy byla součástí osovského panství. Polovina obce tehdy náležela Jindřichovi z Ronova. Druhá polovina patřila i s rychtářstvím bratřím z Ronova. Od roku 1372 patřila celá obec Janovi st. z Meziříčí.
Kadolec pak zůstal u Osové, v roce 1552 přešel k Ořechovu a s ním v roce 1687 ke Křižanovu. V letech 1850 - 1867 osada obce Křižanov, v letech 1975 - 1990 pod MNV Křižanov, od roku 1990 opět samostatná obec.
Vývoj počtu obyvatel Kadolce:
| Rok | Obyvatel |
|---|---|
| 2024 | 161 |
| 2023 | 164 |
| 2022 | 174 |
| 2020 | 171 |
| 2015 | 166 |
| 2010 | 162 |
| 2001 | 165 |
| 1991 | 164 |
| 1980 | 205 |
| 1970 | 227 |
| 1961 | 220 |
| 1950 | 240 |
| 1930 | 273 |
| 1921 | 274 |
| 1910 | 300 |
| 1869 | 360 |
Zdroj: ČSÚ