Volgens de verteller van Kasteel Ammersoyen was het zo dat het arme volk de restjes klei (‘klootjes’) opraapte en terugbracht naar het kasteel en de aanvallers. De arme mensen zouden in ruil voor de klei, geld krijgen. Vandaar de naam ‘klootjesvolk’. Het volk was wel arm van geld, maar rijk aan ideeën.