In der ersten Hälfte des 11. Jahrhunderts erschienen zwei Brüder im Swiggerstal (das heutige Ermstal), Egino I. von Dettingen und Rudolf von Achalm, deren Herkunft urkundlich nicht belegt ist. Beide hatten Besitz im Schwäbischen, im Zürichgau und Thurgau.
Der ältere Bruder Egino, ein Unterstützer der salischen Kaiser, begann um 1040 die Burg Achalm zu erbauen, die nach seinem Tod von dem jüngeren Rudolf vollendet wurde.
Durch die Heirat Rudolfs mit Adelheid von Wülflingen, einer Tochter des Grafen Liutold von Mömpelgard und Schwester des Erzbischofs Hunfried von Ravenna, erweiterte sich der Achalmer Herrschaftsbereich um die Grafschaft Mömpelgard und um Besitz im Thurgau. Rudolf und Adelheid hatten zehn Kinder.
