Die Sundhäuser Burg mit ihrem ritterlichen Stammgut kaufte 1577 der Gräflich - Honsteinsche Berghauptmann Asmus Helder zu Andreasberg. Als er nach Sundhausen übersiedelte, wurde er im Harz von Räubern überfallen und ausgeplündert, wobei ihm sein Sohn erschossen wurde. Er legte sein Amt in Andreasberg nieder und lebte in Sundhausen. Sein Geschlecht hat über einhundert Jahre in Sundhausen gewohnt und ist durch Heirat mit der Familie von Wagner verwandt geworden.
Ein Enkel dieses Asmus von Heldern mit Namen Friedrich Ludwig stirbt 1679. Von ihm heißt es: „Er hat ein feines, stilles Leben geführt und ist ein gelehrter, fürtrefflicher Mann gewesen.“ Sein Sohn Christian Ludwig von Heldern wurde 1674 geboren, und seine Tochter Johanna Sophia Heldern heiratete 1709 einen Wagner von Karlsburg.