Sohn des Grafen Hartmann IV. von Dillingen und der Willibirgis von Truhendingen, Tochter von Graf Friedrich IV.
Da Adalbert IV. genau wie sein Bruder Ludwig vor dem Vater starb, fielen die Lehen an das Reich zurück.