Bardenfleth, Kammerherre