Flere av hans verker er kjøpt inn av Nasjonalgalleriet og han hadde mange kjente kunstnere i sin omgangskrets, blant annet Edvard Munch og Axel Gallén, som begge malte portretter av ham. 

Dørnberger er for de lokale minst like godt kjent for sine eksentriske malerier. Han gikk alltid med en karakteristisk hamborgsk hatt, han hadde treben og bar to pistoler i beltet, som han kalte «Kitty» og «Kittys broder». Han var opptatt av å holde skyteferdighetene ved like så han siktet på kattehaler som gjorde at Son fikk en stor bestand av haleløse katter. En av datterens friere ble også beskutt, han ble siktet men ble frikjent av lagmansretten fordi han angivelig skjøt for å kastrere ham, ikke for å drepe. I huset finnes det kulehull i mange rom og på ytterveggene.

Mens han satt på toget en gang så stakk han en kniv gjennom buksebenet dypt inn i trebenet sitt. Både kvinner og barn i kupeen besvimte. 

Dørnberghuset er en spesiell bygning, hvor det eldste delen er fra ca 1680, og senere bygget på på 1700 og 1900. Huset er i tømmer og reisverk med originale vinduer av slynget glass.