Dirk Jacob Willet (1820-1868) was medicus en een oudere broer van de Amsterdamse kunstverzamelaar Abraham Willet (1825-1888). Dirk groeide met zijn broer en twee zussen op in het doktershuis van zijn vader aan de Keizersgracht 522. In 1854 trad hij in het huwelijk met zijn buurmeisje Maria Bloemen (1827-1865) met wie hij vier kinderen kreeg. Evenals zijn broer was Dirk Jacob geïnteresseerd in kunst. Hij was lid van het Koninklijk Oudheidkundig Genootschap en in 1864 behoorde hij tot een groep verontruste kunstminnende Amsterdammers die met financiële ondersteuning acht schilderijen van het Chirurgijnsgilde voor het hoofdstedelijke kunstbezit terugkochten. Dirk had van jongsaf een zwakke gezondheid. Hij leed aan tuberculose, een ziekte waaraan hij in 1868 zou bezwijken, drie jaar na de onverwachte dood van zijn echtgenote. Het echtpaar Willet-Bloemen liet vier verweesde kinderen na, die liefdevol werden opgenomen in het gezin van Jeanette Luden-Bloemen, Maria’s kinderloze zuster.