Johan giftet seg med Amalie Mathilde Eriksdatter Hilton. Amalie (datter av Erik Hansen Hilton og Anna Marthea Andersdatter Westgaard) ble født 22 Jan 1832, Thorshov Vestre (nordre), Gjerdrum, Akershus; ble døpt 19 Feb 1832, Gjerdrum Kirke, Gjerdrum, Akershus; og døde Ja, ukjent dato. [Gruppeskjema]

1. Anne Marie Olsen ble født 19 Aug 1863, Shulzehaugen, Gamle Aker, Oslo; ble døpt 22 Nov 1863, Gamle Aker Kirke, Oslo; og døde Ja, ukjent dato.
2. Julie Olsen ble født 1860, Christiania; og døde Ja, ukjent dato.