เขาเกิดในครอบครัวซามูไรที่รับใช้โชกุนโทกุงาวะโดยตรง เขาเริ่มเรียนภาษาดัตช์ในช่วงปี ค.ศ. 1850 และหลังจากที่ญี่ปุ่นยอมเปิดประเทศตามคำร้องของพลเรือเพร์รี่ในปี ค.ศ. 1854 เขาก็เข้าศึกษาเล่าเรียนที่ศูนย์กลางการฝึกทัพเรือในนางาซากิและเข้าเรียนต่อที่อำเภอสึคิจิในเอโดะ

เมื่อเขาอายุได้ 26 ปี ก็ถูกส่งตัวไปยังเนเธอร์แลนด์เพื่อศึกษาเกี่ยวกับเทคนิคตะวันตกในสงครามทางทะเลและคอยค้นคว้าเทคโนโลยีตะวันตก เขาอาศัยอยู่ในยุโรปตั้งแต่ปี ค.ศ. 1862 ถึง ค.ศ. 1867 และมีความชำนาญในภาษาดัตช์และภาษาอังกฤษ

เขาได้กลับไปญี่ปุ่นด้วยเรือไคโยมารุ ซึ่งเป็นเรือรบไอน้ำที่ทางโชกุนซื้อมาจากเนเธอร์แลนด์ ระหว่างที่เขาอยู่ในยุโรป เขาได้ตระหนักว่าโทรเลขจะเป็นวิธีการสื่อสารที่สำคัญในอนาคตและเริ่มวางแผนระบบเพื่อเชื่อมโยงเอโดะและโยโกฮามะเข้าด้วยกัน เมื่อเขาเดินทางกลับถึงญี่ปุ่น ก็ได้รับตำแหน่งเป็น ไคกุน ฟุกุโซไซ (Kaigun Fukusōsai, 海軍副総裁) ซึ่งเป็นตำแหน่งที่สูงเป็นอันดับ 2 ของกองทัพเรือโทกุงาวะ และก็ได้รับตำแหน่งขุนนางเป็น อิซุมิ โนะ คามิ (Izumi-no-kami, 和泉守) เมื่อเขาอายุได้ 31 ปี