渋沢成一郎は従兄にあたる。渋沢家は藍玉の製造販売と養蚕を兼営し米、麦、野菜の生産も手がける豪農だった。原料の買い入れと販売を担うため、一般的な農家と異なり、常に算盤をはじく商業的な才覚が求められた。市三郎も父と共に信州や上州まで藍を売り歩き、藍葉を仕入れる作業も行った。験がヨーロッパ時代の経済システムを吸収しやすい素地を作り出し、後の現実的な合理主義思想に繋がったといわれる。[尊攘派志士から、徳川慶喜の家臣・幕臣へ]一方で5歳の頃より父から読書を授けられ、7歳の時には従兄の尾高惇忠の許に通い、四書五経や『日本外史』を学ぶ。剣術は、大川平兵衛より神道無念流を学んだ。婚、名を栄一郎と改めるが、文久元年(1861年)に江戸に出て海保漁村の門下生となる。剣術修行の傍ら勤皇志士と交友を結ぶ。その影響から文久3年(1863年)に尊皇攘夷の思想に目覚め、高崎城を乗っ取って武器を奪い、横浜を焼き討ちにしたのち長州と連携して幕府を倒すという計画をたてる。惇忠の弟・尾高長七郎(従兄弟)の懸命な説得により中止する。推挙により一橋慶喜に仕えることになる。官中は一橋家領内を巡回し、農兵の募集に携わる。肩書を得て、フランスへと渡航する。各地で先進的な産業・軍備を実見すると共に、社会を見て感銘を受ける。ちなみにこの時に彼に語学を教えたのは、シーボルトの長男で通訳として同行していたアレクサンダーである。帰国後もその交友は続き、アレクサンダーは弟のハインリヒと共に後に明治政府に勤めた渋沢に対して日本赤十字社設立など度々協力をするようになる。年11月3日(12月16日)に横浜港に帰国した。[大蔵省出仕~実業家時代]帰国後は静岡に謹慎していた慶喜と面会し、静岡藩より出仕することを命ぜられるも、慶喜より「これからはお前の道を行きなさい」との言葉を拝受した。