和其他日本军部高官多出身明治前武士阶层不同，他的父亲只是新野的穷酸教书匠。因于军校成绩优秀，又在日俄战争中冒死立功展露头脚，才被膝下无子的伊藤家藩主收为养子。
25岁那年，伊藤迎来了人生第二个贵人。细川公爵看中他与大和民族不同的，有如混血儿般的深邃轮廓，将长女下嫁。靠着华族细川家在贵族院的人脉，伊藤进入了刚组建的航空参谋本部，并步步高升，在四十出头的年纪就做到了中将军令部长。
这几年他长驻上海，专责对华空军作战计划。或许是妻子太过于善妒且尊贵，又或许是觉得不能白白浪费了自己的好皮囊，伊藤这些年开始热衷于从外面的女人身上找寻自己作为男人的尊严。
他在东京碍于岳丈势力自是十分谨慎，尽力扮演着一个模范丈夫和父亲的形象。