此举引起一片哗然，业内外人士都纷纷指责神部是一个欺世盗名之徒，甚至连他的家人都受到非难。有一天，在学校念书的小女儿对他说："爸爸，有人笑话我说‘你爸爸是一个大骗子'!"
神部大笑起来，回答道：“让他们笑好了，等着瞧吧!我一定要成为日本最大的建筑业者。到时候，你就可以回敬他们了!"
神部率领公司，向目标奋力前进。三年后，间组公司真的脱颖而出，实力追上了排名第五位的竹中公司，成为名副其实的六大建筑公司之一。这一来，对神部的批评之声自然平息，取而代之的是一片惊叹声。
神部也是这样教育子女的：“心无大志者往往一生平庸。因为人是一种有惰性的动物，容易自我满足，喜欢为自己的懒惰和不负责任找理由。如果目标很低，任何一点小成就都足以让自己洋洋得意，进取心也松懈下来，结果躺在功劳簿上睡大觉。”