富豪之前把张父当做朋友，且知道张父有些本事，所以求他帮忙聚财，却没想到张父不帮他聚财，还借此来反算计他，害他失去了打拼了大半辈子的财产，所以愤而想杀人的时候，杀的就是张父。
张父自信他的鲁班术能让他不轻易被人害死，没想到因为他自己对富豪下的算计，在富豪想杀他的时候，一样成功的让他惨死于其刀下。
自此张家因为张父去世，富贵不在，张明时和张明仁两兄弟在张明仁十岁的时候，成为无父无母的孤儿，被其伯父一家收养。
伯父自己有一个儿子一个女儿，分别比张明仁大两岁和一岁，却都在张明仁十一岁那年，被其用偷学的《鲁班书》某害人之术，先后不差两个月害死，原因是这两个堂兄堂姐在家中，其母亲会偷偷给他们做一些好吃的，张明仁和张明时这对兄弟嫉妒，所以对他们下了手，觉得他们兄妹死了，家里的好东西就不会落到他们头上，而是如张父没死前，全捧到他们兄弟面前来。
然而张明仁用《鲁班书》之术害死自己的堂兄堂姐，完全没有想到对他们兄弟很不错的伯父，因为子女双双出意外早死而大受打击，在外工作恍惚，而出意外工伤而死。
其伯母虽然没有怀疑他们两兄弟害死自己的孩子，却也觉得他