后来,吕才又借到神泰、靖迈、明觉三法师的义疏,相互比较,觉得三家所说虽议论丰富,文理会通,但所持观点不同,自相矛盾。
由此认为三家既然同样禀承于玄奘,岂能有不同的说法呢?进而怀疑问题出在玄奘宣译有误,导致他人歧解,所谓“衅发箫墙,故容外侮窥则”。遂确信自己无误,也作起了注释。就三家所说觉得有道理的,并加论证,成立其说。
对于可怀疑之处,举出四十余条,加以驳斥。分为上、中、下三卷,名为《立破注解》。并画出义图,共相比较,名之《因明注解立破义图》,即所谓“方丈图”。图前作序文,宣称他无师自通,学无再请,闻一知十,其注解合理无纰紊。并公然挑战说:“法师等若能忘孤鬼之微陋,思句味之可尊,择善而从,不简真俗,此则如来之道,不坠于地,弘之者众,何常之有?必以心未忘于人我,义不察于是非,才亦扣其两端,犹疑质之三藏。”时在永徽六年(650年)五月。