董其昌拥有多房妻妾。按照传本《黑白传》的说法，在万历四十三年（1615年）秋天，六十岁出头的董其昌看中了诸生陆绍芳佃户的女儿绿英，他的二个儿子董祖常带了人强抢绿英给老子做小妾。陆绍芳对董氏父子强抢民女的做法非常愤慨，在四乡八舍逢人便讲，张言批评。随后便有人写出书来，题目叫《黑白传》。因为董其昌号思白，另一个主角人物是陆绍芳，源于陆本人面黑身长。故事的第一回标题是：“白公 董其昌像[1]子夜打陆家庄，黑秀才大闹龙门里。”不久，说书艺人钱二到处说唱这个故事。董其昌知道后大为羞恼，以为这是一位叫范昶的人捣的鬼。范昶并不承认，还跑到城隍庙里向神灵起誓，为自己辩白。不久范昶又恰巧暴病而死，范母认为这是董家所逼造成的，于是带着儿媳龚氏、孙媳董氏等女仆穿着孝服到董家门上哭闹。谁知董家家丁对她们大打出手，又将她们推到隔壁坐化庵中，关起门来将几个妇女摁倒，剥掉裤子，肆意凌辱。范家儿子用一纸“剥褌捣阴”的讼状将董家告到官府。官府受理了诉状也非常重视，但因为董其昌位高权重，就以案件复杂为名，一时拖延不决。得知此事后，众乡邻集结群众火烧了董宅。这就是历史上著名的民抄董宦。