第一，在《红楼梦》中，林府可以算是书香门第，这与贾府还是有区别的。
贾府并不能称得上是书香门第，只是得到皇帝的器重，并非靠才学一步步加官进爵。四大家族中没有林府与他们的发家史也是有关的。
第二，林府子嗣单薄，这也并不符合世族大家的定义，但贾府却是人丁兴旺。
第三，贾琏的奶娘曾提过王府也，就是王熙凤的娘家曾经的富贵景象，东海少了白玉床，龙王来请江南王。由此可以看出，林父府然家底丰厚，而且并不输于贾府，但却，从来都是低调内敛，不露山不漏水，这大概也是原因之一。
第四，元春能够成为皇帝的宠妃，也让贾府有了靠山，可谓是风光一时，这是林家所达不到的。
第五，林家的掌门人林如海虽然身处要职，但并无亲子继承其官爵，而且林如海的身体并不是很好。在黛玉入贾府之前，林府就已经开始出现衰败的迹象，这也是其中的原因之一。
林家虽然过的也很殷实，但无论从实力还是家族的世袭爵位都是和贾史王薛不能比的。而且林家只是黛玉母亲所嫁的人家，黛玉也应该不是作者现实生活中真实存在的人物，所以她所代表的关系也并不是作者家庭势力中相互关联的家族势力。黛玉之父林公是干苏州盐政的，从官位来看是个肥差，但从品阶来看只是个地方小官，并算不上是达官贵人，所以离四大家族所承的财力和势力都还是有些距离的。不然林黛玉也不会进贾府时从西南角门进。
再有四大家族里的关系是相互依附的，他们祖先的背景都是为皇帝直接办差的亲信，这才有了日后的功勋和地位。而林家和这些关系都攀不上，能官到盐政，凭的都是林老爷自己的才学。论根基和家族官位都不似四大家族那般。所以林家并算不上四大家族。
