少大臣尤其是一些浙江籍京官开始密切关注此事。本来一桩单纯的刑事案件，终于因为有朝中官员的介入，而引入了错综复杂的党争背景。
光绪元年（1875）四月二十四日，刑部给事中王书瑞（浙江长兴人）率先上疏弹劾浙江巡抚杨昌浚等人“复审重案，意存瞻徇”，指责浙江官员是有意拖延案情，目的就是要让杨乃武、小白菜二犯和相关证人不堪折磨，瘐死在大牢中，从而可以草率结案，维持原判，以利考成（指官吏的升迁降贬）。王书瑞还进一步分析了造成这一现象的深层原因，说是杨昌浚明显怀有私心，以致“明知事有冤抑，只以回护同官，碍难从实办理，不承审此案，现俱设法脱身。以致日久未能昭雪”，并指出如果继续拖延，只会给杨昌浚机会让他暗中布置杀杨乃武、小白菜等人灭口。
这一奏疏言辞非常尖锐，矛头直指浙江巡抚杨昌浚。而且王书瑞奏疏上后，京官应者云集，纷纷紧跟着上书弹劾。杨昌浚一时间成为众矢之的，不得不上书为自己辩护，说决非有意迁延案情，实在是因恰逢封篆，又遇上国恤，兼有本省科考；又指出杨乃武、小白菜虽然翻供，但药铺老板“钱宝生”供词始终如一；杨乃武家人还多次到药铺闹事，胁迫“钱宝生”翻供。
尽管如此，由于