هاجم الدكتور أحمد حسن البرعي، اتحاد عمال مصر، حيث كان يرى أن الاتحاد هو السبب في إبعاده عن الوزارة، حسبما ذكره القائم بأعمال رئيس اتحاد عمال مصر إسماعيل فهمي، في حديثه مع برنامج "الحياة اليوم" على تلفزيون الحياة، مؤكدًا على أن العرف منذ قيام مجلس الثورة في عهد الرئيس الراحل جمال عبد الناصر، جرى على أن يكون وزير القوى العاملة من مجلس إدارة اتحاد عمال مصر، وأضاف قائلاً: "وزير القوى العاملة الحالي متحيز ضد اتحاد عمال مصر". بينما نفى أمين صندوق اتحاد عمال مصر، سيد قاسم، أن تكون الاشتراكات التي يدفعها العمال للإتحاد إجبارية، مؤكدًا على أنها اختيارية بنسبة 100%.