我该如何控制品质?

情况介绍:
工厂只有我司一个客户
我们是贸易公司,老板是工厂的股东之一
我是驻厂验货员,挂牌品质主管(我司共有9人驻厂:有顾问,翻译,有经理,跟单员及QC等人)
工厂管理很差，一片混乱，质量没有有效的控制措施。有些产品员工做出来是好的就是好的，是坏的就是坏的，没经任何检验就进到仓库打包入箱，等到我们抽查不合格他们再返工。连最起码的要求（装柜前2天齐货，装柜前一天包装完毕，并将同一张订单的货物堆放在一起等柜装）也做不到。经常是边生产边包装边装柜，丢三落四，质量马马虎虎。办公室就一个懂事长、两个厂长、一个跟单员、两个财务，未设品质部、生产部、技术部、人事部等。一个厂长是懂事长的舅舅,只管拉胶；另一个厂长是懂事长的叔叔,只管编织。其实工厂编织车间他跟本就没管,一心扑在自家搞的那个加工厂上；跟单员只负责把我们下的订单变成生产指令单下发给各车间.生产进及产品质量无人跟催.各车间、各部门各自为阵,配合很差.出了问题懂事长也不怎么理会（工厂的车间管理人员都说他们的懂事长不懂事，扶不起的阿斗）。通常货柜来了装柜时才发现有些货根本就没有生产.或我司QC抽查不合格无时间返工.导致减货甚至推柜，经常出现装错、装漏等现象，多次引起客户不满。我多次向工厂提出改善建议，但工厂懂事长就是不理不睬。我们老板也为此经常发火，要工厂加强管理，似乎也没什么效果。
我们老板对工厂的管理很不放心，又要求我们不要干预工厂的管理，只是验货。于是就逐步增加人手把关，有一部份货根本就是我们的QC全检。我们老板越急，工厂就越是不理。工厂对我们依赖很强，似乎要我们帮他们做完所有工作，他们在一旁等着收钱就行。
我总认为这样下去不是办法，得从根本上去解问题，要工厂加强生产过程的质量控制。
请各位谈谈我这个挂牌品质主管该如何着手去搞好工厂的品质控制呢？