买手机时商家送的赠品出了质量问题如何处理？

小杨在一大商场购买了一部三星手机，成交时商家承诺赠送一电一充，小杨成交当时没有异议。但是手机买回家后使用时发现，赠送的电池根本没有电，按产品说明书充电后仍然没有电，根本不能使用。小杨这时仔细检查后才发现：赠送的电池和充电器不是三星的品牌，但是外包装盒上印制的三星手机极易使人认为这时三星厂家赠送的电池附件。购买之日后的第3天，小杨拿着不能用的电池、三包凭证和发票到销售商处要求退掉手机，但是商家以出问题的是赠品为由拒绝退货，并提出可以更换另一份赠品。

请教论坛的前辈，小杨碰到这种情况，应该如何处理？他是否可以要求退掉购买的手机？如果可以，依据是什么？