单位只给你缴纳意外保险，不会影响你领取失业金。下面我来详细解释一下这个问题：

1. 失业金的领取条件：失业金的领取主要依赖于你是否满足失业保险的缴纳条件，以及是否处于非自愿失业状态等。具体来说，通常需要你在失业前已经缴纳了一定时间的失业保险，并且不是因为个人原因（如主动辞职）而失业。

2. 意外保险与失业保险的关系：意外保险和失业保险是两种完全不同的保险类型。意外保险主要是为了保障你在发生意外伤害时能够获得一定的经济赔偿，而失业保险则是为了在你失业时提供一定的经济保障。两者在缴纳和领取上并没有直接的关联。

3. 缴纳意外保险对失业金的影响：由于意外保险和失业保险是独立的，所以单位只给你缴纳意外保险，并不会影响你失业保险的缴纳和失业金的领取。只要你满足失业保险的缴纳条件，并且符合失业金的领取要求，你就可以正常领取失业金。

综上所述，单位只给你缴纳意外保险，并不会影响你领取失业金。如果你还有其他关于失业金领取或保险缴纳的问题，可以直接向我咨询。