取保候审担保人不能随意撤销。在取保候审期间，担保人需履行相应的义务，如监督被取保候审人遵守相关规定。若担保人违反法律规定或无法履行担保义务，如与被取保候审人串通等，司法机关有权责令其改正或撤销其担保资格。但撤销担保需符合法定条件和程序，并非随意为之。

具体来说，如果被取保候审人违反了以下规定，公安机关或检察院可以撤销取保候审，并可能涉及担保人的责任：

1. 未经执行机关批准不得离开所居住的市、县；
2. 住址、工作单位和联系方式发生变动时，未在24小时内向执行机关报告；
3. 传讯时未及时到案；
4. 干扰证人作证；
5. 毁灭、伪造证据或者串供。

若担保人认为自身无法继续履行担保责任，应及时向司法机关说明情况，由司法机关根据具体情况决定是否撤销担保。总之，取保候审担保人的撤销需依据法律规定和司法机关的决定来进行。

如果你在此方面有任何具体的法律问题或需要进一步的帮助，请直接向我咨询。