赡养老人免税部分并不限于直系亲属。以下是对此问题的详细分析：
一. 赡养老人免税政策的适用范围
直系亲属：根据《中华人民共和国个人所得税法》的相关规定，赡养老人专项扣除适用于纳税人赡养年满60岁以上的父母。这里的“父母”即属于直系亲属范畴。
特定情况下的非直系亲属：除了直系亲属，赡养老人专项扣除还可以包括子女均已去世的年满60岁的祖父母、外祖父母。尽管这种情况通常发生在纳税人的子女已经去世或者无力赡养的前提下，但它仍然体现了政策对非直系亲属赡养老人情况的一定考虑。
二. 赡养老人免税政策的限制条件
年龄条件：被赡养人必须年满60周岁，这是享受赡养老人免税政策的基本年龄条件。
赡养义务：纳税人必须是老人的子女或具有法定赡养义务的其他亲属。如果祖父母或外祖父母的子女（即纳税人的父母或叔伯姑舅等）还在世且有赡养能力，纳税人通常不需要承担对他们的赡养义务，因此可能无法享受赡养老人的专项扣除。
三. 非直系亲属的赡养问题
配偶的父母：对于配偶的父母，即岳父母或公婆，纳税人并没有法定的赡养义务。因此，在个人所得税的专项附加扣除中，赡养配偶父母的支出是不包括在内的。
其他非直系亲属：除了上述特定情况外，其他非直系亲属的赡养支出也不属于个人所得税专项附加扣除的范围。
综上所述，赡养老人免税部分并不限于直系亲属，但确实受到一定条件的限制。在确定是否符合赡养老人免税政策时，需要综合考虑被赡养人的年龄、与纳税人的亲属关系以及纳税人的赡养义务等因素。
我的观点是，在理解和应用赡养老人免税政策时，应准确把握政策的具体规定和限制条件，以确保合规享受相关税收优惠。如有进一步需要，您可以继续咨询我。