可以起诉代理人，但具体情形需依据代理过程中的行为性质及后果来判断。以下从不同角度为您详细分析：
一、从代理合同关系角度
违约行为：若代理人与您之间存在明确的代理合同，且代理人在履行合同过程中存在违约行为（如未按照合同约定履行代理义务、擅自变更代理事项等），您有权依据合同法的相关规定，向代理人提起诉讼，要求其承担违约责任。
合同解除与赔偿：在代理人严重违约的情况下，您还有权解除代理合同，并要求代理人赔偿因违约给您造成的损失。
二、从侵权责任角度
过错行为：若代理人在代理过程中存在过错行为（如因疏忽大意或故意行为导致您遭受损失），且该过错行为与您的损失之间存在因果关系，您有权依据侵权责任法的相关规定，向代理人提起侵权诉讼，要求其承担侵权责任。
赔偿范围：在侵权诉讼中，您可以要求代理人赔偿因侵权行为给您造成的直接损失和间接损失，包括但不限于财产损失、精神损害等。
三、从诉讼程序角度
起诉条件：无论您是基于合同关系还是侵权关系起诉代理人，都需要满足起诉的基本条件，即您与代理人之间存在明确的法律关系、代理人存在违法行为或过错行为、该行为给您造成了损失等。
证据收集：在起诉前，您需要收集充分的证据来证明代理人的违法行为或过错行为以及该行为给您造成的损失。这些证据可能包括代理合同、沟通记录、损失证明等。
诉讼流程：在满足起诉条件并收集到充分证据后，您可以向有管辖权的人民法院提起诉讼。法院将依法审理案件，并作出判决。
四、特殊情形下的起诉
代理人无权代理：若代理人未经您授权或超越授权范围进行代理行为，且该行为给您造成了损失，您有权向代理人提起诉讼，要求其承担无权代理的责任。
代理人与相对人恶意串通：若代理人与相对人恶意串通，损害您的利益，您有权向代理人和相对人提起共同诉讼，要求他们承担连带责任。
五、法律建议
及时咨询：在发现代理人存在违法行为或过错行为时，建议您及时咨询专业律师，了解您的权利和义务，以及可能的诉讼途径和后果。
保留证据：在代理过程中，建议您保留好与代理人的沟通记录、代理合同、损失证明等证据，以便在需要时进行维权。
理性维权：在维权过程中，建议您保持理性，通过合法途径解决问题，避免采取过激行为导致不必要的法律纠纷。
举例说明：假设您委托了一位律师作为您的代理人处理一起合同纠纷案件。在代理过程中，律师未经您同意擅自与对方达成了和解协议，且该协议内容对您不利。在这种情况下，您有权依据代理合同和侵权责任法的相关规定，向律师提起诉讼，要求其承担违约责任和侵权责任。
如有任何关于起诉代理人或其他法律问题的疑问，请直接向我咨询。