结论：不想继续担任公司法人，不能单方面直接处理，需通过法定程序进行变更。以下从不同角度为你详细分析：

一、法人变更的法定程序

根据《中华人民共和国公司法》及相关规定，公司法人的变更需遵循一定的法定程序，这通常包括：

1. 股东会或董事会决议：首先，需要召开股东会或董事会，就法人变更事项形成决议。这是变更法人的前提和基础，确保变更行为得到公司内部机构的认可。
2. 修改公司章程：公司章程是公司的基本法律文件，其中应包含关于公司法人的规定。因此，在法人变更后，需要及时修改公司章程，以反映新的法人信息。
3. 办理工商变更登记：完成内部决议和章程修改后，需向工商行政管理部门提交相关材料，包括变更申请书、股东会或董事会决议、新法人的身份证明等，以办理工商变更登记手续。只有完成这一步骤，法人变更才具有法律效力。

二、单方面处理的法律后果

如果你试图单方面处理法人变更事宜，不遵循上述法定程序，可能会面临以下法律后果：

1. 变更无效：由于未按照法定程序进行变更，工商行政管理部门可能不会认可你的变更行为，导致变更无效。
2. 法律责任：作为原法人，你可能需要承担因未依法履行变更手续而产生的法律责任，包括但不限于行政处罚、民事赔偿等。
3. 影响公司运营：法人变更未完成可能导致公司在对外签订合同、办理银行业务等方面遇到障碍，影响公司的正常运营。

三、建议与措施

鉴于上述情况，我建议你采取以下措施：

1. 与公司内部沟通：首先，与公司股东、董事等内部成员进行沟通，说明你不想继续担任法人的原因，并协商确定新的法人人选。
2. 遵循法定程序：按照上述法定程序，召开股东会或董事会形成决议，修改公司章程，并向工商行政管理部门提交变更申请。
3. 寻求专业帮助：在变更过程中，如果遇到任何法律问题或困难，可以寻求专业律师的帮助，以确保变更行为的合法性和有效性。

总结与启示：法人变更是一个涉及公司内部治理和外部法律关系的复杂过程，不能单方面直接处理。作为原法人，你有责任和义务确保变更行为的合法性和有效性，以维护公司和自身的合法权益。如果你在此过程中遇到任何问题或需要进一步的法律帮助，请随时向我咨询。