结论前置：过账收取税点后又退回去的行为是否犯法，需根据具体情况来判断，不能一概而论。以下从不同角度进行分析：

1. 若该行为构成虚开发票或逃税等违法行为的一部分：

   • 法律背景：根据《中华人民共和国税收征收管理法》及相关税法规定，虚开发票、逃税等行为是违法的，会受到相应的法律制裁。如果过账收取税点是为了掩盖真实的交易情况，或者通过这种方式来逃避税收，那么即使后续将税点退回，该行为仍然可能构成违法。
   • 法律后果：一旦被认定为虚开发票或逃税等违法行为，可能会面临罚款、滞纳金、甚至刑事处罚等严重后果。

2. 若该行为仅涉及一般的资金往来，未涉及税收违法行为：

   • 法律分析：如果过账收取税点只是双方之间的一种资金往来方式，且该行为并未用于掩盖真实的交易情况或逃避税收，同时后续也将税点退回，那么该行为可能并不构成违法。但需要注意的是，即使不构成违法，这种行为也可能违反相关的财务或税务规定，如资金往来需符合财务规范、税务申报需真实准确等。
   • 建议：尽管可能不构成违法，但为了避免不必要的麻烦和风险，建议双方在进行资金往来时，应遵守相关的财务和税务规定，确保交易的合法性和合规性。

3. 特殊情况下的考虑：

   • 如果收取税点后因某种原因（如合同变更、交易取消等）需要退回：在这种情况下，如果退回税点的行为是基于合法、合理的理由，并且符合相关的财务和税务规定，那么该行为通常不会被视为违法。但同样需要注意，退回税点的方式和程序应合法合规，避免出现其他问题。

进一步思考与建议：

• 合规性审查：在进行任何涉及税收和资金往来的行为时，建议先进行合规性审查，确保行为符合相关的法律法规和财务税务规定。
• 咨询专业人士：如果对于某项行为是否违法存在疑问，建议咨询专业的税务律师或会计师，以获取准确的法律意见和税务建议。
• 保留证据：在进行任何资金往来时，建议保留好相关的证据和文件，以便在需要时能够证明交易的合法性和合规性。

总结：过账收取税点后又退回去的行为是否犯法，需根据具体情况来判断。如果涉及虚开发票或逃税等违法行为，则可能面临严重的法律后果；如果仅涉及一般的资金往来且未涉及税收违法行为，则可能不构成违法但需注意合规性；在特殊情况下，退回税点的行为需基于合法、合理的理由并符合相关规定。如有任何疑问或需要进一步的法律建议，请直接向我咨询。