结论前置：高利贷行为本身一般不直接构成犯罪，但如果在催收过程中采取到单位骚扰、威胁等非法手段，则可能触犯法律，构成违法行为甚至犯罪。以下是对此问题的详细分析：
一、高利贷行为的法律性质
民事层面：
- 根据《最高人民法院关于审理民间借贷案件适用法律若干问题的规定》，民间个人之间的借贷行为，在双方意思表达真实且利息约定不超过合同成立时一年期贷款市场报价利率四倍的情况下，是受法律保护的。超出此范围的利息部分，法律不予支持，但这并不直接构成刑事犯罪。
刑事层面（特定情形）：
- 如果放贷人以转贷牟利为目的，套取金融机构信贷资金高利转贷他人，且违法所得数额较大，则可能触犯《刑法》中的高利转贷罪，需要承担刑事责任。
- 长期有组织地进行高利放贷、暴力讨债等违法犯罪活动，严重破坏经济、社会生活秩序的团伙，可能构成组织、领导、参加黑社会性质组织罪等相关犯罪。
二、催收过程中到单位骚扰的法律后果
民事层面：
- 如果催收行为干扰了单位的正常工作秩序，或者对借款人造成了名誉损害等，借款人可以依法要求催收者承担民事赔偿责任，如赔偿精神损失费等。
行政层面：
- 若催收行为情节较轻，未造成严重后果，但违反了《治安管理处罚法》的相关规定，如公然侮辱他人或者捏造事实诽谤他人、多次发送淫秽、侮辱、恐吓或者其他信息干扰他人正常生活等，公安机关可以依法对催收者进行处罚，如处五日以下拘留或者五百元以下罚款；情节较重的，处五日以上十日以下拘留，可以并处五百元以下罚款。
刑事层面：
- 如果催收行为情节严重，如使用暴力、威胁、侮辱、诽谤、骚扰等手段，可能涉嫌多种犯罪，如故意伤害罪（如果造成身体伤害）、非法拘禁罪（如果非法限制人身自由）、敲诈勒索罪（如果以非法占有为目的，使用威胁或要挟的方法，强行索要公私财物）等。
- 特别是，如果催收者到单位进行骚扰，且行为恶劣、影响严重，如造成单位工作秩序严重混乱、借款人或单位员工受到严重精神损害等，催收者可能面临更严厉的刑事处罚。
三、建议与措施
对于借款人：
- 在签订借款合同时，应仔细审查合同条款，确保合同的合法性和有效性，避免陷入高利贷的陷阱。
- 如遇暴力或非法催收行为，应及时向公安机关报案，维护自身合法权益。同时，可以保留相关证据，如录音、录像、短信等，以便在需要时提供证明。
对于催收者：
- 应遵守法律法规，采取合法、合理的催收方式，避免使用暴力、威胁、侮辱、诽谤、骚扰等非法手段。
- 如果与借款人之间存在纠纷或争议，应通过协商、调解、仲裁或诉讼等合法途径解决，而不是采取非法手段进行催收。
总结：高利贷行为本身一般不直接构成犯罪，但如果在催收过程中采取到单位骚扰等非法手段，则可能触犯法律，构成违法行为甚至犯罪。因此，建议借贷双方在进行借贷活动时，务必遵守相关法律法规，确保借贷行为的合法性和安全性。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。