结论：对方不去司法所，您可以直接向法院起诉他，司法所的调解并非起诉的前置程序。

详细分析：

1. 司法所调解与起诉的关系：

   • 司法所是基层法律服务机构，主要负责提供法律咨询、调解民间纠纷等非诉讼法律服务。
   • 调解是自愿的，双方当事人可以选择是否接受调解，以及调解的结果。如果一方不愿意调解或调解不成，另一方有权直接向法院提起诉讼。

2. 起诉的条件与程序：

   • 根据《中华人民共和国民事诉讼法》的相关规定，起诉的条件包括原告与本案有直接利害关系、有明确的被告、有具体的诉讼请求和事实、理由，以及属于人民法院受理民事诉讼的范围和受诉人民法院管辖。
   • 起诉时，您需要准备起诉状，并附上相关证据材料，如合同、转账记录、聊天记录等，以证明您的诉讼请求和事实、理由。
   • 起诉状应当记明原告和被告的姓名、性别、年龄、民族、职业、工作单位、住所、联系方式，诉讼请求和所根据的事实与理由，以及证据和证据来源，证人姓名和住所。

3. 不去司法所直接起诉的可行性：

   • 既然司法所的调解不是起诉的前置程序，那么您完全有权在对方不愿意去司法所调解的情况下，直接向法院提起诉讼。
   • 法院会根据您提供的证据和事实，依法进行审理，并作出判决。如果判决支持您的诉讼请求，对方就需要履行相应的法律义务。

4. 可能面临的法律后果：

   • 如果您选择直接起诉，并最终获得法院的支持，对方可能需要承担民事责任，如赔偿损失、履行合同等。
   • 如果对方不履行法院的判决，您还可以申请法院强制执行，以维护自己的合法权益。

建议：

• 在决定起诉前，您可以再次尝试与对方进行沟通，看是否能够通过协商解决问题，以节省时间和成本。
• 如果协商无果，您可以准备相关证据材料，向法院提起诉讼。在起诉过程中，您可以寻求专业律师的帮助，以确保自己的权益得到充分保障。

如有任何法律疑问或需要进一步的法律帮助，请直接向我咨询。