劳动仲裁调解不去是可以的，但一般不建议这样做，因为这可能会对你的权益产生一定影响。下面我从法律权利和潜在风险两个角度为你详细分析：

一、法律权利角度

从法律权利的角度来看，当事人有权利选择是否参加劳动仲裁调解。如果你确实因为客观原因，比如突发疾病、身处外地且无法及时赶回等合理事由不能参加调解，那么你应当提前与仲裁机构联系，说明情况并申请延期或变更调解时间。这是你的合法权利，仲裁机构通常会予以理解和配合。

二、潜在风险角度

然而，从潜在风险的角度来看，无故不参加调解可能会产生不利影响，具体表现在以下几个方面：

1. 失去调解机会：调解是解决劳动纠纷的一种有效方式，它往往能更灵活地处理争议，可能比仲裁裁决更符合双方利益。如果你无故不参加调解，就意味着你放弃了通过调解快速、友好解决纠纷的机会。

2. 影响仲裁结果：如果你作为申请人无故不参加调解，且没有合理的解释，仲裁机构可能会视为你主动撤销了仲裁申请。而如果你作为被申请人无故不参加调解，仲裁机构则可能会根据具体情况进行缺席裁决。这种情况下，你可能会面临较为不利的局面，因为无法利用调解机会为自身辩护并提供相关证据材料。

3. 增加诉讼成本：如果你因为不参加调解而导致仲裁结果不利，后续可能还需要通过诉讼途径来维护自己的权益。这无疑会增加你的时间成本和经济成本。

建议：

• 如果没有特殊情况，建议尽量参加劳动仲裁调解。通过调解，你可以与对方协商和解，节省时间和成本，也有可能达成一个双方都能接受的调解方案。
• 如果你确实无法参加调解，务必提前与仲裁机构沟通并说明正当理由。这样可以让仲裁机构了解你的情况，并作出相应的安排。

法律依据：

• 《中华人民共和国劳动争议调解仲裁法》第三十六条规定：“申请人收到书面通知，无正当理由拒不到庭或者未经仲裁庭同意中途退庭的，可以视为撤回仲裁申请。被申请人收到书面通知，无正当理由拒不到庭或者未经仲裁庭同意中途退庭的，可以缺席裁决。”

希望以上分析能对你有所帮助。如果你还有其他关于劳动仲裁的问题，欢迎随时向我咨询。