结论：针对您目前的情况，是否继续上班不能仅凭老板或老板娘的单方面口头指示来决定，而是需要结合实际情况，包括公司的规章制度、劳动合同的约定以及您与老板、老板娘之间的沟通情况等，来综合判断并做出决定。以下是从不同角度为您进行的分析：
一、从劳动合同和公司规章制度的角度
劳动合同的约定：首先，您需要回顾一下与用人单位签订的劳动合同中，是否有关于工作安排、解雇、休假等方面的具体约定。如果劳动合同中明确规定了工作安排需以书面形式通知，或者解雇需遵循特定程序，那么老板或老板娘的口头指示可能并不具有法律效力。
公司规章制度：其次，您需要了解公司的规章制度中是否有关于工作安排、休假、解雇等方面的规定。如果公司规章制度中明确规定了相关流程，那么您应遵循这些规定来行事。例如，如果公司规定解雇员工需提前通知并支付经济补偿，那么老板仅口头让您不用来上班，可能并不符合公司规章制度的要求。
二、从沟通情况的角度
与老板和老板娘的沟通：您应尝试与老板和老板娘进行进一步的沟通，明确他们的真实意图。如果老板娘表示让您休息一天后继续上班，而老板则表示让您不用来了，这可能存在误解或沟通不畅的情况。通过沟通，您可以更好地了解公司的实际需求，以及您在公司中的位置和未来发展方向。
书面确认：为了确保自己的权益不受损害，您可以考虑向老板或老板娘提出书面确认的要求。例如，您可以发送一封电子邮件或短信，询问他们关于您工作安排的具体指示，并要求他们以书面形式回复。这样，在后续可能出现的纠纷中，您将有更充分的证据来维护自己的权益。
三、从法律后果的角度
如果老板单方面解雇您：如果老板未经您同意，单方面解雇您，且不符合劳动合同或公司规章制度中的解雇条件，那么您有权要求公司支付经济补偿或赔偿金。具体金额将根据您的工龄、工资水平以及解雇的合法性等因素来确定。
如果您未按时上班：如果您在未得到明确指示的情况下，擅自决定不去上班，且因此给公司造成了损失，那么公司可能有权要求您承担相应的赔偿责任。因此，在做出决定前，请务必谨慎考虑并咨询专业人士的意见。
建议：在目前的情况下，我建议您先与老板和老板娘进行进一步的沟通，明确他们的工作安排指示。如果沟通无果或存在争议，您可以考虑咨询我，以获取更具体的法律建议和帮助。同时，请务必保留好与老板、老板娘之间的沟通记录以及劳动合同、公司规章制度等相关文件，以备不时之需。