结论：仅凭口头约定和录音，能否要回一年20万的辛苦费，需结合具体情况判断，但总体来说，有录音作为证据，在符合一定条件下，是有可能主张该笔费用的。以下从不同角度为你详细分析：
一、口头约定的法律效力
口头约定在法律上也是具有效力的，只要双方意思表示真实，且不违反法律、行政法规的强制性规定，不违背公序良俗，该口头约定就是有效的。因此，如果你们之间的口头约定关于一年给20万辛苦费是真实存在的，且没有违反上述规定，那么这个约定在法律上是有效的。
二、录音作为证据的效力
录音作为证据，其效力取决于多个因素，包括录音的取得方式是否合法、录音内容是否清晰、能否反映双方的真实意思表示等。
合法性：录音的取得必须合法，不能通过窃听、偷录等非法手段获取。如果录音是在双方知情且自愿的情况下录制的，或者是在公共场所、对方家中等合法场所录制的，且没有侵犯对方的合法权益，那么该录音通常是合法的。
清晰性：录音内容必须清晰可辨，能够准确反映双方的真实意思表示。如果录音模糊不清，或者存在剪辑、篡改等痕迹，那么其效力可能会受到质疑。
关联性：录音内容必须与案件事实具有关联性，能够证明你所主张的事实。在你的情况下，录音需要能够证明双方存在一年给20万辛苦费的口头约定。
三、主张辛苦费的可能性和建议
可能性：如果录音证据合法、清晰且关联性强，能够证明双方存在口头约定，那么你有可能通过法律途径主张该笔费用。但需要注意的是，即使录音证据充分，也需要考虑对方是否具备支付能力、是否存在其他免责事由等因素。
建议：
收集更多证据：除了录音外，尽量收集其他能够证明双方存在口头约定的证据，如证人证言、短信、邮件等。这些证据可以相互印证，提高你的主张的可信度。
与对方协商：在采取法律行动之前，可以尝试与对方进行协商，看是否能够达成和解。如果对方愿意支付该笔费用，那么可以避免不必要的法律纠纷。
寻求法律帮助：如果协商无果，或者对方拒绝支付费用，你可以考虑寻求法律帮助。作为专业律师，我可以为你提供法律咨询和代理服务，帮助你通过法律途径主张权益。
四、可能面临的法律后果
如果最终通过法律途径主张该笔费用，可能会面临以下法律后果：
胜诉：如果法院认定你的主张成立，那么对方需要支付你一年20万的辛苦费，并可能承担诉讼费用等额外费用。
败诉：如果法院认定你的主张不成立，或者证据不足，那么你可能需要承担诉讼费用等损失，且无法获得该笔费用。
最后，我建议你根据自身情况，综合考虑上述因素，做出明智的决策。如果你有任何疑问或需要进一步的法律帮助，请随时向我咨询。