结论：在未签订书面租赁合同的情况下，第二年付的房租若不想继续租赁，能否退钱需视具体情况而定，主要取决于双方的实际履行情况、口头约定以及相关法律规定。以下从不同角度为您详细分析：

一、未签订书面合同，但已实际履行的情况

1. 事实租赁关系成立：

   • 根据《中华人民共和国民法典》的相关规定，租赁期限六个月以上的，应当采用书面形式。当事人未采用书面形式，无法确定租赁期限的，视为不定期租赁。
   • 在您的情况下，虽然未签订书面合同，但如果双方已经实际履行了租赁行为（如您已经支付了房租，房东也接受了房租并允许您使用房屋），则事实上的租赁关系已经成立。

2. 不定期租赁的解除：

   • 对于不定期租赁，双方当事人均可以随时解除合同，但应当在合理期限之前通知对方。
   • 因此，如果您不想继续租赁，理论上可以随时提出解除合同，但应给予房东合理的通知期限，以便房东寻找新的租客或做出其他安排。

3. 房租退还问题：

   • 在解除不定期租赁合同的情况下，您是否有权要求退还已支付的房租，取决于您解除合同的时间点以及房东的实际损失。
   • 如果您在合理期限内提前通知房东解除合同，且房东没有因此遭受实际损失（如未能及时找到新租客导致的空置期损失），则房东应当退还您未使用期间的房租。
   • 如果房东因您的解除合同而遭受了实际损失，且该损失是由于您的行为导致的，则房东有权要求您承担相应的赔偿责任，这部分赔偿可能会从您已支付的房租中扣除。

二、存在口头约定的情况

1. 口头约定的效力：

   • 虽然口头约定在法律上也是有效的，但相较于书面合同，其证明难度较大。
   • 如果您和房东之间有关于租赁期限、房租支付、解除合同等事项的口头约定，且该约定不违反法律、行政法规的强制性规定，不违背公序良俗，则该口头约定对双方均具有约束力。

2. 根据口头约定处理：

   • 如果您和房东之间的口头约定中明确规定了租赁期限、解除合同的条件以及房租退还等事项，则应当按照口头约定的内容处理。
   • 如果口头约定中未明确规定这些事项，或者规定不明确，则应当参照上述不定期租赁的相关规定处理。

三、法律建议

1. 与房东协商：

   • 在决定解除合同并要求退还房租之前，建议您先与房东进行协商，明确双方的权利和义务，以及房租退还的具体事宜。
   • 通过协商，您可以更好地了解房东的态度和立场，从而制定更合理的解决方案。

2. 保留证据：

   • 无论您和房东之间是否有书面合同或口头约定，都建议您保留好与租赁相关的所有证据，如房租支付凭证、房屋使用证明、与房东的沟通记录等。
   • 这些证据在后续可能出现的纠纷中将对您非常有利。

3. 寻求法律帮助：

   • 如果您和房东之间无法就房租退还等事宜达成一致意见，或者房东拒绝退还房租且您认为其行为不合理，则建议您寻求法律帮助。
   • 您可以向我咨询具体的法律问题，或者根据具体情况向当地的人民调解委员会、法院等机构申请调解或提起诉讼。

最后，我想强调的是，虽然未签订书面租赁合同可能会给您带来一些不便和风险，但并不意味着您的权益无法得到保障。在处理此类问题时，请务必保持冷静和理性，通过合法途径维护自己的权益。如果您有任何疑问或需要进一步的法律帮助，请随时向我咨询。