结论前置：在您描述的情况下，如果刚开始同意别人领养小孩，但后来反悔不肯将小孩交给别人领养，一般情况下不会直接因此吃官司，但可能会面临一些法律上的复杂情况和道德上的考量。以下从多个角度为您详细分析：
一、法律角度
领养关系的成立条件：
- 根据《中华人民共和国民法典》中关于收养的规定，收养关系的成立需要满足一系列法定条件，包括但不限于收养人、送养人的资格条件，以及收养程序的合法性等。
- 在您的情况下，如果刚开始只是口头同意，并未办理任何法律手续（如签订收养协议、办理收养登记等），那么领养关系并未正式成立。
反悔的法律后果：
- 如果领养关系尚未成立，您反悔不肯将小孩交给别人领养，这并不构成违约或违法行为，因为双方之间并未形成具有法律约束力的合同关系。
- 但是，如果双方已经签订了收养协议，但尚未办理收养登记，此时反悔可能会涉及违约问题。不过，由于收养协议涉及人身关系，其违约责任和赔偿方式可能与一般合同有所不同，且通常不会直接导致“吃官司”的结果，除非对方因此遭受了重大损失并提起诉讼。
道德与法律责任的平衡：
- 即使从法律上讲您可能不承担直接责任，但从道德层面考虑，您的反悔可能会给对方带来情感上的伤害和困扰。
- 如果可能的话，建议您与对方进行坦诚的沟通，解释反悔的原因，并尽量寻求双方都能接受的解决方案。
二、实际操作角度
沟通协商：
- 在反悔的情况下，首先应该与对方进行沟通协商，说明自己的想法和原因，尽量达成和解。
- 如果对方理解并接受您的决定，那么问题可能就此解决，无需进一步法律行动。
法律程序：
- 如果对方不接受您的反悔决定，并可能采取法律行动（如提起诉讼），那么您需要做好应对准备。
- 在这种情况下，建议您咨询专业律师（当然，您可以直接向我咨询），了解自己的法律权利和义务，以及可能面临的法律后果。
三、特殊情况考虑
- 如果已经办理了收养登记：
- 如果双方已经办理了收养登记，那么领养关系已经正式成立。此时反悔将涉及解除收养关系的问题，这通常需要通过法律程序来解决。
- 解除收养关系可能涉及复杂的法律程序和情感纠葛，建议您在这种情况下务必咨询专业律师，以确保自己的权益得到妥善保护。
总结与建议：在您描述的情况下，如果领养关系尚未成立，您反悔不肯将小孩交给别人领养一般不会直接导致法律纠纷。但为了维护双方的权益和关系，建议您与对方进行坦诚的沟通协商。如果对方可能采取法律行动或您已经办理了收养登记后反悔，那么建议您及时咨询专业律师以获取更具体的法律建议。如果您有任何法律问题或需要进一步的帮助，请随时向我咨询。