结论：医生判决书（这里应理解为法院作出的判决书）下来后，应当送达被告人手里，不送达算违法。以下从不同角度详细分析：
一、判决书送达的法律规定
根据《中华人民共和国民事诉讼法》的相关规定，法院作出的判决书是具有法律效力的文书，必须依法送达给当事人，包括原告和被告。送达判决书是法院履行职责的一部分，也是保障当事人诉讼权利的重要环节。如果法院未将判决书送达给被告人，那么这一行为就违反了法律规定。
二、判决书未送达的法律后果
程序违法：法院未将判决书送达给被告人，首先构成程序违法。程序违法可能影响判决的公正性和合法性，因为被告人无法及时了解判决内容，也就无法行使上诉等诉讼权利。
可能影响判决效力：在极端情况下，如果判决书未依法送达给被告人，且被告人因此未能行使上诉权，那么该判决可能在后续的法律程序中面临被撤销或改判的风险。虽然这种情况较为罕见，但并非不可能发生。
当事人可申请救济：如果被告人发现法院未将判决书送达给自己，可以向法院提出异议，要求法院补正送达程序。如果法院拒绝补正或补正后仍存在问题，被告人还可以向上级法院申请再审或申诉。
三、实际操作中的注意事项
确认送达方式：法院在送达判决书时，通常会采取直接送达、邮寄送达、留置送达或公告送达等方式。被告人应确认自己是否收到了判决书，并核对送达方式是否符合法律规定。
及时行使诉讼权利：如果被告人收到了判决书，应认真阅读判决内容，并在法定期限内行使上诉等诉讼权利。如果未收到判决书或认为送达程序存在问题，应及时向法院提出异议。
保留证据：在处理与判决书送达相关的问题时，被告人应保留好相关证据，如送达回证、邮寄凭证等，以便在需要时证明自己的主张。
建议：如果您作为被告人未收到判决书，或者对判决书的送达程序有疑问，可以直接向我咨询。我会根据您的具体情况，为您提供专业的法律建议和帮助。