结论：索要20万才让建厂房，没给钱这一行为是否构成敲诈勒索，不能一概而论，需要结合具体情形来判断。以下从不同角度进行分析：
一、敲诈勒索的构成要件
敲诈勒索罪是指以非法占有为目的，对被害人使用实施恐吓、威胁或要挟的方法，非法占用被害人公私财物，从而构成犯罪。其构成要件主要包括：
- 主观方面：具有非法占有的目的。即行为人意图通过威胁、要挟等手段，迫使被害人交出财物，以满足自己的非法需求。
- 客观方面：实施了威胁、要挟等行为，且这些行为足以使被害人产生恐惧心理，从而被迫交出财物。
- 客体方面：侵犯了公私财物的所有权和他人的人身权利或者其他权益。
二、具体情形分析
如果索要20万的行为具有合法依据：
- 例如，双方之间存在某种合同关系或法律义务，索要方有权要求对方支付一定费用作为补偿或履行义务的前提。在这种情况下，即使索要方使用了较为强硬的语言或手段，但只要其索要行为本身具有合法依据，且未超出合理范围，就不构成敲诈勒索。
如果索要20万的行为缺乏合法依据：
- 以威胁或要挟为手段：如果索要方以威胁或要挟为手段，迫使对方支付20万，且这种威胁或要挟足以使对方产生恐惧心理，从而被迫支付款项，那么这种行为就可能构成敲诈勒索。例如，索要方声称如果不支付20万，就将阻止对方建厂房、揭露对方隐私或采取其他不利行动。
- 以非法占有为目的：索要方必须具有非法占有的目的，即意图通过威胁、要挟等手段，非法获取对方的财物。如果索要方只是出于报复、泄愤等目的，而并非为了非法占有对方财物，那么这种行为就不构成敲诈勒索，但可能构成其他违法行为。
未给钱是否影响敲诈勒索的成立：
- 敲诈勒索罪的成立并不以被害人实际支付财物为必要条件。只要行为人实施了威胁、要挟等行为，且这些行为足以使被害人产生恐惧心理，就可能构成敲诈勒索罪的未遂或既遂（取决于行为是否已经完成对被害人财物的非法占有）。因此，即使对方未给钱，也不影响敲诈勒索行为的定性。
三、法律建议
对于索要方：
- 如果认为自己的索要行为具有合法依据，应当通过合法途径解决争议，如协商、调解或诉讼等。
- 避免使用威胁、要挟等不当手段，以免触犯法律。
对于被索要方：
- 如果认为对方的索要行为缺乏合法依据或构成敲诈勒索，应当及时报警并保留相关证据。
- 在报警前，可以尝试与对方进行协商或寻求第三方调解，以化解矛盾。
最后，敲诈勒索行为的定性需要综合考虑多种因素，包括行为人的主观目的、客观行为、威胁或要挟的程度以及被害人的反应等。因此，在具体案件中，应当由司法机关根据查明的事实和证据进行判断。如果你或他人涉及此类问题，可以直接向我咨询，我会根据具体情况提供专业的法律意见。