行贿者往回要行贿钱是否算敲诈，不能一概而论，需依据具体情况判断。以下从可能构成敲诈勒索和一般不构成敲诈勒索两种情况进行分析：

可能构成敲诈勒索的情况

若行贿人以告发行贿事实为威胁来要回钱财，就可能涉嫌敲诈勒索。敲诈勒索指的是以非法占有为目的，对被害人使用威胁或要挟手段，强行索要公私财物。在这种情形中，行为人利用威胁让行贿方返还财物，符合敲诈勒索的构成要件。

举例说明：小朱为了让小胡帮自己谋取不正当利益，向小胡行贿了一笔钱财。事成之后，小朱以告发行贿事实相威胁，要求小胡返还行贿的钱财。此时，小朱以告发相威胁要回钱财，若以此种方式迫使小胡返还财物，就符合敲诈勒索的构成要件，可能构成敲诈勒索罪。

一般不构成敲诈勒索的情况

如果是基于合理理由要求返还，通常不构成敲诈勒索。例如，当初行贿是为谋取特定不正当利益，事成后因合法原因，像双方约定的条件成就等，要求返还行贿款。这种情况下，行为人没有非法占有的故意，也不存在敲诈行为，所以不属于敲诈勒索。

举例说明：在商业贿赂案件中，一方因行贿方的不正当利益输送而利益受损，其要求归还相关款项的行为就是正当的。假设A公司为了获得B公司的项目合同，向B公司相关负责人行贿。后来，由于B公司未按照约定履行合同义务，导致A公司遭受损失，A公司基于自身利益受损这一合理理由，要求B公司相关负责人返还行贿款项，此时A公司的行为就不构成敲诈勒索。

判断是否构成敲诈勒索罪，关键在于索要行为的动机、采用的手段，以及是否符合敲诈勒索罪的构成要件。若行为人以非法占有为目的，对行贿人采用威胁或要挟的手段，强行索要行贿款项，并且达到数额较大的标准或者存在多次索要的情形，就有可能构成敲诈勒索罪；若行为人是基于合法权益主张来索要行贿款，通过合理合法的途径要求返还行贿款项，则不构成敲诈勒索罪。

需要提醒的是，行贿后即便把钱要回来，依然构成行贿罪。行贿罪侵犯了国家工作人员职务行为的廉洁性和公私财物的所有权，只要行贿行为完成，犯罪就已经既遂。行贿人把钱要回去，并不影响行贿行为已经实施的事实，损害也已经造成。不过，这种要回钱的举动，在量刑时会作为一个考虑因素，要是行贿人主动挽回了部分损失，量刑时或许会适当从轻处罚。

若你遇到此类问题，可进一步向我咨询，我会结合具体案件细节及相关证据，为你提供更精准的法律分析和建议。