村集体（或村民组）在特定且明确的法定情形下可以收回土地承包经营权或土地使用权，但必须严格遵循相关法律法规和程序规定。以下是对这一问题的详细解答：
一、可以收回土地承包经营权的法定情形
承包方全家迁入设区的市，转为非农业户口：
- 当承包方全家迁入设区的市并转为非农业户口后，其不再依赖农村土地作为基本生产生活资料。此时，承包方应将承包的耕地和草地交回发包方（村集体或村民组）。若承包方不交回，村集体或村民组有权依法收回，以确保土地资源合理分配给有需要的农业人口。
承包方自愿交回：
- 承包期内，承包方有权自愿将承包地交回发包方。但此行为需提前半年以书面形式通知发包方，并确保程序的合法性。在此情况下，村集体或村民组可以收回土地承包经营权。
承包方严重违反承包合同约定：
- 如承包方改变土地的农业用途，用于非农建设，或进行掠夺性经营给土地造成严重损害等，均构成严重违反合同约定的行为。村集体或村民组在履行法定程序后，有权解除承包合同并收回土地承包经营权。
土地被依法征收、征用：
- 国家基于公共利益需要征收、征用农村集体土地时，村集体或村民组可以收回相应土地的承包经营权。但此过程必须按照法定程序进行，并对承包方给予合理补偿，确保承包方的合法权益不受侵害。
承包经营期限届满且未续签：
- 当土地承包合同约定的承包期限届满，而承包方未与村集体或村民组续签承包合同时，村集体或村民组可以依法收回土地承包经营权，并进行重新发包等相关处置。
二、可以收回土地使用权的法定情形（补充说明）
除了土地承包经营权外，村集体在特定情况下也有权依法收回土地使用权，这主要涉及以下情形：
为乡（镇）村公共设施和公益事业建设需要使用土地：
- 如修建乡村公路、建设乡村医院、学校等公共设施和公益项目，村集体在履行审批手续后，可收回相关土地使用权，并应对土地使用权人给予适当补偿。
不按照批准的用途使用土地：
- 土地使用者必须按审批时的用途使用土地。擅自改变用途的，村集体有权收回土地使用权。
因撤销、迁移等原因停止使用土地：
- 当土地使用者因企业撤销、迁移等原因不再使用土地时，村集体可收回土地。
土地闲置过久：
- 若土地长期未得到有效利用，处于闲置状态，村集体也有权依法收回。
三、收回程序与补偿
- 程序：无论是收回土地承包经营权还是土地使用权，村集体或村民组都需报经原批准用地的人民政府批准，未经批准不得擅自收回，否则构成违法行为。
- 补偿：在收回土地时，村集体或村民组应对土地使用者或承包方给予合理补偿，确保其合法权益不受损害。补偿标准应依据相关法律法规和当地实际情况确定。
四、不能随意收回的情况
村集体或村民组不能以不合理的理由，如个别成员的主观意愿、无端怀疑承包方或土地使用者经营不善等，随意收回土地承包经营权或土地使用权。此类行为侵害了承包方或土地使用者的合法权益，他们有权通过协商、调解、仲裁或诉讼等途径维护自身权益。
五、总结与建议
村集体或村民组在收回土地承包经营权或土地使用权时，应严格遵守相关法律法规和程序规定，确保行为的合法性和公正性。同时，应充分尊重和保护承包方或土地使用者的合法权益，避免引发不必要的纠纷和矛盾。在遇到相关问题时，建议双方通过协商或法律途径解决争议，以维护和谐稳定的农村社会环境。