结论：是否能让上门收金的人进屋，需分情况讨论，具体如下：

1. 若上门收金者身份合法且交易合规
   若对方是持有合法资质的黄金回收机构或个人，且交易符合《中华人民共和国金银管理条例》等法律法规（例如，黄金来源合法、交易价格符合市场标准、无欺诈或强制交易行为），则您有权自主决定是否允许其进屋。

   • 法律依据：根据《民法典》第110条，自然人享有住宅不受侵犯的权利，但法律未禁止合法交易进入住宅。若您同意，则不违法；若拒绝，对方不得强行进入。
     
   • 建议：要求对方出示营业执照、回收资质证明，并核实交易价格是否透明，避免低价收购或隐瞒克重等欺诈行为。

2. 若上门收金者身份存疑或交易违法
   若对方无法提供合法资质，或存在以下情形，您有权拒绝其进屋并报警：

   • 非法交易：如回收来路不明的黄金（可能涉及盗窃、抢劫等赃物）；
     
   • 欺诈行为：如虚报黄金纯度、克重，或以“检测”为名私自扣留黄金；
     
   • 强制进入：未经允许强行闯入住宅，可能涉嫌非法侵入住宅罪（《刑法》第245条）。
     
   • 建议：立即关闭房门，通过电话或视频记录对方特征，并拨打110报警。

3. 特殊场景：社区或物业组织的回收活动
   若为社区或物业统一组织的黄金回收活动，需确认活动是否经过合法备案，且回收方资质齐全。即使如此，您仍有权拒绝其进屋，选择自行前往指定地点交易。

总结：是否允许上门收金者进屋，核心在于判断对方身份及交易合法性。合法交易可自主决定，违法或存疑交易应坚决拒绝并报警。如有进一步疑问，可直接向我咨询具体场景下的法律风险。