在违法建筑萌芽状态制止不力的情况下，责任归属需根据具体情况来判断，一般可能涉及行政机关、相关责任人员或建设单位等。以下从几个不同角度进行分析：

1. 行政机关的责任：

   • 法律依据：根据《中华人民共和国城乡规划法》等相关法律法规，行政机关（如城乡规划部门、城市管理部门等）对违法建筑负有监管和查处的职责。如果行政机关在违法建筑萌芽状态未能及时发现、制止或查处，可能构成行政不作为或监管不力。
   • 责任形式：行政机关可能因此受到上级机关的批评、责令改正、通报批评等行政处分，甚至可能因严重失职导致相关责任人员被追究行政责任或刑事责任。

2. 相关责任人员的责任：

   • 直接责任人员：如果违法建筑的萌芽状态是由于相关责任人员（如规划审批人员、执法人员等）的故意或过失导致的，如违规审批、未履行巡查职责等，这些人员可能因玩忽职守、滥用职权等行为被追究行政责任或刑事责任。
   • 领导责任：如果违法建筑问题反映出行政机关内部管理存在漏洞或领导决策失误，相关领导人员也可能因管理不善或决策失误被追究领导责任。

3. 建设单位的责任：

   • 违法建设行为：如果建设单位在违法建筑萌芽状态即存在未经规划审批、擅自建设等违法行为，建设单位及其相关责任人员可能因违法建设行为被追究行政责任或民事责任。
   • 配合义务：建设单位有义务配合行政机关的监管和查处工作，如果建设单位拒绝配合或阻碍执法，可能加重其法律责任。

法律建议：

• 对于行政机关而言，应加强对违法建筑的日常巡查和监管，及时发现并制止违法建筑行为，确保城乡规划的有效实施。
• 对于相关责任人员而言，应严格履行职责，遵守法律法规和规章制度，避免因故意或过失导致违法建筑问题的发生。
• 对于建设单位而言，应依法进行建设活动，遵守规划审批程序，积极配合行政机关的监管和查处工作。

可能后果：

• 如果违法建筑问题得不到及时制止和处理，可能导致违法建筑规模扩大、影响城市规划和市容市貌、损害公共利益等严重后果。
• 相关责任人员可能因违法建筑问题受到行政处分、刑事处罚或民事赔偿等法律责任。

如有任何关于房产纠纷或违法建筑问题的疑问，可以直接向我咨询，我会根据你的具体情况提供详细的法律解答和建议。