实际施工人在特定条件下确实可以直接起诉发包人，但这一权利并非无限制，而是需要依据相关法律法规及具体情况来综合判断。以下是对这一问题的详细解答：
一、直接合同关系下的起诉权利
如果实际施工人与发包人之间签订了有效的建设工程施工合同，那么双方就形成了直接的合同关系。在这种情况下，实际施工人当然可以基于合同条款直接起诉发包人，以维护自身的合法权益。这是合同法基本原则的直接体现，即合同双方应当遵守合同约定，履行各自的义务。
二、无直接合同关系下的特殊规定
然而，在实际操作中，很多情况下实际施工人与发包人之间并没有直接的合同关系，而是通过转包、违法分包或挂靠等方式参与工程建设。在这种情况下，实际施工人是否可以直接起诉发包人呢？
根据《最高人民法院关于审理建设工程施工合同纠纷案件适用法律问题的解释（一）》第四十三条的规定，即使实际施工人与发包人之间没有直接的合同关系，但在一定条件下，实际施工人也可以直接向发包人主张权利。这些条件主要包括：
无效合同关系：实际施工人通常是在转包、违法分包或挂靠等无效合同关系下进行工程建设的。这些行为破坏了建筑市场的正常秩序，因此法律赋予实际施工人在特定情况下直接起诉发包人的权利。
转包人或违法分包人怠于行使权利：当转包人或违法分包人不积极向发包人主张工程款，导致实际施工人的权益难以实现时，法律允许实际施工人绕过他们直接起诉发包人。这体现了法律对弱势群体权益的保护，确保实际施工人的劳动成果能够得到应有的回报。
发包人欠付工程款：法院在受理此类案件时，会查明发包人是否欠付转包人或违法分包人建设工程价款以及具体的欠付数额。只有在发包人存在欠付的情况下，法院才会判决其在欠付范围内对实际施工人承担支付责任。
三、法律原则与实际应用
这一制度设计既体现了合同相对性原则在建设工程领域的突破，也体现了法律对弱势群体权益的保护和社会稳定的维护。合同相对性原则强调合同权利义务仅在合同当事人之间产生效力，但在建设工程领域，为了保障实际施工人的合法权益和维护建筑市场秩序，法律在一定条件下突破了这一原则。
四、实际操作建议
对于实际施工人而言，如果希望直接起诉发包人，应当注意以下几点：
收集证据：收集与工程建设相关的所有证据，包括合同、施工记录、验收报告等，以证明自己的实际施工人身份和工程款数额。
了解法律：熟悉相关法律法规和司法解释，了解自己在特定条件下的起诉权利。
寻求法律帮助：在起诉前咨询专业律师，了解案件的可行性和诉讼风险，制定合理的诉讼策略。
综上所述，实际施工人在特定条件下确实可以直接起诉发包人，但这一权利需要依据相关法律法规及具体情况来综合判断。希望以上解答能够对您有所帮助。