具体施工人起诉的法律依据主要包括以下几个方面：

1. 合同相对性原则：在合同关系中，只有合同当事人一方享有合同权利并承担合同义务，且合同相对性原则是民法基本原则之一。因此，如果签合同的人并非具体施工人，他无权代为施工人领取劳务费，施工人可以通过法律手段来维护自己的权益。
2. 民事诉讼程序：具体施工人可以通过民事诉讼程序来维护自己的合法权益。在诉讼过程中，法院会根据相关证据和法律原则来判定签合同的人是否有权领取劳务费，并作出相应的判决。
3. 证据原则：在民事诉讼中，证据原则是至关重要的。具体施工人需要提供相关证据来证明自己的权利和利益受到侵害，这些证据包括合同、支付凭证、证人证言等。

总之，具体施工人起诉签合同的人并非具体施工人但拿走了劳务费的法律依据主要包括合同相对性原则、民事诉讼程序和证据原则。这些原则和法律将有助于保护施工人的合法权益，并维护正常的市场秩序。