在确认劳动关系的过程中，确实有时需要找单位进行核实，但这并非唯一途径，且核实的方式和必要性取决于具体情况。以下是对此问题的详细解答：
首先，我们要明确劳动关系的认定标准。根据原劳动和社会保障部的相关规定，以及劳动法上的隶属性、有偿性、组织性原则，确认劳动关系主要考量以下几个方面：
劳动者是否由用人单位招用，并在其管理、指挥与监督下提供劳动：这要求劳动者遵守单位的规章制度，按照单位的要求在指定的时间、地点，以指定的方式、形式提供劳动。
劳动者是否在用人单位的生产组织体系中从事劳动，且其工作是用人单位的业务组成部分：这体现了劳动者与用人单位之间的组织性关联。
用人单位是否向劳动者支付劳动报酬，劳动者在经济上是否依赖于用人单位：这是确认劳动关系有偿性的重要依据。
在确认劳动关系的过程中，举证责任是一个关键环节。根据《劳动争议调解仲裁法》的规定，发生劳动争议时，当事人对自己提出的主张有责任提供证据。与争议事项有关的证据如果属于用人单位掌握管理的，用人单位应当提供；不提供的，应当承担不利后果。
关于是否需要找单位核实：
劳动者初步证明：首先，劳动者需要作出存在劳动关系的初步证明，如提供“工作证”“服务证”等能够证明身份的证件，以及其他劳动者的证言等。这些证据可以初步证明双方于何时开始建立劳动关系以及劳动关系的存续期间。
用人单位反驳与举证：如果用人单位主张双方劳动关系不存在，那么用人单位需要举证证明，如提供职工花名册、社保缴费记录、招用记录、考勤记录等文件，以证明劳动者身份信息并不在此类涉及员工管理的名录中。
仲裁员判断：最后，由仲裁员根据举证责任分配原则作出判断。如果一方全部证据的证明力显著高于对方的，事实清楚的情况下，可以直接根据证据作出判断。如果双方提供的证据证明力相差不大，待证事实模棱两可时，则根据法定举证责任分配规则，由依法负有举证责任的当事人承担败诉风险。
总结：
在确认劳动关系的过程中，虽然有时需要找单位进行核实（特别是当用人单位提出反驳主张时），但并非所有情况下都必须直接找单位。劳动者可以通过提供初步证明来主张劳动关系的存在，而用人单位则需要通过提供反驳证据来证明劳动关系的不存在。最终，由仲裁员根据双方提供的证据和举证责任分配原则作出判断。因此，确认劳动关系是一个需要双方举证、仲裁员判断的过程，并非单纯依赖找单位核实。