员工离职时入职体检报告单是可以要回的。
体检报告属于个人隐私，报告单记载有体检人的个人隐私，用人单位无权扣留员工的体检报告。
如果其继续拒绝归还，可以向法院提起诉讼。
若单位在接到体检报告后，不正当扩大了体检结果的知晓范围，造成了对当事人隐私的不正当扩散，使不特定的多数人知晓了当事人的隐私，单位也应当承担一定的侵权责任。
法律依据：
《中华人民共和国民法典》 第一千零三十二条 自然人享有隐私权。任何组织或者个人不得以刺探、侵扰、泄露、公开等方式侵害他人的隐私权。
隐私是自然人的私人生活安宁和不愿为他人知晓的私密空间、私密活动、私密信息。