在借条无效，也没有其他证据，现在也找不到人的情况下，只知道身份证号，该怎么要回被借的钱呢？

被人借用身份证是不能办理业务的。如果办理人员未进行身份信息与办理人员核对导致当事人损失的，承担相应责任
《中华人民共和国居民身份证法》
第十七条 有下列行为之一的，由公安机关处二百元以上一千元以下罚款，或者处十日以下拘留，有违法所得的，没收违法所得：
（一）冒用他人居民身份证或者使用骗领的居民身份证的；
（二）购买、出售、使用伪造、变造的居民身份证的。
伪造、变造的居民身份证和骗领的居民身份证，由公安机关予以收缴。
第十八条 伪造、变造居民身份证的，依法追究刑事责任。
有本法第十六条、第十七条所列行为之一，从事犯罪活动的，依法追究刑事责任。
第十九条 国家机关或者金融、电信、交通、教育、医疗等单位的工作人员泄露在履行职责或者提供服务过程中获得的居民身份证记载的公民个人信息，构成犯罪的，依法追究刑事责任；尚不构成犯罪的，由公安机关处十日以上十五日以下拘留，并处五千元罚款，有违法所得的，没收违法所得。
单位有前款行为，构成犯罪的，依法追究刑事责任；尚不构成犯罪的，由公安机关对其直接负责的主管人员和其他直接责任人员，处十日以上十五日以下拘留，并处十万元以上五十万元以下罚款，有违法所得的，没收违法所得。
有前两款行为，对他人造成损害的，依法承担民事责任。