嘉庆十六年（1811）七月十四日，管理西洋堂事务大臣福庆上奏嘉庆帝，谈及西洋人贺清泰、吉德明已年老多病，毕学源尚能通晓算法，此三人请令留京；高临渊、颜时莫、王雅各伯、德天赐四人，学业未精，留京无用，应遣令归国。嘉庆帝闻奏后谕示内阁，贺清泰、吉德明、毕学源三人准其留京，饬令在西洋堂安静居住。高临渊等四人，交步军统领衙门，在他们起程时，派参将、游击二员，酌带兵丁数名，伴送至良乡县。直隶总督再于文职同知通判内、武职都司游击内，拣派妥员，带同兵役接替伴送出境。山东以下经过各省，均照直隶一体派员接替，到广州后，交两广总督松筠收管，等到有方便船只，饬令他们附载归国。沿途所过地方，以及在广东居住期间，均不许他们与内地民人交接往来。十六日，清政府明令严禁西洋人潜住内地。嘉庆帝谕示内阁说：西洋人住居京师，原因他们熟习算法，可以推步天文，备钦天监职官先用。现在京的西洋人共十一名，除福天高、李振洪、高守谦三人，现任钦天监监正监副，南弥德在内阁充当翻译差使，毕学源通晓算法，留备叙补，贺清泰、吉德明二人均年老多病，不能归国，此外，学艺未精的高临渊等四人，已饬令归国，现在留京的西洋人只有七人。这七人中，有官职差使的，出入往来都有在官人役，随地稽查，不能与旗民人等私相交接；年老多病的，不过听其终老，不准擅出西洋堂，外人也不准擅入。管理大臣，及官员弁兵，巡逻严密，不至发生传教惑众等事。至于外省地方，本无需用西洋人地方，也就不应有西洋人在境潜住。从前外省拿获习教人犯，总说传播始于京师，今京师已按名稽核，彻底清查，若外省再有传习此教的，必定另有西洋人在那里煽惑，地方匪徒私自容留，不可不加以严禁。除广东省向西洋人来往贸易，其居住处应留心管束，不得任其私行传教，有不遵禁令者，即按例惩治外，其余各直省，各督抚都要饬属通行详查。如现有西洋人在境，以及续有西洋人潜来的，均令地方官即行查拿具报，一面奏闻，一面递交广东遣令归国。如地方官查办不力，致令传教惑众，照新定条例，严参重处。若内地民人私习其教，又影射传惑的，地方官一律查拿，按律治罪。