相传，有一年，乾隆皇帝打扮成商人下江南，来到苏州一家酒店小饮，店小二听他是京城人的口音，便和他攀谈起来：“客官尊姓大名？”乾隆随口回答：“我叫高天赐，在京城做珠宝生意。”店小二又问：“我有个表叔叫刘纶，他是常州人，他在京城做大官的，不知高伯伯可认识？”
刘纶是文渊阁的大学士，乾隆当然认识，但他怕说穿了会暴露自己的身份，便含糊地说：“刘纶是做官的，我是做生意的，平时没有往来，但你若有事要托，我可以设法找到他。”店小二就托他带个口信，见到了刘叔叔，代他请安问好。
三年以后，店小二回常州老家过春节，正好碰到了刘纶。店小二便问表叔：“京里有个珠宝商高伯伯来找过你没有？”刘纶莫名其妙：“哪个高伯伯？”店小二说：“高伯伯叫高天赐。”刘纶一听哈哈大笑，说：“不是高伯伯，是皇伯伯。他是当今万岁爷乾隆皇帝呀！他会替你捎口信吗？”
后来，“托人托了皇伯伯”这句俗语就这样传开了，表示遇事托错了人，最后渺无音讯。