有限的，每日不离手的。是正学之士所不屑的《太上感应篇》。有一年秋天，新科举子复试，徐桐奉旨拟题，试帖诗的诗题是：“校理秘文”。将个“秘”字写成“衣”字旁，成了白字，通场二百多考生不知所本。学问如此的差劲。还要他讲理学，可以说就是个笑话，因此他不太被士林看得起；慈禧太后发觉他学问不怎么样之后，也曾几次想撤他的“书房”，只因他年纪太老，没好意思下旨。但这一没好意思，其实等于给同治皇帝又添了个烂师傅。
徐桐学问差劲，但却以“守旧，恶西学如仇”而闻名，是清流当中最为顽固的人物之一。因他家便住在东交民巷，与各国使馆相近，他就在大门口贴上“望洋兴叹；与鬼为邻”的对子，来表示自己对洋人的憎恶。而在洋务运动开始后，他对于洋务也是十分抵制，当时研究洋务已经在部分开明的官员当中形成了风气，而徐桐仍然闭塞耳目，不愿与闻，却又强称自己博学，于天下各国无所不知。有人看不过，便将了他一军，向他请教西班牙和葡萄牙的国情风俗，他对这两个位于伊比利亚半岛上的海上强国毫无了解，根本答不上来，窘迫之余，便发出了这样一段议论：“西班有牙，葡萄有牙，牙而成国，史所未闻，籍所未载，荒诞不经，无过于此！”传出后又成了笑