chardet坑——比蜗牛还慢

需求最近在做一个功能，使用python爬取网页然后保存到本地。其中遇到的一个难题是判断页面的编码方式。有问题就百度喽，当时a56爆大奖在线娱乐没想到自己去解决。一百度就找到了一个叫chardet的插件。大喜过望，试了一下很OK。好了，貌似问题解决了，可是坑为毛a56爆大奖在线娱乐的请求变慢了很多，起初a56爆大奖在线娱乐还以为是python慢，后