微信小程序蜘蛛是什么

爬虫访问小程序内页面时，会携带特定的 user-agent：mpcrawler 及场景值：1129。

因此，可以根据user-agent是否是：mpcrawler，来判断是否是微信小程序的蜘蛛。