美团云你变了,准备在美团云放爬虫的注意有个大深坑.
前几天美团云有活动,买了台服务器,5Mbps 的带宽.跑爬虫服务器下行死活卡在 10Mbps,而上行才用了 3Mbps 出头.
下行被限制的就 10Mbps,一旦跑着爬虫 xshell 都变成卡死状态.
去年的时候用过一个月的美团云,记得那时候下行都是 20Mbps+的口.
在阿里云买的 4Mbps 的带宽,实际上跑爬虫 下行 15Mbps 左右上行 4.5Mbps,效率是被行卡住的.
腾讯云同阿里云爬虫效率的瓶颈都是上行.在美团云这被下行卡住真是心塞.
发工单问了,结论就是:"接收速率我们限制的是 10M"
所以如果要准备在美团云放爬虫或者其他比较吃下行的程序时要特别注意了..
下行被限制的就 10Mbps,一旦跑着爬虫 xshell 都变成卡死状态.
去年的时候用过一个月的美团云,记得那时候下行都是 20Mbps+的口.
在阿里云买的 4Mbps 的带宽,实际上跑爬虫 下行 15Mbps 左右上行 4.5Mbps,效率是被行卡住的.
腾讯云同阿里云爬虫效率的瓶颈都是上行.在美团云这被下行卡住真是心塞.
发工单问了,结论就是:"接收速率我们限制的是 10M"
所以如果要准备在美团云放爬虫或者其他比较吃下行的程序时要特别注意了..
本文由 vps网友提供，转载请注明出处
本文链接： https://www.vpsvsvps.com/discuss/a/1676471758762283008.html
