我刚刚开始尝试 AWS。我在 RDS 上有一个 Postgres 微实例,我正在 c4.large 上运行爬虫。当我只有一个蜘蛛(一个线程)时,我得到大约 10 个写入 IOPS。但如果部署了两个蜘蛛(2 个线程),我只得到大约 7 个写入 IOPS。如果我理解正确,因为我分配了 20gb,所以最大 IOPS 总共应该是 60IOPS。我在下面附上了监控。
当只部署一个蜘蛛时:
当第二个蜘蛛被部署在旁边时:
请注意从平均 10 写入 IOPS 下降到平均 7 写入 IOPS。
任何帮助都感激不尽。