AI热潮推高网络维护费用:存储成本激增与爬虫流量消耗
IT之家 5 月 11 日消息,据外媒 404 Media 报道,由于 AI 浪潮引发了存储硬件价格上扬,当前互联网档案馆(网络时光机)和维基百科的运营开支正急剧攀升。
以互联网档案馆为例,该平台现拥有 210PB 的数据档案,每日平均增加 100TB 新数据,其创始人布鲁斯特 · 卡勒表示,当前服务器所需 28-30TB 容量的硬盘要么供应不足,要么价格高昂,目前该平台正通过捐赠者以"灵活方式"努力解决难题。
维基百科基金会则向 404 Media 透露,当前维持平台运行的内存及硬盘供应已极为紧缺,该平台目前拥有超过 6500 万篇条目,行业涨价风潮使得基金会必须极为审慎地规划资源配置。
除了硬件成本上扬之外,互联网档案馆与维基百科还持续遭受 AI 爬虫的流量消耗冲击,众多 AI 企业无休止地抓取网络内容,无形中将更高的运营负担转嫁给网站运营方,进一步推高了各大网站的维护开支。