根據(jù)一項由路透社研究所進行的調(diào)查，截至2023年底，全球10個國家的近一半（48%）的熱門新聞網(wǎng)站已經(jīng)屏蔽了OpenAI的爬蟲。這項研究覆蓋了多個國家和地區(qū)，結(jié)果顯示，北半球的新聞媒體更傾向于阻止人工智能爬蟲。例如，在美國，79%的頂級在線新聞網(wǎng)站屏蔽了OpenAI的爬蟲，而在墨西哥和波蘭，只有20%的網(wǎng)站這樣做。

OpenAI的爬蟲，名為GPTBot，主要用于收集互聯(lián)網(wǎng)上的數(shù)據(jù)以訓練其大型語言模型，例如ChatGPT。然而，隨著越來越多的新聞網(wǎng)站開始屏蔽OpenAI的爬蟲，OpenAI可能會面臨數(shù)據(jù)獲取的問題。

這項研究還發(fā)現(xiàn)，幾乎所有屏蔽Google AI的網(wǎng)站也都屏蔽了OpenAI（97%）。這可能暗示OpenAI在Google之前發(fā)布其爬蟲程序可能對此有所貢獻。

值得注意的是，一旦網(wǎng)站決定屏蔽OpenAI或Google AI的爬蟲，幾乎沒有網(wǎng)站會改變立場，解除屏蔽。這可能是由于新聞出版商擔心人工智能爬蟲可能會侵犯他們的權益，或者擔心他們的內(nèi)容被用于未經(jīng)授權的目的。

總的來說，這項研究揭示了新聞網(wǎng)站對人工智能爬蟲的態(tài)度，并可能預示著未來OpenAI和其他人工智能公司在獲取數(shù)據(jù)時面臨的挑戰(zhàn)。