近日，Meta 公司悄然推出一款名为 Meta External Agent 的网络爬虫工具，旨在搜集互联网海量信息以支持其人工智能模型的训练。据悉，这款网络爬虫机器人类似于 OpenAI 的 GPTBot，能够抓取包括新闻文章中的文本以及在线讨论组的对话等人工智能训练数据。
尽管 Meta 并未公开宣布该新网络爬虫机器人的存在，但有三家追踪网络抓取器的公司透露，自上月起，该机器人已在市场上投入使用。这一发现意味着 Meta 可能在扩大其庞大的数据集，以便为公司的自然语言处理技术（NLP）和人工智能助手等产品提供更多支持。
据了解，Meta 的聊天机器人 Llamas 已经成为目前最大的 NLP 模型之一。而此次推出的新网络爬虫机器人或许将助力 Meta 进一步优化 Llamas 等 AI 产品的性能。据 Meta 联合创始人、首席执行官 Mark Zuckerberg 此前透露，公司的社交平台已经积累了一套可用于人工智能训练的大规模数据集，且规模甚至超过了知名数据集提供商 Common Crawl。
然而，随着 Meta 持续升级 Llamas 和 Meta AI，对高质量训练数据的需求也在不断增长。因此，这款新网络爬虫机器人的推出似乎表明 Meta 正寻求扩大数据源，从而进一步提升其 AI 技术的实力。
综上所述，Meta 发布的这款网络爬虫机器人有望为公司带来更丰富的训练数据，进而推动其在人工智能领域的技术创新和发展。