LLM地理定位测试:陆地或水域判断
精选理由
Karpathy分享的简单测试:让LLM判断16,200个坐标是陆地还是水域,模型表现令人惊讶。
研究人员通过向大型语言模型提问"Land or Water?"并提供16,200个经纬度坐标,测试模型地理定位能力。结果显示模型能准确判断坐标对应的陆地或水域。这项测试揭示了模型通过压缩互联网数据获得的地理知识。Celeste发布了所有Claude模型测试结果。
原文 · Andrej Karpathy
Cool eval. Simply ask an LLM “Land or Water?” and give it a latitude and longitude coordinate as text. Ask 16,200 times, plot as image. The models know. From compressing the internet. Celeste @celestepoasts results for all claudes 🔗 View Quoted Tweet 💬 61 🔄 56 ❤️ 655 👀 41208 📊 101 ⚡