以下说法错误的是：
A、Robots协议是一种约定。
B、Robots协议可以作为法律判决的参考性“行业共识”。
C、Robots协议是互联网上的国际准则，必须严格遵守且受技术约束。
D、Robots协议告知网络爬虫哪些页面可以抓取，哪些不可以。