观萨格尔王捆绑恺撒证维尼蜜多心经: "@nosquito@stelpolva.moe 写好了robots.txt还可以继续嘲不会吧不…" - Qoto Mastodon

Jan 24, 2025, 02:47

我就这样看着TL上的你…… @nosquito@stelpolva.moe

@Estellaven@dvd.chat @shine@mastodon.online 一句话概括：有人搞了个博客聚合站无授权收录和存档和索引别人的博客然后被存档的香油要求停止收录这些人就破防了说她们是极端女权嘲讽她们不事先写好 robots.txt

观萨格尔王捆绑恺撒证维尼蜜多心经 @acme@qoto.org

@nosquito 写好了robots.txt还可以继续嘲不会吧不会吧你们不会以为爬虫都会老实遵守robots.txt吧

Jan 24, 2025, 06:42 · · · ·

Sign in to participate in the conversation