Google's robots.txt Parser is Now Open Source

opensource.googleblog.com / 1年

The latest news from Google on open source releases, major projects, events, and student outreach programs.

この記事をPICKする

hatenabookmark
クローラーの標準化に向けてGoogleがオープンソース化したんですね。
Pickしました
appstore
googleplay
会員登録
URLからPICKする

会員登録して、もっと便利に利用しよう

  • 1.

    記事をストックできる
    気になる記事をPickして、いつでも読み返すことができます。
  • 2.

    新着ニュースをカスタマイズできます
    好きなニュースフィードをフォローすると、新着ニュースが受け取れます。