親子・兄弟・夫婦の一覧と前職・競技歴の一覧を追加し、AIクローラーの取得範囲を制限しました

ボートレーサーの親子・兄弟・夫婦の一覧(/racer/family/)と、前職・競技歴の一覧(/racer/career/)を追加しました。どの行も出典(スポーツ紙の記事や公式の記事)のURLを付け、原文を照合したものだけを載せています。選手ページにも1行で表示します。

AI各社のクローラーがレース詳細ページ(150万ページ以上)を総当たりしてデータベースの読み取りが枯渇したため、robots.txt でAIクローラーからのレース詳細ページと2019年以前の日付別ページの取得を止めました。検索エンジン(Googlebot・Bingbot)と、利用者の操作で動くAIエージェント(ChatGPT-User・Claude-User・Perplexity-User)は全ページを取得できます。選手・場・開催・ランキング・解説のページはAIクローラーにも開いています。