AJAXサイトをクロール可能にするために行うことは大きく分けて次の2つ。 (1) URLの#（シャープ）以降のステートフルURLの書き換えによりクローラブルにすること、(2) headless browserを利用してサーバ側でJavaScriptを実行し、クローラに提供するためのHTMLコード（コンテンツ）を用意すること、だ。