WebLight

説明

WebLight は、効率的に xml サイトマップを維持し、マークアップ、CSS、およびリンクの問題を見つけることができる Web クローラーです。これにより、生産性を犠牲にすることなく、エラーのない、完全にインデックス化されたサイトを維持できます。 WebLight の心臓部は、非常に大規模なサイトであっても、サイト全体の検証とマッピングを容易にする高速な Web クローラーです。 WebLight に開始場所を指示し、robots.txt などのルールを使用して、検証するリソースとたどるリンクを制御するだけです。開始 URL とルールを必要な数だけ使用して、必要なすべてのリソースをスキャンし、不要なリソースをスキャンできません。パブリック html ページのみをスキャンするほとんどの Web クローラーとは異なり、WebLight は、ローカル ディスク、パブリックおよびプライベート Web サイトで最も一般的に使用される Web リソース (CSS、(x) html、atom、RSS、および xml サイトマップ) をスキャンできます。閲覧できれば、WebLight で解析できます。

WebLight は、クロール中に CSS、html、ニュース フィード、サイトマップを検証するリンク チェッカーのようなものです。しかし、WebLight は、他のバリデーターのように非標準コードや壊れたリンクを見つけるだけではありません。意図的に使用する非標準コードによって引き起こされるノイズに気を取られることなく、実際の問題を見つけることができるように、検証の問題のクラスを分類できます。ブラウザー固有の CSS プロパティと WAI-ARIA 属性、または修正しないことを選択したその他の問題として。 WebLight を使用すると、検索エンジンがサイトを効率的にインデックス化するのに役立つ xml サイトマップを簡単に維持できます。そのスキャナは、ニュース フィード、サイトマップ、その他のドキュメントからリンクされたすべてのドキュメントを検出します。次に、WebLight のスプレッドシートのようなインターフェイスを使用して、サイトマップをカスタマイズし、URL の優先度、変更頻度、最終更新日を設定できます。最後に、サイトマップの準備ができると、WebLight は検索エンジンに ping を送信して、できるだけ早く新しいページをインデックスに登録できるようにします。