Scrapling

Karim Shoair氏はScraplingのクリエイターであり、弾力性のある要素追跡、最新のフェッチャー、ブラウザスクレイピング、スパイダークローリング、セッション、プロキシ、およびスケーラブルなデータ抽出ワークフローに焦点を当てた、オープンソースの適応型Pythonウェブスクレイピングフレームワークの開発に取り組んでいます。

Scraplingは、現代のウェブサイトからより弾力性のあるデータ抽出を必要とするPython開発者向けの、オープンソースの適応型ウェブスクレイピングフレームワークです。ページの構造が変わると壊れてしまう従来のスクレーパーとは異なり、Scraplingには、セレクターが一致しなくなったときに対象の要素を追跡して再配置できる適応型スクレイピング機能が含まれています。このフレームワークは、シンプルなリクエスト、ブラウザ駆動のフェッチ、ステルスなフェッチャーワークフロー、セッション、プロキシ、パース、セレクター、スパイダースタイルのクローリング、並行処理、一時停止と再開、およびスケーラブルな抽出パイプラインをサポートしています。Scraplingは、開発者、データエンジニア、AIエージェントビルダー、自動化チーム、調査ワークフロー、およびセレクターのメンテナンスを減らして信頼性の高いスクレイピングを行いたいウェブデータプロジェクトに特に役立ちます。