最新Webサイトのデータ収集を全自動化!JavaScriptサイトも楽々対応 — Scrapling

D4Vinci/ScraplingPython18.5k

ScraplingはWebサイトから情報を自動で取得するツールです。ネットショッピングサイトの価格チェックや競合サイトの情報収集のように、人がブラウザで見ている内容をプログラムで自動取得できます。従来のスクレイピング(Web上の情報収集)ツールと違って、複雑な設定不要で簡単に始められるのが特徴です。1回きりの情報取得から、定期的な大量データ収集まで幅広く対応しています。

🔥 なぜ話題?

最近のAIブームでデータ収集の需要が高まる中、従来のスクレイピングツールの複雑さを解決する「誰でも使える」ツールとして注目されています。特に、プログラミング初心者でも簡単に始められる設計が話題になっています。

💡 こう使える!

例えば、毎日複数のECサイトで同じ商品の価格をチェックしたい場合、Scraplingを使えば「この商品ページから価格だけ抜き出して」と指定するだけで、自動的に価格情報を収集してExcelファイルに保存できます。

ユースケース: 競合調査、価格比較、ニュース収集、SNS分析など、Web上の情報を定期的に自動収集したい場面

  • 複雑な設定なしで即座に使い始められる
  • 1行のコードから本格的なクローリングまで段階的に対応
GitHubで見る →

🕷️ An adaptive Web Scraping framework that handles everything from a single request to a full-scale crawl!

過去のトレンド履歴

関連リポジトリ

金融データを「一度つないで、どこでも使える」オープンソースの統合基盤 — OpenBB

OpenBB-finance/OpenBBPython64.8k

OpenBBは、株価や経済指標などの金融データをさまざまなデータソースから集めて、Python・Excel・AIエージェント・REST API(ソフト同士をつなぐ仕組み)など複数の場所から簡単に使える

無料で使える企業レベルのBIツール!60以上のデータベースに対応するダッシュボード作成プラットフォーム — superset

apache/supersetTypeScript72.1k

Apache Supersetは、データの分析や可視化をブラウザ上で行える無料のビジネスインテリジェンス(BI)ツールです。プログラミングの知識がなくても、マウス操作だけで棒グラフや地図などの美しいグ

surrealdb/surrealdb

surrealdb/surrealdbRust31.2k

SurrealDBは、スケーラブルで分散型のマルチモデルデータベースで、ドキュメント型とグラフ型の両方の機能を持ちます。リアルタイムWebアプリケーションに最適化されており、従来のSQLライクなクエリ

rustfs/rustfs

rustfs/rustfsRust21.8k

RustFSは、S3互換の高性能オブジェクトストレージシステムです。4KBのオブジェクトペイロードでMinIOより2.3倍高速な処理性能を実現し、MinIOやCephなどの他のS3互換プラットフォーム

GitとMySQLが合体!テーブルをブランチ・マージ・差分管理できるバージョン管理付きSQLデータベース — dolt

dolthub/doltGo21.2k

Doltは、Gitのバージョン管理機能とMySQLデータベースの機能を組み合わせた革新的なデータベースです。通常のMySQLクライアントから接続してSQLを実行できるだけでなく、テーブルのデータやスキ