D4Vinci/Scrapling
🕷️ An adaptive Web Scraping framework that handles everything from a single request to a full-scale crawl!
О проекте
Адаптивный фреймворк для веб-скрейпинга на Python: парсер сам переселяет элементы при изменении вёрстки, фетчеры обходят анти-бот защиту (Cloudflare Turnstile), а система пауков масштабируется до конкурентных многосессионных краулов.
Чем пригодится
- Собрать данные с сайта, который часто меняет вёрстку, используя adaptive=True для автоопределения элементов
- Запустить многосессионный краул с паузой/возобновлением и автоматической ротацией прокси
- Обойти Cloudflare Turnstile через StealthyFetcher без ручной настройки браузера
Пересказ README моделью DeepSeek V4.1 Flash. Может ошибаться в деталях.
Почему он в тренде
- Сегодня уже 0 звёзд, к концу дня ожидается около 154.
- Около 23 форков в сутки — код забирают себе.
Звёзды по дням
Столбики — звёзды за день, линия — обычный темп. Красным — дни всплесков.
Цифры
- Всего звёзд
- 80 735
- Звёзд за сутки
- 154
- Форков
- 8 150
- Issues и pull requests
- 381
- Наблюдателей
- 297
- Язык
- Python
- Лицензия
- BSD-3-Clause
- Последний релиз
- v0.4.15 · 23 августа 2026
- Создан
- 13 октября 2024
- Последний коммит
- 13 сентября 2026
Доверие к звёздам
Рост выглядит естественно: форков и обсуждений столько, сколько бывает у живых проектов, а звёзды приходят неровно, как от людей.
Это эвристики, а не приговор: судим по поведению репозитория, а не по списку звездивших.
Где замечен
- 13 сентября 2026GitHub Trending Python за день: #9, +226 звёзд
Похожие проекты
-
5,4
bilawalsidhu/gods-eye-view
Браузерный симулятор разведспутника на фотореалистичном 3D-глобусе, который объединяет публичные данные: самолёты, суда, спутники, землетрясения, камеры и трафик. Работает локально, слои подключаются как отдельные…
-
3,3
Phyzicalorg/Phyzical_org
Открытая часть платформы phyzical: схема эпизодов, конвертер и примеры для переноса браузерных демонстраций телеуправления роботом в SQLite-базу trajectory_db стека elizaOS для обучения VLA и imitation learning.
-
2,2
duckdb/duckdb
DuckDB — встраиваемая аналитическая SQL-СУБД, работающая в процессе приложения. Подходит для быстрой обработки данных без отдельного сервера.
-
2,1
drawdb-io/drawdb
Браузерный редактор ER-диаграмм баз данных с генерацией SQL и миграций. Работает без регистрации, поддерживает импорт и экспорт SQL-скриптов.
-
1,6
milvus-io/milvus
Milvus — облачная векторная база данных на Go и C++ для масштабируемого поиска ближайших соседей (ANN) по embeddings. Нужна разработчикам AI-приложений для хранения и поиска неструктурированных данных: текста,…
-
1,3
galaxy-io/filament
Filament — это подключаемая система репликации данных на Go: переносит данные из источников в приёмники в режимах полной, инкрементальной репликации и CDC, с чекпоинтами, батчингом и проверкой целостности. Подходит для…