Рубрики
Без рубрики

Быстрее, чем запросы с мульти-потоком URL-к-SQLite Web Scraper

Быстрее, чем запросы с SQLite. Теги с Python.

Быстрее, чем запросы 0,9,6 🐍

✔️ 5 веб-скребков, встроенный, одноклассник. ✔️ Multi-Threading Mass Downloader. ✔️. Действия GitHub строят с нуля на каждом толчке. ✔️. Действия GitHub публикуют в Pypi на каждый выпуск. ✔️. Базовый Получить () , пост () , Скачать () , так далее. ✔️ Данные нескольких частей для всех функций посту. ✔️. Полная документация с примерами. ✔️ работает на альпийских Linux и Dockers. ✔️ CI, Pypi, Docker, Tests, исправления и т. Д. ✔️ 0 Зависимость, Python 3.9 Готовый, родной голый металл C производительность.

  • Темы Многопоточная, Темы нет нитей.
  • База данных SQLite может быть визуализирована с любым SQLite Wysiwyg, например https://sqlitebrowser.org
  • HTTP заголовки хранятся как довольно печатные JSON.
  • Дата и время хранятся как временные метки UNIX.
  • Может получить изображения из нового HTML5 элемент.

https://github.com/juancarlospaco/faster-than-requests#extras-go-beyond-requests

  • Star faster_than_requests на github!, Потрясающие вещи, входящие …

👑

Оригинал: “https://dev.to/juancarlospaco/faster-than-requests-with-multi-thread-url-to-sqlite-web-scraper-1og1”