Быстрее, чем запросы с многопотативным веб-скребком

• Альтернативный HTTP-клиент, новая версия 0,9 API для людей.
• Добавлен многоточный веб-скребок встроенный встроенный вкладыш.
• Добавлен многопоточный файл загрузчика встроенного одноклассника.
• 1 файл, 0 Зависимость, ~ 100 строк кода, 2.7 к 3.8 , Альпийский и рука.
• Github Действия CI Строительство с нуля.
• Github Действия CI работает в замешательстве с нуля.
• Примеры для веб-скребка и загрузчик файлов.
• Дополнительно для науки о данных, веб-соскоб, HTTP REST JSON API.
• Примеры, Dockerfile, Tests, FAQ, COC, DEBUG HEMPLEY, JSON PEREMENS.
• Документы имеют все функции с подробными аргументами и возвращаются с типами.

requests.get("http://httpbin.org/get")

• Получить , ПОЧТА , Патч , Поставить , Удалить и более.

requests.scrapper(["http://example.org", "http://example.io"], threads=True)

• Theres 2 Готовые веб-скребки встроенные, простые в использовании одноклассника.

requests.download2([("http://example.org/foo.jpg", "output.jpg"), ], threads=True)

• задержка = 1000 За 1 секунду задержки сна между загрузками.

requests.get2str2(["http://example.org", "http://example.io"], threads=True)

• Темы = false без мульти-нити.

• https://github.com/juancarlospaco/faster-than-requests#faster-than-requests

🐍😼👍.

Оригинал: “https://dev.to/juancarlospaco/faster-than-requests-with-multithread-web-scrapper-4lpi”