Руководство по ведению ведения – метод оптимизации, которая использует ведра для определения разделения данных и избежать перетасовки данных. Tagged Spark, Python, Bigdata.
Автор: luminousmen
Этот пост внимательно изучает компоненты искримого приложения, смотрит на то, как эти компоненты работают вместе и посмотрите на то, как зажимают приложения для зажигания на кластере пряжи. Теги с большими данными, искрой, Python.
Хранение Azure Blob – это решение Microsoft для хранения объектов в облаке. Он оптимизирован для хранения большого количества данных и может быть легко добраться до вашего приложения Python / Spark. Помечено Python, Spark, Big Data, Azure.
Для очень загруженных систем Serverless – это простой способ бесконечного масштабирования, а для боковых проектов это отличная возможность для бесплатного хостинга .. Tagged с AWS, Serverless, Python.