Пошук по тегу #PySpark
У роботі з даними в аналізі та обробці часто виникає необхідність розрахувати різні статистичні показники для наборів даних. У цій статті ми розглянемо задачу знаходження середнього та моди для списку в значеннях стовпців DataFrame у…
Під час роботи з кластерами Dataproc на Google Cloud Platform (GCP) можуть виникати питання щодо моніторингу та журналізації подій, зокрема журналів об’єднаних журналів Yarn та журналів драйвера Spark у Cloud Logging GCP. У зазначеному сценарії,…
Робота з великими обсягами даних часто вимагає гнучкості у представленні та обробці даних. Однією з типових задач є перетворення даних, організованих за принципом ключ-значення, у табличну структуру. Це особливо актуально при роботі з розподіленими системами…
Використання будь-яких матеріалів, розміщених на сайті, дозволяється лише за умови обов'язкового гіперпосилання на сторінку voz.city, на якій розміщений матеріал.
