Привет. Смотрю регулярно за тем, как развиваются технологии в сферах, связанных с криптовалютой, NFT, GameFi и этим вашим Web3. Учитывая, что очень дофига копипаста, из-за которого чуть ли не каждый день появляются примитивные игры, децентрализованные биржи или DAO в погоне за быстрыми деньгами, оригинальных идей совсем мало, а практическая примени…
Обработка больших данных средствами PySpark SQL
Наиболее популярными инструментами для сбора и обработки больших данных являются Hadoop MapReduce и Apache Spark. Оба этих инструмента имеют свои плюсы и минусы, однако в данной статье мы будем рассматривать Apache Spark, в частности библиотеку для python PySpark.
Любая программа на PySpark начинается с определения конфиг…