PySpark select, groupBy, sum, avg, min, max, orderBy e UDF
🤓 Com a alta demanda na industria de dados em busca de profissionais com habilidades de analytics, machine learning e engenharia de dados saber PySpark vai lhe render boas oportunidades não só apenas em uma nova oportunidade de emprego mas também na atual onde você poderá construir novas soluções de dados escaláveis e inovadoras.
📄 Código fonte do projeto:
- Link do Notebook: https://github.com/ademirmendonca/AnaliseMunicipiosBrasileiros_2010
🎲 Dataset utilizado no projeto:
- Link oficial do dado: http://blog.mds.gov.br/redesuas/wp-content/uploads/2018/06/Lista_Munic%C3%ADpios_com_IBGE_Brasil_Versao_CSV.csv
- Link dado tratado: https://raw.githubusercontent.com/ademirmendonca/DadosPublicos/main/Lista_Municipios.csv
🐧Linux para desenvolvimento com Python e PySpark com Dados:
- Montando máquina Linux para desenvolvimento DataScience, Analytics e Engenharia de dados: https://youtu.be/0e2Pd08PfYc
- Configurando ambiente PySpark com VSCode: https://youtu.be/6-SOZCThn98
📚Além disso, sugeri aqui embaixo alguns livros que podem ser interessantes em sua trilha de aprendizado:
✅ Learning PySpark Framework: https://amzn.to/399SqAm
✅ Essential PySpark for Scalable Data Analytics: A beginner's guide to harnessing the power and ease of PySpark 3: https://amzn.to/3964RNN
✅ Learning Spark: Lightning-Fast Data Analytics: https://amzn.to/3Mhkxeu
✅ Introdução à Programação com Python: Algoritmos e Lógica de Programação Para Iniciantes: https://amzn.to/3PKKshF
✅ Data Science Do Zero: Noções Fundamentais com Python: https://amzn.to/3lL8xqK
✅ Python Para Análise de Dados: Tratamento de Dados com Pandas, NumPy e IPython: https://amzn.to/38KB11j
––––––––––––––––––––––––––––––
Bongo by KV https://youtube.com/c/KVmusicprod
Creative Commons — Attribution 3.0 Unported — CC BY 3.0
Free Download / Stream: https://bit.ly/Bongo-KV
Music promoted by Audio Library https://youtu.be/pDiQewAmf9Y
––––––––––––––––––––––––––––––
🎵 Track Info:
Title: Bongo by KV
Genre and Mood: Ambient + Bright
———
Big Blues by Audionautix is licensed under a Creative Commons Attribution license (https://creativecommons.org/licenses/...)
Artist: http://audionautix.com/
––––––––––––––––––––––––––––––
Music: Parasail - Silent Partner https://youtu.be/MzO4zfNO0kQ
––––––––––––––––––––––––––––––
🎵 Copyright Free Music 🎧 No Copyright Music 🎶 Youtube Audio Library
#pyspark #dataanalytics #colab
-
10:54
unravelingcode
2 years agoPYTHON Orientado a Objetos e UML | Essencial
32 -
28:18
Joram Mutenge
7 months agoPython Polars Tutorial (Part 8): Grouping and Aggregating - Analyzing and Exploring Your Data
5 -
9:50
Joram Mutenge
7 months agoPython Polars Tutorial (Part 2): DataFrame and Series Basics - Selecting Rows and Columns
9 -
8:43
Matea Vasileski
3 years agoCreate a Map of UFO Reports Using Python and Plotly in Under 10 Minutes
16 -
28:51
CodeWithYu
8 months agoHarnessing ChatGPT with Pandas: Revolutionizing Data Analysis with AI
10 -
10:14
Tech With Tim
7 months ago $0.01 earnedHow To Speed Up Pandas in Python By 150x
117 -
3:30
Tabular
11 months agoTabular Bits: Working with Athena and PySpark
1 -
1:50:58
infosectrain01
1 year agoIntroduction to Data Science | Introduction to Python | Introduction to Jupyter Notebook
34 -
6:46
PythonSimplified
1 year ago $0.10 earnedHow I Learned Python - Step by Step Roadmap for Beginners
5295 -
11:06
ZeqTech
4 months agoSQLAlchemy ORM - A NEW WAY TO CREAT COLUMNS 🆕🆕🆕
6