Boucling

Data Engineer, quelle techno apprendre ?

26 messages

Mise à jour: il y a 7 mois

1
OP
A2

Aperooaleau25

il y a 7 mois

Quels sont les priorités ?

JE

jeanfilonn

il y a 7 mois

python

OP
A2

Aperooaleau25

il y a 7 mois


python

Ouais je maitrise déjà.

Et sinon ? Talend ? Spark?

J'ai 1 an d'xp sur Talend mais avec la suppression de la version Open Source j'ai peur que ça devienne useless

P3

Prob3corps2

il y a 7 mois

SQL
VBA
PYTHON

P3

Prob3corps2

il y a 7 mois

Tes etudes deja?

OP
A2

Aperooaleau25

il y a 7 mois


SQL
VBA
PYTHON

VBA c'est useless

les deux autres ok, comment on met en valeur ses compétences python sans xp? projet perso?

OP
A2

Aperooaleau25

il y a 7 mois


Tes etudes deja?

bac +5 maths stats

j'ai 3 ans d'xp en tant que DA, dont 1 an en tant que DA/DE (j'ai fait du talend surtout)

J'hésite à passer la certif Talend

OP
A2

Aperooaleau25

il y a 7 mois

Parce qu'en vrai je voulais faire de la DS en plus d'être DA mais c'est completement bouché

Même des mecs dans ma boite qui sont des cracks en DS sont DA comme moi

OP
A2

Aperooaleau25

il y a 7 mois

Mais après le métier de DA ça reste plus stimulant que le métier de DE je trouve, ça demande + de logique et c'est ça que j'aime bien

GI

GIO612

il y a 7 mois

Prob3corps2

il y a 7 mois


VBA

Caent est pas un Commando de finance de marché donc balexent https://image.noelshack.com/fichiers/2020/44/6/1604162104-cafe0sugarent.jpg

ZA

Zahratan

il y a 7 mois

C'est quoi la dif entre Data Engineer / Data Scientist

B7

boobadu74

il y a 7 mois

T'as un bac+5 en maths pour au final être DA ? Pourquoi tu fais pas de la R&D

FR

Frisch

il y a 7 mois

Python Java Bash Azure AWS GCP Hive Spark Apache Kafka Airflow

Et c'est le minimum la

RA

Razes

il y a 7 mois

Jquery man

OP
A2

Aperooaleau25

il y a 7 mois


C'est quoi la dif entre Data Engineer / Data Scientist

Date Engineer il collecte la donnée, la nettoie, la transforme et la met à dispo pour les Data Scientist qui eux vont utiliser cette donnée pour créer des modèles de ML/DL

OP
A2

Aperooaleau25

il y a 7 mois


T'as un bac+5 en maths pour au final être DA ? Pourquoi tu fais pas de la R&D

tous les DA ont un bac +5 en maths/ingé

impossible d'être DA sans ça, ou alors très compliqué

OP
A2

Aperooaleau25

il y a 7 mois


Python Java Bash Azure AWS GCP Hive Spark Apache Kafka Airflow

Et c'est le minimum la

Le minimum

JA

japonaine

il y a 7 mois

Si tu veux faire du Big data tu dois après python, spark and un cloud provider

Mais si t'as pas de moyen d'avoir de l xp dedans tu trouveras rien. Déjà que c'est mort quand t as de l xp alors encore plus sans.
Je vois pleins d'annonces où ils demandent 8 ans de xp sur des technos agees de 6 7 ans

JU

Juliecornes

il y a 7 mois

Mais c'est pas plutôt des maths qu'il faut train ?

Et des logiciels type power BI, ou la maîtrise d'outils comme Palantir & co?

OP
A2

Aperooaleau25

il y a 7 mois


Si tu veux faire du Big data tu dois après python, spark and un cloud provider

Mais si t'as pas de moyen d'avoir de l xp dedans tu trouveras rien. Déjà que c'est mort quand t as de l xp alors encore plus sans.
Je vois pleins d'annonces où ils demandent 8 ans de xp sur des technos agees de 6 7 ans

Python c'est ok
Cloud Provider uniquement Azure

OP
A2

Aperooaleau25

il y a 7 mois


Mais c'est pas plutôt des maths qu'il faut train ?

Et des logiciels type power BI, ou la maîtrise d'outils comme Palantir & co?

PBI c'est pour être DA
Palantir je ne connais pas

FR

Frisch

il y a 7 mois

Ahi en vrai je troll mais tu vois les offres de recrutement t'as 50 lignes de techno ils sont complètement zinzolax

OP

OtariePuante

il y a 7 mois

Spark, Airflow comme tous les bouseux en startup

OP
A2

Aperooaleau25

il y a 7 mois


Ahi en vrai je troll mais tu vois les offres de recrutement t'as 50 lignes de techno ils sont complètement zinzolax

oui mais ça c'est les ESN qui mettent toutes les technos possibles et imaginables, ça veut pas dire que tu dois tout maitriser

Juste ils veulent attirer le plus de monde possible donc ils mettent tout

JU

Juliecornes

il y a 7 mois

PBI c'est pour être DA
Palantir je ne connais pas

Ah oui, je sais pas pourquoi je pensais Analyst.

Palantir c'est pour tout ce qui est data lake & co…

Du moins dans le monde de l'industrie… pour rassembler les data de l'IT et de l'OT.

OP
A2

Aperooaleau25

il y a 7 mois


Spark, Airflow comme tous les bouseux en startup

aya Ok ça va se former là dessus
Snowflake ça vaut quoi ?