Je suis incollable sur le Machine Learning (j'ai seulement le bac pourtant)

PM

PandaMTL

il y a 2 mois

Est-ce qu'il a un type de problème (Computer Vision, Speech-to-Text, NLP, ...) qui t'intéresse en particulier ? https://image.noelshack.com/fichiers/2022/02/4/1642078520-chateltonjohn.png
OP
SD

SimpleDesprit

il y a 2 mois


D'ailleurs vraie question l'OP.

J'aimerais jouer un peu sur Pytorch pour me familiariser avec l'utilisation de mon GPU pour des calculs en parrallèles (jusqu'à présent je ne travaille que sur le CPU).

Mon problème c'est que mon GPU est une Radeon RX5600 XT, donc pas pris en charge par CUDA et trop vieux pour être pris en charge par rocM (l'équivalent de CUDA pour AMD).

Est-ce que tu ne connaîtrais pas un moyen de quand même utiliser mon GPU avec PyTorch ? Je suis entrain d'essayer avec Zluda, mais je galère un peu à comprendre.

Je n'ai jamais tenté ceci. Mon GPU est compatible avec Cuda donc je me suis pas posé la question. C'est aussi un RTX Geforce

OP
SD

SimpleDesprit

il y a 2 mois


qu'est ce que tu pense du low code style n8n ?

Je m'aligne sur leur réputation dans les domaines autres que l'IA. En gros, ça ne remplacera pas un vrai dev. KNIME n'est pas mal aussi mais je trouve limité

OP
SD

SimpleDesprit

il y a 2 mois

Personne connait la distance de frechet a part les giga nerd qui ont fait de la recherche en genAI en image/video et ceux qui ont bosse sur de l'explainability a la limite (je suis celui qui en a parle, je viens juste de me faire ban). Apres je pense que l'op s'y est mis serieusement et sait malgre tout pas mal de trucs

Bah je bosse sur du XAI aussi avec SHAP et LIME

OP
SD

SimpleDesprit

il y a 2 mois


Est-ce qu'il a un type de problème (Computer Vision, Speech-to-Text, NLP, ...) qui t'intéresse en particulier ? https://image.noelshack.com/fichiers/2022/02/4/1642078520-chateltonjohn.png

Les 3 m'intéresse mais j'ai un petit beguin pour le CV

OP
SD

SimpleDesprit

il y a 2 mois

OK, j'attends vos question l'élite
PM

PandaMTL

il y a 2 mois


D'ailleurs vraie question l'OP.

J'aimerais jouer un peu sur Pytorch pour me familiariser avec l'utilisation de mon GPU pour des calculs en parrallèles (jusqu'à présent je ne travaille que sur le CPU).

Mon problème c'est que mon GPU est une Radeon RX5600 XT, donc pas pris en charge par CUDA et trop vieux pour être pris en charge par rocM (l'équivalent de CUDA pour AMD).

Est-ce que tu ne connaîtrais pas un moyen de quand même utiliser mon GPU avec PyTorch ? Je suis entrain d'essayer avec Zluda, mais je galère un peu à comprendre.

As-tu pensé à utiliser des solutions comme Amazon SageMaker Studio ?
C'est ce que j'utilise. Il y a un coût, mais rien n'est gratuit dans ce bas monde et ça apporte beaucoup de flexibilité. https://image.noelshack.com/fichiers/2022/02/4/1642078520-chateltonjohn.png

OP
SD

SimpleDesprit

il y a 2 mois

As-tu pensé à utiliser des solutions comme Amazon SageMaker Studio ?
C'est ce que j'utilise. Il y a un coût, mais rien n'est gratuit dans ce bas monde et ça apporte beaucoup de flexibilité. https://image.noelshack.com/fichiers/2022/02/4/1642078520-chateltonjohn.png

Tu bosses dans l'IA?

PM

PandaMTL

il y a 2 mois

Quel boulot as-tu au quotidien si le ML est simplement un hobby ? https://image.noelshack.com/fichiers/2022/02/4/1642078520-chateltonjohn.png
FD

FourneDamber

il y a 2 mois

tu pourrais me créer une ia génératrice d'image et de vidéo de feet de gretta thunberg ?
PM

PandaMTL

il y a 2 mois

Tu bosses dans l'IA?

J'essaie. Je passe la certification AWS Machine Learning Specialty lundi prochain.

OP
SD

SimpleDesprit

il y a 2 mois


Quel boulot as-tu au quotidien si le ML est simplement un hobby ? https://image.noelshack.com/fichiers/2022/02/4/1642078520-chateltonjohn.png

Je travaille à McDo pour le moment

OP
SD

SimpleDesprit

il y a 2 mois

J'essaie. Je passe la certification AWS Machine Learning Specialty lundi prochain.

OK, bon courage

OP
SD

SimpleDesprit

il y a 2 mois


tu pourrais me créer une ia génératrice d'image et de vidéo de feet de gretta thunberg ?

Mdr facile. T'as juste à faire du TL avec des images de feet de GT

CS

CaleconSperme

il y a 2 mois

Bah je bosse sur du XAI aussi avec SHAP et LIME

Khouya, la distance de frechet en xai c'est litteralement par exemple quand tu veux qu'un modele de vision extra performant deja puisse tourner dans un environement vraiment particulier et donc que tu veux capturer les images dont la distance de frechet par rapport au dataset est trop grand ce qui signifie que ton model "ne les comprend pas". En gros ca te sert a creer un dataset pour litteralement overfit ton model a ton environment, par exemple, une IA installee a un endroit tres particulier qui ne bougera jamais DOIT overfit cet endroit pour avoir de bons resultats et avoir un overfit saisonier. Donc rien a voir avec shapley, lime etc.. A la limite tu m'aurais parle des GAN pourquoi pas mais la kheyon non, je ne te crois plus du tout, chatgpt detected

PM

PandaMTL

il y a 2 mois

Je travaille à McDo pour le moment

Si c'est vrai, khey il faut que tu profites du boom de l'IA. Des milliards vont être déversés dans des projets IA, dans toutes les compagnies, et tes compétences seront recherchées. https://image.noelshack.com/fichiers/2022/02/4/1642078520-chateltonjohn.png

B9

Bienveillance91

il y a 2 mois

As-tu pensé à utiliser des solutions comme Amazon SageMaker Studio ?
C'est ce que j'utilise. Il y a un coût, mais rien n'est gratuit dans ce bas monde et ça apporte beaucoup de flexibilité. https://image.noelshack.com/fichiers/2022/02/4/1642078520-chateltonjohn.png

J'utilise google colab en attendant que mon GPU tombe en rade et d'en racheter un chez Nvidia.

Pour faire des petits notebooks et s'amuser c'est pas mal, mais je ne peux pas aller beaucoup plus loin

OP
SD

SimpleDesprit

il y a 2 mois

Khouya, la distance de frechet en xai c'est litteralement par exemple quand tu veux qu'un modele de vision extra performant deja puisse tourner dans un environement vraiment particulier et donc que tu veux capturer les images dont la distance de frechet par rapport au dataset est trop grand ce qui signifie que ton model "ne les comprend pas". En gros ca te sert a creer un dataset pour litteralement overfit ton model a ton environment, par exemple, une IA installee a un endroit tres particulier qui ne bougera jamais DOIT overfit cet endroit pour avoir de bons resultats et avoir un overfit saisonier. Donc rien a voir avec shapley, lime etc.. A la limite tu m'aurais parle des GAN pourquoi pas mais la kheyon non, je ne te crois plus du tout, chatgpt detected

Tu me parles d'explainability et tu me dis que ça n'a rien à voir avec SHAP ou LIME. T'es un troll en fait. Après je n'ai jamais déployé de modèle en prod donc je n'ai pas forcement eu recours à ça.

OP
SD

SimpleDesprit

il y a 2 mois

Si c'est vrai, khey il faut que tu profites du boom de l'IA. Des milliards vont être déversés dans des projets IA, dans toutes les compagnies, et tes compétences seront recherchées. https://image.noelshack.com/fichiers/2022/02/4/1642078520-chateltonjohn.png

J'espère me faire recrut. Après je crois en mes compétences techniques mais j'ai zero skill social

PM

PandaMTL

il y a 2 mois

J'utilise google colab en attendant que mon GPU tombe en rade et d'en racheter un chez Nvidia.

Pour faire des petits notebooks et s'amuser c'est pas mal, mais je ne peux pas aller beaucoup plus loin

Tu as mis combien d'oros dans ton GPU par curiosité ? Ça coute cher ces petites bêtes là. https://image.noelshack.com/fichiers/2022/02/4/1642078520-chateltonjohn.png

OP
SD

SimpleDesprit

il y a 2 mois

J'utilise google colab en attendant que mon GPU tombe en rade et d'en racheter un chez Nvidia.

Pour faire des petits notebooks et s'amuser c'est pas mal, mais je ne peux pas aller beaucoup plus loin

Sur AWS, tu as aussi des combinaisons de solution qui te reviendront moins chère mais avec un peu plus d'ingéniosité. Genre coupler des Airflow + EMR (EC2++) avec du jupyter notebooks...

CS

CaleconSperme

il y a 2 mois

Tu me parles d'explainability et tu me dis que ça n'a rien à voir avec SHAP ou LIME. T'es un troll en fait. Après je n'ai jamais déployé de modèle en prod donc je n'ai pas forcement eu recours à ça.

Yolo, tu l'entraines sur coco. Sauf que quand tu le deploies, tu te rends compte que l'environement est particulier, il y a toujours de la lumiere car installe en interieur donc lumiere artificielle, ne voit que des humains, image/camera non calibree (ca veut dire que l'image est deformee comme une gopro) donc tu veux capter les pires images pour que ton model soit overfit. Et pour capter ces pires images, tu prends les activations intermediaires et tu calcules la distance de frechet avec ces meme activations intermediaires mais venant de coco. Et si ta distance est plus grande qu'un certain threshold, tu gardes ces images. Et vu que la distance de frechet est derivable et qu'en plus t'as les predictions, tu peux effecturer des analyses d'interpretabilite voila mon kheyon. C'est trop precis pour que tu puisses le savoir sans avoir recours a chatgpt

CS

CaleconSperme

il y a 2 mois

J'espère me faire recrut. Après je crois en mes compétences techniques mais j'ai zero skill social

Tu as quel age, tu dis que t'as que le bac mais t'as quoi comme bac exactement?

OP
SD

SimpleDesprit

il y a 2 mois

Yolo, tu l'entraines sur coco. Sauf que quand tu le deploies, tu te rends compte que l'environement est particulier, il y a toujours de la lumiere car installe en interieur donc lumiere artificielle, ne voit que des humains, image/camera non calibree (ca veut dire que l'image est deformee comme une gopro) donc tu veux capter les pires images pour que ton model soit overfit. Et pour capter ces pires images, tu prends les activations intermediaires et tu calcules la distance de frechet avec ces meme activations intermediaires mais venant de coco. Et si ta distance est plus grande qu'un certain threshold, tu gardes ces images. Et vu que la distance de frechet est derivable et qu'en plus t'as les predictions, tu peux effecturer des analyses d'interpretabilite voila mon kheyon. C'est trop precis pour que tu puisses le savoir sans avoir recours a chatgpt

Connerie. Avant ChatGPT on avait un cerveau et après on a toujours un cerveau.

OP
SD

SimpleDesprit

il y a 2 mois

Tu as quel age, tu dis que t'as que le bac mais t'as quoi comme bac exactement?

Bac S, 30 ans

OP
SD

SimpleDesprit

il y a 2 mois

Pour rappel, ça 6 mois que je bosse sur le ML
B9

Bienveillance91

il y a 2 mois

Tu as mis combien d'oros dans ton GPU par curiosité ? Ça coute cher ces petites bêtes là. https://image.noelshack.com/fichiers/2022/02/4/1642078520-chateltonjohn.png

Je ne sais plus, entre 200€ et 300€ je crois. Je l'ai acheté en 2020, je n'avais pas prévu d'utiliser pytorch sur mon ordi à cette époque (et puis je ne connaissais pas les subtilités de cuda et rocM)

PM

PandaMTL

il y a 2 mois

L'op, quel à été le concept de ML que tu as eu le plus de mal à assimiler ? https://image.noelshack.com/fichiers/2022/02/4/1642078520-chateltonjohn.png
OP
SD

SimpleDesprit

il y a 2 mois


L'op, quel à été le concept de ML que tu as eu le plus de mal à assimiler ? https://image.noelshack.com/fichiers/2022/02/4/1642078520-chateltonjohn.png

Attentions et les graph neural networks

CS

CaleconSperme

il y a 2 mois

Bac S, 30 ans

Je bosse dans le domaine, je te conseille de:
- si tu comptes rester en france, etudies puis vas t'en a l'etranger
- va t'en a l'etranger directement si tu trouves du taf avec des certifs

La france est absolument cuite mon khey. Absolument cuite

OP
SD

SimpleDesprit

il y a 2 mois

Je bosse dans le domaine, je te conseille de:
- si tu comptes rester en france, etudies puis vas t'en a l'etranger
- va t'en a l'etranger directement si tu trouves du taf avec des certifs

La france est absolument cuite mon khey. Absolument cuite

Cuite par rapport au salaire?

PM

PandaMTL

il y a 2 mois

Je bosse dans le domaine, je te conseille de:
- si tu comptes rester en france, etudies puis vas t'en a l'etranger
- va t'en a l'etranger directement si tu trouves du taf avec des certifs

La france est absolument cuite mon khey. Absolument cuite

Il n'y a pas de missions dans ce domaine en France ? https://image.noelshack.com/fichiers/2022/02/4/1642078520-chateltonjohn.png
Quel est le problème ?

CS

CaleconSperme

il y a 2 mois

Cuite par rapport au salaire?

Le salaire n'est que le reflet de l'economie francaise qui elle meme est le reflet de sa societe et de son industrie. L'industrie francaise n'a pas de constance economique assez importante pour investir serieusement dans une transformation de l'IA comme la transformation digitale qui a eu lieu il y a 15-10 ans avec l'emergence des solutions cloud (les fameux "nous passons sous google suite" pour les non tech et les "migration serverless" pour les techs).
Les Benjamin Dubreu, openclassroom etc.. ont contribue a forme enorment de personnes perdues qui ont innonde un marche deja sature.

PM

PandaMTL

il y a 2 mois

Le salaire n'est que le reflet de l'economie francaise qui elle meme est le reflet de sa societe et de son industrie. L'industrie francaise n'a pas de constance economique assez importante pour investir serieusement dans une transformation de l'IA comme la transformation digitale qui a eu lieu il y a 15-10 ans avec l'emergence des solutions cloud (les fameux "nous passons sous google suite" pour les non tech et les "migration serverless" pour les techs), aujourd'hui elle se concentre sur de "l'IA bashing", investir un minimum en IA parce que c'est trendy, sauf qu'elle investi dans des gens pas cher donc peu competents.
Les Benjamin Dubreu, openclassroom etc.. ont contribue a forme enorment de personnes perdues qui ont innonde un marche deja sature.

Est-ce que ça ne pourrait pas un peu bouger avec les milliards d'investissements prévus dans les années à venir ?
Si non, il est aussi possible de trouver des missions dans des compagnies étrangères en télétravail depuis la France.

Comment tu t'en sors toi ? https://image.noelshack.com/fichiers/2022/02/4/1642078520-chateltonjohn.png

SK

skywear

il y a 2 mois

Explique les différences entre GRPO DPO et PPO
CS

CaleconSperme

il y a 2 mois

Est-ce que ça ne pourrait pas un peu bouger avec les milliards d'investissements prévus dans les années à venir ?
Si non, il est aussi possible de trouver des missions dans des compagnies étrangères en télétravail depuis la France.

Comment tu t'en sors toi ? https://image.noelshack.com/fichiers/2022/02/4/1642078520-chateltonjohn.png

Pendant le covid, 15Md€ ont ete envoye au secteur de l'aeronautique francais, parmis ces 15Md, un truc style 9 ou 10 a Airbus seulement, qui les a utilise pour compenser financierement les "licenciements".
Autrement dit, demain tu as une entreprise, si au bout de 5 ans tu as toujours le meme montant de profit net a la fin de l'annee, tu seras tres enclin a en investir une partie pour developer ton activiter ou l'optimiser. L'industrie francaise est a le cul entre deux chaises ici: les taxes sont horribles, les gens competents sont tous barres, les boites etrangeres sont la et font du tres bon travail. La taxation des voitures chinoises est un exemple parfait.

De mon cote, j'ai quitte la France il y a 6 ans, j'ai bosse en IA (recherche, lead recherche, puis lead technique etc..) et la je suis justement responsable de la transformation d'une grosse boite (>10k employes). Donc quand je parle a quelqu'un qui a son nom au conseil d'adminsitration de la boite je sais directement si cette boite veut investir dans l'ia ou non. Et la France est dans un vide absolument abyssale dans ce domaine.

WP

WilliamPill

il y a 2 mois

La différence entre machine learning et deep learning ?

PM

PandaMTL

il y a 2 mois

Pendant le covid, 15Md€ ont ete envoye au secteur de l'aeronautique francais, parmis ces 15Md, un truc style 9 ou 10 a Airbus seulement, qui les a utilise pour compenser financierement les "licenciements".
Autrement dit, demain tu as une entreprise, si au bout de 5 ans tu as toujours le meme montant de profit net a la fin de l'annee, tu seras tres enclin a en investir une partie pour developer ton activiter ou l'optimiser. L'industrie francaise est a le cul entre deux chaises ici: les taxes sont horribles, les gens competents sont tous barres, les boites etrangeres sont la et font du tres bon travail. La taxation des voitures chinoises est un exemple parfait.

De mon cote, j'ai quitte la France il y a 6 ans, j'ai bosse en IA (recherche, lead recherche, puis lead technique etc..) et la je suis justement responsable de la transformation d'une grosse boite (>10k employes). Donc quand je parle a quelqu'un qui a son nom au conseil d'adminsitration de la boite je sais directement si cette boite veut investir dans l'ia ou non. Et la France est dans un vide absolument abyssale dans ce domaine.

Tu caches bien ton jeu "CaleconSperme". Merci pour ton retour d'expérience.

OP
SD

SimpleDesprit

il y a 2 mois

Le topic n'etait plus actif. Bon je up

OP
SD

SimpleDesprit

il y a 2 mois


La différence entre machine learning et deep learning ?

DL est une branche du ML. ML c'est plus vaste et englobe les algorithmes tels que les SVM, DT, RF, ... alors que le DL n'utilise que des réseaux neuronaux.

OP
SD

SimpleDesprit

il y a 2 mois


Explique les différences entre GRPO DPO et PPO

C'est du reinforcement ça. Je n'ai jamais fait mais j'ai une idée.

WA

waeko

il y a 2 mois

trade off biais variance?

OP
SD

SimpleDesprit

il y a 2 mois


trade off biais variance?

Classique: overfitting / underfitting

WA

waeko

il y a 2 mois

c'est quoi la variance d'un modele?

OP
SD

SimpleDesprit

il y a 2 mois


c'est quoi la variance d'un modele?

Classique: sensibilité du modèle aux variations dans les données d'entraînement

OP
SD

SimpleDesprit

il y a 2 mois

Classique: sensibilité du modèle aux variations dans les données d'entraînement

C'est lié à la robustesse

WA

waeko

il y a 2 mois

Classique: sensibilité du modèle aux variations dans les données d'entraînement

oui

qu'elle modèle parmi : regression lineaire, SVM, regression logistique, arbre de decision, reseau de neurone, fais l'hypothese:
l'erreur entre le label y et la prediction suis une loi normale.

OP
SD

SimpleDesprit

il y a 2 mois

oui

qu'elle modèle parmi : regression lineaire, SVM, regression logistique, arbre de decision, reseau de neurone, fais l'hypothese:
l'erreur entre le label y et la prediction suis une loi normale.

Question interessante. Je dirai la regression lineaire par elimination

WA

waeko

il y a 2 mois

Question interessante. Je dirai la regression lineaire par elimination

oui, regarde maximun likelyhood estimation for regression linear si tu veux la preuve

tu connais xgboost? tu connais les regularisation l1 l2 ? si oui alors comment appliquer la régularisation l1/2 aux gradient boosted trees?

OP
SD

SimpleDesprit

il y a 2 mois

oui, regarde maximun likelyhood estimation for regression linear si tu veux la preuve

tu connais xgboost? tu connais les regularisation l1 l2 ? si oui alors comment appliquer la régularisation l1/2 aux gradient boosted trees?

Je connais ces regularisation mais je les ai utilisé uniquement sur les ANNs. Je connais le Xgboost