Je suis incollable sur le Machine Learning (j'ai seulement le bac pourtant)
SimpleDesprit
il y a 2 mois
D'ailleurs vraie question l'OP.J'aimerais jouer un peu sur Pytorch pour me familiariser avec l'utilisation de mon GPU pour des calculs en parrallèles (jusqu'à présent je ne travaille que sur le CPU).
Mon problème c'est que mon GPU est une Radeon RX5600 XT, donc pas pris en charge par CUDA et trop vieux pour être pris en charge par rocM (l'équivalent de CUDA pour AMD).
Est-ce que tu ne connaîtrais pas un moyen de quand même utiliser mon GPU avec PyTorch ? Je suis entrain d'essayer avec Zluda, mais je galère un peu à comprendre.
Je n'ai jamais tenté ceci. Mon GPU est compatible avec Cuda donc je me suis pas posé la question. C'est aussi un RTX Geforce
SimpleDesprit
il y a 2 mois
qu'est ce que tu pense du low code style n8n ?
Je m'aligne sur leur réputation dans les domaines autres que l'IA. En gros, ça ne remplacera pas un vrai dev. KNIME n'est pas mal aussi mais je trouve limité
SimpleDesprit
il y a 2 mois
Personne connait la distance de frechet a part les giga nerd qui ont fait de la recherche en genAI en image/video et ceux qui ont bosse sur de l'explainability a la limite (je suis celui qui en a parle, je viens juste de me faire ban). Apres je pense que l'op s'y est mis serieusement et sait malgre tout pas mal de trucs
Bah je bosse sur du XAI aussi avec SHAP et LIME
SimpleDesprit
il y a 2 mois
PandaMTL
il y a 2 mois
D'ailleurs vraie question l'OP.J'aimerais jouer un peu sur Pytorch pour me familiariser avec l'utilisation de mon GPU pour des calculs en parrallèles (jusqu'à présent je ne travaille que sur le CPU).
Mon problème c'est que mon GPU est une Radeon RX5600 XT, donc pas pris en charge par CUDA et trop vieux pour être pris en charge par rocM (l'équivalent de CUDA pour AMD).
Est-ce que tu ne connaîtrais pas un moyen de quand même utiliser mon GPU avec PyTorch ? Je suis entrain d'essayer avec Zluda, mais je galère un peu à comprendre.
FourneDamber
il y a 2 mois
PandaMTL
il y a 2 mois
Tu bosses dans l'IA?
J'essaie. Je passe la certification AWS Machine Learning Specialty lundi prochain.
SimpleDesprit
il y a 2 mois
J'essaie. Je passe la certification AWS Machine Learning Specialty lundi prochain.
OK, bon courage
SimpleDesprit
il y a 2 mois
tu pourrais me créer une ia génératrice d'image et de vidéo de feet de gretta thunberg ?
Mdr facile. T'as juste à faire du TL avec des images de feet de GT
CaleconSperme
il y a 2 mois
Bah je bosse sur du XAI aussi avec SHAP et LIME
Khouya, la distance de frechet en xai c'est litteralement par exemple quand tu veux qu'un modele de vision extra performant deja puisse tourner dans un environement vraiment particulier et donc que tu veux capturer les images dont la distance de frechet par rapport au dataset est trop grand ce qui signifie que ton model "ne les comprend pas". En gros ca te sert a creer un dataset pour litteralement overfit ton model a ton environment, par exemple, une IA installee a un endroit tres particulier qui ne bougera jamais DOIT overfit cet endroit pour avoir de bons resultats et avoir un overfit saisonier. Donc rien a voir avec shapley, lime etc.. A la limite tu m'aurais parle des GAN pourquoi pas mais la kheyon non, je ne te crois plus du tout, chatgpt detected
Bienveillance91
il y a 2 mois
J'utilise google colab en attendant que mon GPU tombe en rade et d'en racheter un chez Nvidia.
Pour faire des petits notebooks et s'amuser c'est pas mal, mais je ne peux pas aller beaucoup plus loin
SimpleDesprit
il y a 2 mois
Khouya, la distance de frechet en xai c'est litteralement par exemple quand tu veux qu'un modele de vision extra performant deja puisse tourner dans un environement vraiment particulier et donc que tu veux capturer les images dont la distance de frechet par rapport au dataset est trop grand ce qui signifie que ton model "ne les comprend pas". En gros ca te sert a creer un dataset pour litteralement overfit ton model a ton environment, par exemple, une IA installee a un endroit tres particulier qui ne bougera jamais DOIT overfit cet endroit pour avoir de bons resultats et avoir un overfit saisonier. Donc rien a voir avec shapley, lime etc.. A la limite tu m'aurais parle des GAN pourquoi pas mais la kheyon non, je ne te crois plus du tout, chatgpt detected
Tu me parles d'explainability et tu me dis que ça n'a rien à voir avec SHAP ou LIME. T'es un troll en fait. Après je n'ai jamais déployé de modèle en prod donc je n'ai pas forcement eu recours à ça.
SimpleDesprit
il y a 2 mois
PandaMTL
il y a 2 mois
SimpleDesprit
il y a 2 mois
J'utilise google colab en attendant que mon GPU tombe en rade et d'en racheter un chez Nvidia.
Pour faire des petits notebooks et s'amuser c'est pas mal, mais je ne peux pas aller beaucoup plus loin
Sur AWS, tu as aussi des combinaisons de solution qui te reviendront moins chère mais avec un peu plus d'ingéniosité. Genre coupler des Airflow + EMR (EC2++) avec du jupyter notebooks...
CaleconSperme
il y a 2 mois
Tu me parles d'explainability et tu me dis que ça n'a rien à voir avec SHAP ou LIME. T'es un troll en fait. Après je n'ai jamais déployé de modèle en prod donc je n'ai pas forcement eu recours à ça.
Yolo, tu l'entraines sur coco. Sauf que quand tu le deploies, tu te rends compte que l'environement est particulier, il y a toujours de la lumiere car installe en interieur donc lumiere artificielle, ne voit que des humains, image/camera non calibree (ca veut dire que l'image est deformee comme une gopro) donc tu veux capter les pires images pour que ton model soit overfit. Et pour capter ces pires images, tu prends les activations intermediaires et tu calcules la distance de frechet avec ces meme activations intermediaires mais venant de coco. Et si ta distance est plus grande qu'un certain threshold, tu gardes ces images. Et vu que la distance de frechet est derivable et qu'en plus t'as les predictions, tu peux effecturer des analyses d'interpretabilite voila mon kheyon. C'est trop precis pour que tu puisses le savoir sans avoir recours a chatgpt
CaleconSperme
il y a 2 mois
J'espère me faire recrut. Après je crois en mes compétences techniques mais j'ai zero skill social
Tu as quel age, tu dis que t'as que le bac mais t'as quoi comme bac exactement?
SimpleDesprit
il y a 2 mois
Yolo, tu l'entraines sur coco. Sauf que quand tu le deploies, tu te rends compte que l'environement est particulier, il y a toujours de la lumiere car installe en interieur donc lumiere artificielle, ne voit que des humains, image/camera non calibree (ca veut dire que l'image est deformee comme une gopro) donc tu veux capter les pires images pour que ton model soit overfit. Et pour capter ces pires images, tu prends les activations intermediaires et tu calcules la distance de frechet avec ces meme activations intermediaires mais venant de coco. Et si ta distance est plus grande qu'un certain threshold, tu gardes ces images. Et vu que la distance de frechet est derivable et qu'en plus t'as les predictions, tu peux effecturer des analyses d'interpretabilite voila mon kheyon. C'est trop precis pour que tu puisses le savoir sans avoir recours a chatgpt
Connerie. Avant ChatGPT on avait un cerveau et après on a toujours un cerveau.
SimpleDesprit
il y a 2 mois
Tu as quel age, tu dis que t'as que le bac mais t'as quoi comme bac exactement?
Bac S, 30 ans
SimpleDesprit
il y a 2 mois
Bienveillance91
il y a 2 mois
CaleconSperme
il y a 2 mois
Bac S, 30 ans
Je bosse dans le domaine, je te conseille de:
- si tu comptes rester en france, etudies puis vas t'en a l'etranger
- va t'en a l'etranger directement si tu trouves du taf avec des certifs
La france est absolument cuite mon khey. Absolument cuite
SimpleDesprit
il y a 2 mois
Je bosse dans le domaine, je te conseille de:
- si tu comptes rester en france, etudies puis vas t'en a l'etranger
- va t'en a l'etranger directement si tu trouves du taf avec des certifsLa france est absolument cuite mon khey. Absolument cuite
Cuite par rapport au salaire?
PandaMTL
il y a 2 mois
Je bosse dans le domaine, je te conseille de:
- si tu comptes rester en france, etudies puis vas t'en a l'etranger
- va t'en a l'etranger directement si tu trouves du taf avec des certifsLa france est absolument cuite mon khey. Absolument cuite
CaleconSperme
il y a 2 mois
Cuite par rapport au salaire?
Le salaire n'est que le reflet de l'economie francaise qui elle meme est le reflet de sa societe et de son industrie. L'industrie francaise n'a pas de constance economique assez importante pour investir serieusement dans une transformation de l'IA comme la transformation digitale qui a eu lieu il y a 15-10 ans avec l'emergence des solutions cloud (les fameux "nous passons sous google suite" pour les non tech et les "migration serverless" pour les techs).
Les Benjamin Dubreu, openclassroom etc.. ont contribue a forme enorment de personnes perdues qui ont innonde un marche deja sature.
PandaMTL
il y a 2 mois
Le salaire n'est que le reflet de l'economie francaise qui elle meme est le reflet de sa societe et de son industrie. L'industrie francaise n'a pas de constance economique assez importante pour investir serieusement dans une transformation de l'IA comme la transformation digitale qui a eu lieu il y a 15-10 ans avec l'emergence des solutions cloud (les fameux "nous passons sous google suite" pour les non tech et les "migration serverless" pour les techs), aujourd'hui elle se concentre sur de "l'IA bashing", investir un minimum en IA parce que c'est trendy, sauf qu'elle investi dans des gens pas cher donc peu competents.
Les Benjamin Dubreu, openclassroom etc.. ont contribue a forme enorment de personnes perdues qui ont innonde un marche deja sature.
skywear
il y a 2 mois
CaleconSperme
il y a 2 mois
Pendant le covid, 15Md€ ont ete envoye au secteur de l'aeronautique francais, parmis ces 15Md, un truc style 9 ou 10 a Airbus seulement, qui les a utilise pour compenser financierement les "licenciements".
Autrement dit, demain tu as une entreprise, si au bout de 5 ans tu as toujours le meme montant de profit net a la fin de l'annee, tu seras tres enclin a en investir une partie pour developer ton activiter ou l'optimiser. L'industrie francaise est a le cul entre deux chaises ici: les taxes sont horribles, les gens competents sont tous barres, les boites etrangeres sont la et font du tres bon travail. La taxation des voitures chinoises est un exemple parfait.
De mon cote, j'ai quitte la France il y a 6 ans, j'ai bosse en IA (recherche, lead recherche, puis lead technique etc..) et la je suis justement responsable de la transformation d'une grosse boite (>10k employes). Donc quand je parle a quelqu'un qui a son nom au conseil d'adminsitration de la boite je sais directement si cette boite veut investir dans l'ia ou non. Et la France est dans un vide absolument abyssale dans ce domaine.
WilliamPill
il y a 2 mois
La différence entre machine learning et deep learning ?
PandaMTL
il y a 2 mois
Pendant le covid, 15Md€ ont ete envoye au secteur de l'aeronautique francais, parmis ces 15Md, un truc style 9 ou 10 a Airbus seulement, qui les a utilise pour compenser financierement les "licenciements".
Autrement dit, demain tu as une entreprise, si au bout de 5 ans tu as toujours le meme montant de profit net a la fin de l'annee, tu seras tres enclin a en investir une partie pour developer ton activiter ou l'optimiser. L'industrie francaise est a le cul entre deux chaises ici: les taxes sont horribles, les gens competents sont tous barres, les boites etrangeres sont la et font du tres bon travail. La taxation des voitures chinoises est un exemple parfait.De mon cote, j'ai quitte la France il y a 6 ans, j'ai bosse en IA (recherche, lead recherche, puis lead technique etc..) et la je suis justement responsable de la transformation d'une grosse boite (>10k employes). Donc quand je parle a quelqu'un qui a son nom au conseil d'adminsitration de la boite je sais directement si cette boite veut investir dans l'ia ou non. Et la France est dans un vide absolument abyssale dans ce domaine.
Tu caches bien ton jeu "CaleconSperme". Merci pour ton retour d'expérience.
SimpleDesprit
il y a 2 mois
Le topic n'etait plus actif. Bon je up
SimpleDesprit
il y a 2 mois
La différence entre machine learning et deep learning ?
DL est une branche du ML. ML c'est plus vaste et englobe les algorithmes tels que les SVM, DT, RF, ... alors que le DL n'utilise que des réseaux neuronaux.
SimpleDesprit
il y a 2 mois
Explique les différences entre GRPO DPO et PPO
C'est du reinforcement ça. Je n'ai jamais fait mais j'ai une idée.
waeko
il y a 2 mois
trade off biais variance?
SimpleDesprit
il y a 2 mois
trade off biais variance?
Classique: overfitting / underfitting
waeko
il y a 2 mois
c'est quoi la variance d'un modele?
SimpleDesprit
il y a 2 mois
c'est quoi la variance d'un modele?
Classique: sensibilité du modèle aux variations dans les données d'entraînement
SimpleDesprit
il y a 2 mois
Classique: sensibilité du modèle aux variations dans les données d'entraînement
C'est lié à la robustesse
waeko
il y a 2 mois
Classique: sensibilité du modèle aux variations dans les données d'entraînement
oui
qu'elle modèle parmi : regression lineaire, SVM, regression logistique, arbre de decision, reseau de neurone, fais l'hypothese:
l'erreur entre le label y et la prediction suis une loi normale.
SimpleDesprit
il y a 2 mois
oui
qu'elle modèle parmi : regression lineaire, SVM, regression logistique, arbre de decision, reseau de neurone, fais l'hypothese:
l'erreur entre le label y et la prediction suis une loi normale.
Question interessante. Je dirai la regression lineaire par elimination
waeko
il y a 2 mois
Question interessante. Je dirai la regression lineaire par elimination
oui, regarde maximun likelyhood estimation for regression linear si tu veux la preuve
tu connais xgboost? tu connais les regularisation l1 l2 ? si oui alors comment appliquer la régularisation l1/2 aux gradient boosted trees?
SimpleDesprit
il y a 2 mois
oui, regarde maximun likelyhood estimation for regression linear si tu veux la preuve
tu connais xgboost? tu connais les regularisation l1 l2 ? si oui alors comment appliquer la régularisation l1/2 aux gradient boosted trees?
Je connais ces regularisation mais je les ai utilisé uniquement sur les ANNs. Je connais le Xgboost
PandaMTL
il y a 2 mois