Reprise du message précédent :
Excellente idée  

Les aventures bizarres d'un data scientist à Shanghai.

On en redemande.  

Le skip connections dans un auto-encoder, c'est une idée de merde non ?  
 
Le truc reconstruit parfaitement le jeu de test mais aussi le jeu des outliers, j'ai l'impression que le network fait + / - l'identité, à cause des skip connections

Elles skippent le bottleneck?  

 
C'est le head of AI qui a codé ça donc j'espère que non  

Bonjour à tous j'ai 33 ans, célibataire et libre comme l'air! Et de retour chez mes parents depuis peu.    
J'ai travaillé 8 ans en ingénierie financière puis j'ai tenté de lancé une affaire avec 3 personnes mais ça à capoté.    
Et maintenant je suis en pleine phase de réorientation et idéalement j'aimerais devenir data scientist #naif .  
Mais j'ai bien compris que cela demandait des connaissances poussées en machine learning et en programmation et que je n'ai probablement pas le niveau actuellement (peu être un jour?).
J'ai touché à pas mal de langage sans être expert (python, vba, html, php, sql, r, matlab à l'époque) et ai une grande expérience de "programmation" mais dans des problématiques de gestion de portefeuille. J'ai également suivi pas mal de petite formation en ligne en machine learning (knn, arbres, réseaux de neurones) SANS mener à bien de vrais projets à ces sujets (pas le projet pour prédire les morts du Titanic et ou classifier les fleurs d'iris). Et on peut dire que mon niveau en statistiques et optimisation est correcte mais en maths pure je suis un rigolo.  
Est-ce que vous pensé que mon projet est possible et si oui est-ce que vous pensez que  
- je dois refaire une formation, et si vous avez un exemple n'hésitez pas (j'en ai repéré mais je ne sais pas ce que cela vaut)?  
- passer par un métier plus accessible pour moi(on parle souvent de data analyst comme tremplin mais ça m'a l'air très éloigné car y a 0 machine learning dedans et beaucoup de visu)?
- trouver un autre projet?
Merci d'avance pour vos réponses!

 
C’est con, vu que ça n’est absolument pas ton but    

 
On nous vole notre travail
 
Pas besoin d'être un ouf en maths pour être data scientist orienté business, tkt.
 
Sinon la période est quand même tumultueuse mais sinon vu que tu as de l'expérience pro, franchement de l'auto-formation en ligne en SQL/Python/ML et tu peux candidater dans n'importe quelle boite de consulting en data science.
 
Je te promets pas que dès le début tu feras du ML mais au début des compétences en SQL sont suffisants pour des premières missions et petit à petit tu te formes.
 
Enfin je dis ça car j'ai été dans le conseil et je voyais beaucoup de cas comme le tien et ça a souvent bien marché pour eux ensuite.

 
ou une BD au titre : L'arabe Le data scientist du futur
Tome 1 : De mon DS raté à mon diplôme mérité
Tome 2 : Start-Up SG-1 (en cours d'écriture)

Fixed

Je vois que mon idée de BD plait et que mes 30% de rémunération en tant que provider de l’idée vont bien mettre du beurre dans mes épinards  

 
El famoso head of AI a mis des skip connections là où il fallait pas  

 
Deux options s’offrent à toi:
 
1- Tu pointes son erreur de débutant et demande son poste et son salaire    
2- Tu dis rien et tout le monde pense que c’est grâce à lui que ça tourne correctement    
 
Il y a d’autres options mais elles sont moins fun pour la BD a paraître  

Ouais pense à la BD quand tu prends tes décisions  

Franchement c'est compliqué, mes outliers ressemblent beaucoup aux inliers quand même. Le réseau a l'air de savoir tout reconstruire, c'est la mer noire là  

 
Si t'as des bases en maths et que tu sais programmer ça passe large, si tu peux te permettre de perdre 1 année, y'a pas mal de M2 qui t'ouvriront plein de portes en data science

Je vois pas trop ce que c'est ton "ingénierie financière" exactement.

Mais si t'as déjà implémenté des algo d'opti / fais de la programmation en maths appli hors ML, avec un background technique, t'as un meilleur niveau que 80% des candidats.

omg jviens de capter ce qu'il a fait
 
Le mec a mis des skip connections entre les layers de l'encoder et celles du decoder, pas étonnant que ça reconstruise presque parfaitement vu que tu files l'entrée à la dernière couche      
 
Je fais quoi, je garde pour moi ou je l'assassine publiquement ?  
 
Genre le dernier block c'est  
 

 
avec d1 la toute première convolution en entrée  

Vous ne trouverez jamais pire que ça.

Ni l'un ni l'autre, tu lui en parles d'abord en prive, c'est plus classe et peut-etre que tu as loupé quelque chose

 
Non j'ai rien loupé, j'ai vérifié avec le graphe (d'ailleurs super pratique le tensorflow.keras.utils.plot_model) et oui c'est ce que j'ai fait, s'agirait pas de se froisser avec un collègue dès le début  
 
Bon 23h20 j'arrête de bosser, à demain  

 
C’est un U-net en fait  

Même en réduisant le nombre de neurones du bottleneck ?
Édit : bah non du coup tout va bien  

Ca y ressemble, mais pas utilisé pour de la segmentation visiblement

Mes outliers des fois c'est juste une image normale un peu rognée sur la gauche ou la droite, si le réseau est bien entraîné ça devrait pas lui poser de pb non ?

Merci pour vos réponses, je vais commencer à bombarder les candidatures. Sur un malentendu ça va peut être passer.  

Je suis pas un spécialiste mais si c’est un problème de cadrage je pense pas qu’un auto-encodeur s’en sorte. L’AE va capter les images grainées parce que l’encodage décodage va réduire la qualité sur une photo propre mais pas sur une photo déjà degueux, mais je vois pas comment il discernerait une photo tronquée d’une pas tronquée. Mais bon, le ML, parfois ça fonctionne on sait pas pourquoi. L’inverse aussi d’ailleurs.  
 
Va falloir mettre plusieurs algos en parallèle, ou en série : un pour détecter le grain, un pour détecter un défaut de cadrage,... Pour le défaut de cadrage un algo de clustering ça fonctionnerait pas pour trouver déterminer des clusters « bien cadres » et « mal cadrés » ?
 
 

C'est la mega merde
 
Merci pour ta rźponse jregarde ça ASAP

Attends je dis peut-être que des conneries, je veux pas être responsable de ta déchéance au sein de ta boîte    
 
Quoique, pour la bd  

 
J'étais dans ton cas il y a 3 ans (j'en ai 34 now), avec encore moins de bagage en prog donc j'ai coché la case master pour ma reconversion.  
C'est tout à fait faisable à mon sens, surtout en cabinet de conseil. Tu feras peut-être pas de trucs grandioses au début mais ça te fera la main.
Hésite pas si tu as des questions.

 
3 ans plus tard, c’est mieux?    

Je voulais dire que j'ai initié ma réflexion sur une possible reconversion il y a trois ans.
Ma position est un peu particulière : la formation m'a pris deux ans, puis changement de poste au sein de ma boîte acté pour janvier 2021 (gros retard du à l'impact covid).
Mais entre temps j'ai fait pas mal de projets liés au ML.

Du coup ça m'intéresserait de savoir quelle était ta profession initiale, quel master tu as passé et enfin quel poste exerces tu actuellement (si c'est privé n'hésite pas à MP)?  
ça ne me freine pas tu tout de faire des taches peu grandioses et de redevoir faire mes preuves. Je préfère ça que d'avoir des projets trop ambitieux et me ch... dessus.
edit : j'ai pas mal de réponse en filtrant sur ton pseudo

 
Putain bon courage, c'est là que je me dis que j'ai de la chance d'être tombé sur une boîte sérieuse. Y a pas des software engineer a côté qui bossent correctement à partir de vos notebook ou bien c'est le code de prod ? Ça me paraît ouf les méthodes de ta boîte

Prod:

Heureusement qu’il est bien payé pour ces conneries  

 
   
 
En plus je sais pas pourquoi ils continuent de me staff sur des projets de merde en dehors de mon spectre de compétence (qui est assez restreint bon ok ). Littéralement jpourrais upgrade leur solution ML mais non faut que je fasse un truc impossible avec leurs outliers de merde ptn    
 
Jme prends des coups de pression tout le week-end  

 
Parce qu’en plus tu bosses le week-end?

 
Jfinis entre 22h et minuit aussi  

17h30 à Singapour et toujours pas de nouvelles de NC, je préviens les secours  

C'est la merde  
 
Y'a rien qui marche  
 
Par contre ce que j'ai fait ça marche pour d'autre tâches mais bon la CHANCE c'est pas moi qui récupérera les lauriers
 
AH et jdois faire des slides sur mon projet pour les investisseurs, bah oui bah bien sûr