{"id":1872,"date":"2017-01-18T14:30:38","date_gmt":"2017-01-18T12:30:38","guid":{"rendered":"http:\/\/variances.eu\/?p=1872"},"modified":"2020-04-29T10:31:32","modified_gmt":"2020-04-29T08:31:32","slug":"la-chevauchee-des-algorithmes","status":"publish","type":"post","link":"https:\/\/variances.eu\/?p=1872","title":{"rendered":"La chevauch\u00e9e des algorithmes"},"content":{"rendered":"

Je coordonne et j’anime environ 60 heures de cours et travaux pratiques \u00e0 l’ENSAE chaque ann\u00e9e depuis trois ans et la cr\u00e9ation de la voie datascience. Si vous allez sur mon site<\/a><\/em><\/span>, vous d\u00e9couvrirez que la plupart de ces heures s’appuient sur des exercices \u00e9crits sous formes de notebooks et qu’une bonne partie fonctionne par paire, un \u00e9nonc\u00e9, une correction, d’autres contiennent la correction des examens, d’autres r\u00e9pondent \u00e0 des questions d’\u00e9tudiants, d’autres…<\/p>\n

Le notebook est apparu il y a une dizaine d’ann\u00e9es et est r\u00e9cemment devenu populaire sous le nom Jupyter. Un notebook<\/a><\/em><\/span> Jupyter est un endroit o\u00f9 on \u00e9crit du texte, des formules, du code et o\u00f9 on garde la trace des graphiques et des sorties que ces petits bouts de code ont produits. C’est m\u00eame un lieu o\u00f9 l’on peut ins\u00e9rer une carte interactive pour zoomer ou d\u00e9-zoomer \u00e0 volont\u00e9. C’est un outil qui a rapidement trouv\u00e9 son public. Rares sont les professeurs de math\u00e9matiques ou d’informatique qui n’ont pas de notebooks d’autant plus que les \u00e9tudiants peuvent les t\u00e9l\u00e9charger, les ex\u00e9cuter, que tout le monde peut ais\u00e9ment les convertir en PDF, html ou pr\u00e9sentations.<\/p>\n

Essayez, allez sur un moteur de recherche, \u00e9crivez le nom d’un professeur, d’une universit\u00e9 suivi de notebook et GitHub… (berkely notebook github<\/a><\/em><\/span>). C’est un sacr\u00e9 chemin parcouru depuis les polycopi\u00e9s qui sentaient l’alcool ! Ils furent les premi\u00e8res reproductions de support p\u00e9dagogique qu’il m’a \u00e9t\u00e9 donn\u00e9 de d\u00e9couvrir. Cela vous donne d’ailleurs une id\u00e9e de mon \u00e2ge. J’ai d\u00e9couvert l’\u00e9cole, j’ai v\u00e9cu la transition du polycopi\u00e9 vers la photocopie. Un pas fou !<\/p>\n

Et depuis je mets en ligne tout ce que je produis pour mes cours, plus d’une centaine de notebooks. Tout est accessible depuis GitHub<\/a><\/em><\/span>, le lieu des projets open source, tout est compil\u00e9 en plusieurs sites web.<\/p>\n

Lorsque je cr\u00e9e un notebook, je ne l’ajoute pas simplement \u00e0 la liste d\u00e9j\u00e0 existante, s’il est long, je lui ajoute un menu pour aider \u00e0 la navigation. Je dois m’assurer que ce notebook fonctionne depuis plusieurs environnements Windows, Linux, je dois aussi m’assurer que je n’aurai pas trop de travail l’ann\u00e9e prochaine pour le faire fonctionner \u00e0 nouveau, et qu’il ne sera pas trop perturb\u00e9 par un changement de version des librairies qu’il utilise. Je dois aussi le convertir au format html ou PDF ou pr\u00e9sentation. Alors, quand je cr\u00e9e un notebook ou que je re\u00e7ois celui d’un contributeur, je lui ajoute un menu, je remplace les chemins absolus vers des fichiers locaux en fichiers t\u00e9l\u00e9chargeables, je remplace les mots de passe s’il est besoin, je lui enl\u00e8ve les num\u00e9ros d’ex\u00e9cution afin de pouvoir facilement tracer les modifications sur GitHub (diff<\/a><\/em><\/span>), je l’inclus dans la suite des tests unitaires que je fais tourner une fois par semaine sur une machine virtuelle lou\u00e9e chez Azure – un reliquat du partenariat ENSAE – Microsoft<\/a><\/em><\/span> qui a cess\u00e9 cette ann\u00e9e. Enfin, je mets \u00e0 jour le site. Et voil\u00e0, apr\u00e8s tout cela, le notebook est disponible en ligne et pr\u00eat \u00e0 l’emploi.<\/p>\n

R\u00e9guli\u00e8rement, je m’assure que les tests unitaires passent et je corrige les erreurs en pr\u00e9vision de l’ann\u00e9e prochaine. C’est comme cela que je peux vous convier sans trop d’inqui\u00e9tude \u00e0 aller t\u00e9l\u00e9charger un notebook et \u00e0 l’utiliser. C’est comme cela que je peux aller en cours sans avoir pris le temps de regarder si un notebook fonctionne encore. Mais je triche un peu avec cette peinture idyllique. Je sais que certaines parties ne sont pas encore test\u00e9es car je n’ai pas encore \u00e9crit le code qui le ferait (Spark), que d’autres ne le sont plus car elles n\u00e9cessitent un cluster que je n’ai plus pour cause de partenariat interrompu. L’important est que je sache ce qui ne marche plus pour la plupart de ce que j’ai produit.<\/p>\n

J’ai \u00e9chafaud\u00e9 toute cette machinerie en trois ans, \u00e9crit quelques 15.000 lignes de codes pour automatiser le test des notebooks et les incorporer au sein d’une documentation que je compile sous la forme d’un site web. Et je coupe et je red\u00e9coupe pour l’ineffable expansion de ce cours qui monopolise une machine pendant plus de deux heures avant sa mise en ligne et cinq heures pour tout tester. Alors je d\u00e9coupe et cr\u00e9e une myriade de petits points d’entr\u00e9e. Mon livre sur le langage python, \u00e9crit il y a huit ans, que je transforme sous forme de site, ma th\u00e8se que je transforme n\u00e9gligemment au m\u00eame format, les deux \u00e0 trois mille lignes de codes \u00e9crites pour siphonner ma bo\u00eete mail et r\u00e9cup\u00e9rer tous les projets qu’on m’envoie et que je dois \u00e9valuer – pas tout seul, je vous rassure-. J’ai re\u00e7u depuis le 15 d\u00e9cembre pr\u00e8s de 1Go compress\u00e9 de mails et pi\u00e8ces jointes, PDF ou notebooks car les \u00e9tudiants m’envoient eux aussi des notebooks en guise de rendus. Trois ans, plus de 150 notebooks, 7000 commits sur GitHub, pr\u00e8s de 200 \u00e9tudiants, certains que je revois plusieurs fois, 15 lettres de recommandation par an, deux hackathons et deux sponsors Microsoft et EY et deux associations La Croix-Rouge et Cr\u00e9sus et deux nuits blanches pass\u00e9es avec soixante-dix \u00e9tudiants passionn\u00e9s et passionnants, une soutenance de projets d’\u00e9tudiants dans les locaux de la Croix-Rouge, d’autres \u00e0 venir cette ann\u00e9e j’esp\u00e8re, des \u00e9tudiants qui se sont amus\u00e9s sur des projets propos\u00e9s par l’association DataForGood<\/a><\/em><\/span>,\u00a0il y avait quasiment un \u00e9tudiant dans chacun des dix projets lors de la derni\u00e8re session<\/a><\/em><\/span>. DataForGood a contribu\u00e9 \u00e0 la cr\u00e9ation des sujets pour le premier hackathon et le bouche \u00e0 oreille a fait le reste. Sans oublier les \u00e0-c\u00f4t\u00e9s, participation au premier jury des Entrepreneurs d’int\u00e9r\u00eat g\u00e9n\u00e9ral<\/a><\/em><\/span> ou des coding go\u00fbters<\/a><\/em><\/span>, au Touquet.<\/p>\n

Et vous savez quoi, j’ai encore faim !<\/p>\n

J’ai envie, j’ai envie de louer un th\u00e9\u00e2tre et de faire parler les donn\u00e9es fa\u00e7on Shakespeare, de r\u00e9nover les Chiffres et les Lettres en rempla\u00e7ant la partie chiffres par un puzzle algorithmique, et d’autres choses un peu moins farfelues dont vous entendrez peut-\u00eatre parler bient\u00f4t.<\/p>\n

 <\/p>\n

Bonne ann\u00e9e !<\/p>\n","protected":false},"excerpt":{"rendered":"

Je coordonne et j’anime environ 60 heures de cours et travaux pratiques \u00e0 l’ENSAE chaque ann\u00e9e depuis trois ans et la cr\u00e9ation de la voie datascience. Si vous allez sur mon site, vous d\u00e9couvrirez que la plupart de ces heures s’appuient sur des exercices \u00e9crits sous formes de notebooks et qu’une bonne partie fonctionne par […]<\/p>\n","protected":false},"author":20,"featured_media":1873,"comment_status":"closed","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"_et_pb_use_builder":"","_et_pb_old_content":"","_et_gb_content_width":"","_exactmetrics_skip_tracking":false,"_exactmetrics_sitenote_active":false,"_exactmetrics_sitenote_note":"","_exactmetrics_sitenote_category":0,"footnotes":""},"categories":[99,135],"tags":[],"class_list":["post-1872","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-big-data","category-tribune","et-has-post-format-content","et_post_format-et-post-format-standard"],"_links":{"self":[{"href":"https:\/\/variances.eu\/index.php?rest_route=\/wp\/v2\/posts\/1872","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/variances.eu\/index.php?rest_route=\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/variances.eu\/index.php?rest_route=\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/variances.eu\/index.php?rest_route=\/wp\/v2\/users\/20"}],"replies":[{"embeddable":true,"href":"https:\/\/variances.eu\/index.php?rest_route=%2Fwp%2Fv2%2Fcomments&post=1872"}],"version-history":[{"count":0,"href":"https:\/\/variances.eu\/index.php?rest_route=\/wp\/v2\/posts\/1872\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/variances.eu\/index.php?rest_route=\/wp\/v2\/media\/1873"}],"wp:attachment":[{"href":"https:\/\/variances.eu\/index.php?rest_route=%2Fwp%2Fv2%2Fmedia&parent=1872"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/variances.eu\/index.php?rest_route=%2Fwp%2Fv2%2Fcategories&post=1872"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/variances.eu\/index.php?rest_route=%2Fwp%2Fv2%2Ftags&post=1872"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}