Carburoam Front Page

Créer un Dashboard + Data pipeline ETL de A à Z, et économiser de l'argent

TL;DR Dans ce billet de blog, nous allons voir comment créer de A à Z un projet de Data engineering, de l’ETL, la création de notre schéma de données, l’ORM de l’application, son backend et ensuite son déploiement avec Streamlit Cloud ⚙️ Le but est de récupérer la liste des prix de stations essence en France ⛽, automatiser un job qui va venir mettre à jour les valeurs quotidiennement 📅 et construire un dashboard pour afficher les prix personnalisés aux utilisateurs du site 📊...

juin 9, 2024 · 23 min · Émilien Foissotte
DNA Genetic Engineering Big Brother Stable Diffusion

Optimisation, 1984 et Algorithmes Génétiques

TL;DR Dans ce billet de blog, nous allons utiliser et étudier le fonctionnement des algorithmes génétiques, pour résoudre un problème d’optimisation. Ce problème hypothétique prendra corps dans la narration de George Orwell et de son roman dystopique 1984. Nous verrons les concepts généraux de ce genre de problème et essaierons de les appliquer à notre situation. Ainsi, vous serez à même vous aussi, d’utiliser les si puissants algorithmes génétiques dans vos problèmes d’optimisation....

octobre 7, 2023 · 27 min · Émilien Foissotte
Rocket Developer Conversion Stable Diffusion

De Parquet vers CSV en un clin d'oeil

TL;DR Dans ce post nous verrons ensemble comment convertir super efficacement et rapidement 🚀 des fichiers au format Apache Parquet vers le format CSV (et vice-versa), en utilisant DuckDB 🦆 et en comparant avec Pandas 🐍 comme une base de comparaison. En bonus, nous verrons comment l’utiliser avec un format CLI super ergonomique et efficace, toujours à portée de main 👨‍💻 C’est parti ! Intro Ces derniers temps j’ai eu de plus en plus l’occasion de travailler sur des tâches relevant plutôt du Data Engineering pur et dur, avec par exemple des mises en place de Datalake AWS, des conversions de données en tout genre, des designs de pipelines, du nettoyage de données....

août 26, 2023 · 6 min · Émilien Foissotte
House Datacenter Stable Diffusion

Cloud personnel

TL;DR Dans ce billet de blog post nous allons voir comment mettre en place un système monitoré 📊 & sécurisé de stockage cloud personel ⏏️, hébergé derrière un proxy ⚙️, afin que vous puissez exposer plein d’autres services sur votre serveur personnel 🏠 Délaissez Google Drive et Google Photos 📷, hébergez vos beaux pixels chéris directement chez vous 🚀 ! Intro Ma copine a fait récemment face à une situation très stressante, laissez moi vous expliquer brièvement la cause du problème 🫣...

août 6, 2023 · 20 min · Émilien Foissotte
Portable Laptop Traveler Stable Diffusion

TMUX x NVIM : Hands-on

TRADUCTION EN COURS TL;DR Ce billet de blog va couvrir différents aspects de la mise en place d’une station de développement Unix, et comment se construire son propre setup ultra-ergonomique et OS-transversal (pour MacOS et tout un tas de distributions Linux) Nous verrons : Comment fabriquer un terminal multiplexer, tmux et comment faire danser les fenêtres de déveleppment tel un majestueux ballet, à la vitesse de l’éclaire 💻 Se déplacer entrre les lignes de code et les repos d’un claquement de doigt (pressement d’une touche pour être précis ^^) avec nvim, tout en bénéficiant de complémentions faisant rougir ChatGPT ⌨️ Faire fusionner les deux-outils et déployer des codespaces sur votre station, en y incluant vos plugins favoris ⚙️ N’hésitez pas à partager vos propres hacks de customisation en commentaires, ne soyez pas avares de conseils 😃...

mai 21, 2023 · 11 min · Émilien Foissotte