Denis Garcia & Gerald Colin - Goovy Lab

Goovy Lab

Sign in Subscribe

Denis Garcia & Gerald Colin

Apache Spark 3 - Utiliser le shell Spark avec Scala

Apache Spark 3 - Utiliser le shell Spark avec Scala

Pour démarrer avec Apache Spark en Scala : voici vos premiers pas afin de pouvoir mettre vos mains dans la manipulation de gros jeux de données avec le shell ou REPL spark. Vous trouverez quelques exemples de prototypage d'analyses de données.

Recherche de doublons sur Dropbox avec le SDK Dropbox

trucs et astuces

Recherche de doublons sur Dropbox avec le SDK Dropbox

Voici un exemple d'utilisation du SDK Dropbox pour la recherche de doublons.

Scala pour Apache Spark - Cheatsheet

Scala pour Apache Spark - Cheatsheet

Nous présentons ici une aide-mémoire de codes en scala pour gérer des traitements de données distribués à l'aide d'Apache Spark.

Docker - Quick MySQL / PHPMyAdmin or AdMiner

Docker - Quick MySQL / PHPMyAdmin or AdMiner

Un fichier docker-compose pour un mysql sur votre poste de développement avec des outils d'admin.

Nettoyer ses emails GMail efficacement

Nettoyer ses emails GMail efficacement

Comme beaucoup de monde qui utilise GMail, je conserve beaucoup d'emails inutiles comme ceux des newsletters, ou des publicités. GMail offre un système de scripts similaires aux macros d'un célèbre éditeur.

Stratégie simple mais efficace de backup local et historisation sous Linux

Stratégie simple mais efficace de backup local et historisation sous Linux

Voici quelques scripts simples mais efficaces pour vos stratégies de backup et sauvegarde de vos fichiers sous Linux. Et n'oubliez pas de tester vos backups régulièrement!

Symfony + php-fpm + nginx + Docker

Symfony + php-fpm + nginx + Docker

Pour ceux qui développent en Symfony, voici un petit article pour démarrer rapidement avec Docker, php-fpm et nginx, le tout en moins de 5 minutes, pause café incluse.

Installer un serveur NodeJS avec HTTPS

trucs et astuces

Installer un serveur NodeJS avec HTTPS

HTTPS devient de plus en plus le protocole par défaut et est très largement poussé par Google et autres. D'ailleurs, depuis peu, Chrome indique un site en HTTP comme non sécurisé. Pre-requis * Installer nodejs and npm * Installer openssl Note: sous Windows 10, vous pouvez utiliser le sous-système Linux et en

Apache Spark : Les sources de données externes

Apache Spark : Les sources de données externes

Généralité sur Apache Spark : Spark est un système de calcul distribué sur des collections de données répliquées et résilientes. Les calculs sont exécutés avec un fort parallélisme. Spark supporte plusieurs languages : Scala, Java, Python et R. Le schéma classique d'une application Spark est le suivant : * Chargement des données * Tranformation des

trucs et astuces

Nettoyer ses emails Gmail

[NDR] une nouvelle version [https://blog.goovy.io/nettoyer-ses-emails-gmail-efficacement/] avec des mises à jour a été publiée plus récemment. Le problème Pendant des années après avoir créé un compte google mail j'ai conservé tous mes emails soit dans mon inbox soit simplement en les archivant (i.e. en enlevant le

Commandes git utiles - Gestion des étiquettes (tags management)

Gestion des étiquettes (tags). Pendant la phase de développement, nous sommes souvent amenés à livrer des versions de logiciels, modules et sites web, dans différents environnements tels que Développement, Intégration Continue (IC), Assurance Qualité (QA), Tests d'acceptance utilisateur (UAT), Pré-Production ou Production. On peut vouloir livrer une version en "release-candidate"

Parseur JSON en bash

Droit au but: Vous aimeriez pouvoir parser un fichier json simplement avec une commande bash ? Voici un moyen élégant avec nodejs de le faire. Il vous faudra avoir installé nodejs et le package manager npm. Pour le faire : $ sudo apt-get install nodejs npm $ sudo npm install -g json Vous avez