### Météo des humeurs (12 juin 2019) [Nom] --- ## Catherine ![](https://media.giphy.com/media/clGwatQ5JfQTuLjhzz/giphy.gif) --- ## Ursula ![](https://media.giphy.com/media/n9v0Vus5M9uLe/giphy.gif) --- ## Kilian ![](https://media.giphy.com/media/qQnANZvBn9HiM/giphy.gif) --- ## Vincent ![image alt](https://media0.giphy.com/media/12WTQZpaaDQ1H2/giphy.gif?cid=8fc3c8975d0096fb5847323349bf7569&rid=giphy.gif) ## Gweltaz ![](https://media.giphy.com/media/3o6ZsS9KGR9Rln5l5e/giphy.gif) traduction de log = bûche ## Anthony ![](https://media.giphy.com/media/zqqGAer6AJCr6/giphy.gif) --- ## Olga ![](https://i.imgur.com/4Yi7oGk.jpg) --- ## Henri ![](https://media.giphy.com/media/5xaOcLCBzBw4QrtdDP2/giphy.gif) --- ## Dylan ![](https://media.giphy.com/media/L40DtUsswX9ameYduM/giphy.gif) --- # Alban ![](https://media.giphy.com/media/11sBLVxNs7v6WA/giphy.gif) --- # Jérémy ![](https://media.giphy.com/media/26gYOqlZQvywLCMiA/giphy.gif) --- # Antoine ![](https://media.giphy.com/media/J6waL8zHzkWSk/giphy.gif) --- # Julien ![](https://media.giphy.com/media/26xBI73gWquCBBCDe/giphy.gif) --- # Titouan ![](https://media.giphy.com/media/jRprTRTMUYv93xlxDL/giphy.gif) --- # Pablo ![](https://media.giphy.com/media/SuEFqeWxlLcvm/giphy.gif) --- ### Réalisation de la semaine (6 au 12 juin 2019) --- ## Ursula * **Scraping Casino drive :** - mise en forme des données concernant les catégories/sous-catégories et sous-sous-catégories et création du fichier casino-links.txt - début de modification du script de récupération des produits avec Antoine * **Datagrip :** - découverte des requêtes SQL avec Datagrip - catégorisation des produits scrapés depuis le site Auchan drive - travail en priorité sur certaines catégories pour constituer le dataset : ![](https://i.imgur.com/C5ZGLlF.jpg) **A faire :** - poursuite de la catégorisation avec Datagrip - changement de catégorie pour certains produits ==> reclassification (**Merci Olga.** ^^) - une fois que la catégorisation sera terminée, continuer l'adaptation du script pour le scraping des produits Casino --- ## Catherine Rien d'extraordinaire cette semaine, tréso, suivi de dossiers etc ... --- ## Kilian - Import de l'ancien datawarehouse - Fin du script (corrections et ajout de valeurs dans le databag) - Ajout de requêtes dans Jakku pour vérifier l'existence de PersonDevice pour éviter d'avoir des doublons car codeName est peu présent dans les anciennes données - Test en local : :+1: - Publication de THK v3 sur l'AppStore pour vérification - Laborieux, surtout quand on met `x` en version d'AGKit 🙈 - Récupération des anciennes queues RMQ - Début de l'adaptation de ImportOldDatawarehouse pour créer des SDKEvent et SDKBundle en fonction de la queue sélectionnée - *DONE* : écoute sur une queue RMQ, mise à jour de `ag-rabbit-mq` sur le script - *IN PROGRESS* : création de SDKEvent - *TODO* : création de SDKBundle et envoi sur une queue Jakku --- ## Vincent - Continuer le travail sur les logs : - Recupération des logs des projet PHP - Update de php vers la 7.3 pour supprimer un préfixe très moche : `07-Jun-2019 09:21:38] WARNING: [pool www] child 24 said into stdout: "{"message":"09:06:38","context":[],"level":550,"level_name":"ALERT","channel":"app","datetime":{"date":"2019-06-07 09:21:38.749701","timezone_type":3,"timezone":"UTC"},"extra":[]}"` - Intégration des bons logs dans ElasticSearch/Kibana ![](https://i.imgur.com/HF8vts1.png) - Mise en place de la chaine de logs sur les applications - Test du bon fonctionnement en php 7.3 ## Gweltaz - Formation sur blender par Benjamin + Tuto blender guru - Modèliser et Animer 3 scènes pour la landing agkit --- ## Olga - classification de libellés FR: - **IRI**: pps & iss Total classifié: 136981 libellés ![](https://i.imgur.com/A6Bkgb0.png) Beaucoup de temps car plein d'erreur donc re-check à la main ![](https://i.imgur.com/PgTwGPu.png) - Scrape Carrefour: j'avance... ## Henri - fix de la VintageGate - 80% done - password manager - manque plus que le docker rt on est bon - premier test k8s lundi matin - conception du workflow receipt reader/receipt reader promo et fouille dans taris. - one more thing... ``` registry.agoods.fr/back/api:5.0.2 bfa732584f31 14 hours ago 960MB registry.agoods.fr/back/api:5.0.2 7a84ffb28013 2 weeks ago 3.99GB ``` (Attention au caches/logs/historique de profiler/tickets uploadés) quand vous buildez à la main une image docker) next: - planning projets back/sysadmin ## Anthony - Update des planning avec Damien - Spec techniques pour notre stack plus cohérentes avec nos produits - Receipt Reader for Promo - Receipt Reader - Le tout avec accès depuis le SDK ou une API - ![](https://i.imgur.com/mNVxJso.png) - Support BNext et OAuth - On essaie de trouver un chemin a peu près clair pour la suite de la boite - Pour dérouler la suite des projets - On s'ouvre à la communauté de manière plus concrète 🤙 - Faire des articles ! (Tuto, Humeur, etc.) - Faire de l'open source > Donc si vous avez envie faut pas hésiter ! - https://blog.aboutgoods-company.com & https://medium.com/blogaboutgoodscompany - Le github -> https://github.com/AboutGoods (il faut absolument l'update ⚰️) - Sinon de la veille pour la suite - WWDC - OCR On device customisable - ![](https://i.imgur.com/SNZu8Sd.jpg) - ![](https://i.imgur.com/j5ZLIG9.png) - ![](https://i.imgur.com/HEimejl.jpg) - ![](https://i.imgur.com/5xob6EK.png) - Plus d'infos : https://developer.apple.com/videos/play/wwdc2019/234/ - WWDC - Word Embeddings - Plus d'infos : https://developer.apple.com/videos/play/wwdc2019/232/ - WWDC - NLP Tagging - ![](https://i.imgur.com/cG4UQ9W.png) - ![](https://i.imgur.com/268npbc.png) - WWDC - Core ML 3 - On device model personalisation par rapport aux données utilisateurs - ![](https://i.imgur.com/JlMVZ0c.png) - Beaucoup insité sur BERT donc voir si c'est utile pour nous cette archi --- # Jérémy - Clean/Catégorisation des brands - Un peu plus de 800 brands gardées (sur les 9k de départ) - Principalement des marques internationales / française - Sera surement ajusté au fur et à mesure des tests - Pourquoi du clean ? - fromagerie de pain d avaine - porc de nos montagnes - blanquette de limoux - charlotte aux fraises - la poule heureuse - le veau d aveyron du segala - ... - Pourquoi catégoriser ? - Donner plus de poids aux marques dont la catégorie match avec celle retournée par Sigyn - Pouvoir catégoriser un libellé si Sigyn n'y ait pas parvenu mais qu'on a trouvé la marque ![](https://i.imgur.com/qioFxNr.png) - Mise en place test Retail Reader pour vérifier les résultats en sortie __TODO__ - Trouver un moyen de spécifier les locales - AUCHAN / ALCAMPO - MR PROPRE / DON LIMPIO / MASTRO LINDO / MR CLEAN - ... - Améliorer la détection dans Retail Reader - Contrer les erreurs OCR --- ## Dylan - Cours - Ajout d'infos dans les databags comme la campaign_id ou le app_id - Test d'envoi de databag avec agkit et postman - réparation des dashboard de taris (en cours) --- # Alban - Avancement de la landing AGKit : - trads fr de Titouan - bloquer les requests pour la démo à 3/jour - footer - chargement automatique des tickets pour la démo (animation de progression et interaction play/pause) - préparation de la mise en prod (fix bug version de nuxt avec Express) - amélioration d'une directive VueJs utile pour les animations qu'on pourrait publier sur Github (+ article Medium à préparer) --- ## Antoine - TachetKOA - Review de code - Tests - Fixes (+AGKit core) - Scraping - Cora était cassé, mais il est vivant! :pray: - ~12800/16274 - APIv4 -> Jakku - ~~Après quelques déboires avec PHP...~~ - Chargement des users - CSV de liens user -- application - Construction et envoi des data:handbag: sur :rabbit:MQ - Pas encore d'infos sur les devices ```{"bagType":"SDK_BUNDLE","debug":false,"from":"APIV4_USER_MIGRATION","fromVersion":"0.0.1.0","verification":{"needsHumanValidation":false},"rawData":[{"type":"OBJECT"}],"processedData":[{"type":"PERSON","value":{"uuid":"bde1269c-77e7-6dfe-1fa7-b0232a7b2792"}},{"type":"DEVICE_APPLICATION","value":{"application":{"versionBuild":"2","name":"TachetKOA Android","versionName":"v2","uid":33597722}}}],"environment":"dev"}``` --- # Titouan - Présentation client pour Antonio - Balises meta de la landing pour Alban - Parcours utilisateur de la landing - Soutenance de fin d'année --- # Julien - Jakku - Amélioration des logs - Ajout d'une application dans le DataBag PersonReceipt - Ajout de test unitaire et fonctionnel (En cours) - DMS - Ajout d'un nouveau datamart pour les dashboards de Taris ---