Daily Shaarli
December 19, 2023

Une excellente étude sur la productivité des développeurs.
- les employés qui se déconnectent à la fin de la journée sont 20% plus productifs
- faire des pauses améliore la productivité
- en moyenne, le temps idéal de concentration par jour est 4h
- au delà de 2h de réunion par jour, les développeurs se sente surchargés
- seulement 1 développeur sur 4 se considère comme productif entre 15 et 18h

Une proposition d'amélioration du protocol SSH en le faisant passer dans HTTP/3.
Plusieurs avantages:
- plus rapide
- utilisation d'authentification modernes (OAuth, etc)
- serveur SSH invisible au port scanning
- tous les autres avantages de HTTP/3
L'histoire de Microsoft qui pousse IE très fort depuis sa création
Une méthode de compression des prompts pour réduire leur taille.
La méthode utilise de plus petit LLMs pour compresser un texte en ne conservant que les informations pertinentes pour un LLM.
La différence de performances avec le prompt compressé est minime mais on peut diviser la taille par 20!
Leur deuxième méthode est aussi de la compression de prompt mais dans le cadre d'un RAG. Le contenu du prompt est compressé et surtout ré-organisé lorsqu'il contient des documents afin d'améliorer le score de retrieval.
Ils affichent des performances de 17% supérieures sur NaturalQuestions avec 4x moins de tokens.
Bref, moins de tokens = plus rapide + moins cher, sans baisse de performances significatives voir de meilleures performances.
Des exemples sont disponibles et utilisable en ligne dans Google Collab https://github.com/microsoft/LLMLingua/tree/main/examples