# Le langage et la communication pour les robots sociaux

[Slides du cours](https://www.dropbox.com/scl/fi/p36z10r7040sbu044msyo/Le-langage-pour-la-robotique-sociale.pdf?rlkey=2hohpsa46ahk5iyuifi46cxsd&dl=0)

## 1. L'essor des LLMs

### Word2Vec
- Une explication illustrée des embeddings et de leur apprentissage avec Word2Vec : https://jalammar.github.io/illustrated-word2vec/
- Visualisation interactive des embeddings :
https://lamyiowce.github.io/word2viz/
https://blog.echen.me/embedding-explorer/#/

### Transformers
- Explication Illustrée : https://jalammar.github.io/illustrated-transformer/

### Exemples d'application robotique avec les LLMs
- Google SayCan : [vidéo](https://www.youtube.com/watch?v=ysFav0b472w)

## 2. Modèles cognitifs du langage humain
- Le problème de l'ancrage symbolique : [vidéo de S. Harnad](https://www.youtube.com/watch?v=eJhhwX4KWyM&t=203s)
- La chambre chinoise : [vidéo de l'expérience](https://www.youtube.com/watch?v=D0MD4sRHj1M)
- Intelligence artificielle et sciences cognitives: modéliser l'apprentissage du langage : [interview P.-Y. Oudeyer](https://www.youtube.com/watch?v=7HAZiA3CxXA&t=2s)

## 3. Pour aller plus loin : quelques papiers
- [Cangelosi, A. (2010). Grounding language in action and perception: From cognitive agents to humanoid robots. Physics of life reviews, 7(2), 139-151.](https://www.sciencedirect.com/science/article/pii/S1571064510000187?casa_token=LNb8s3rozf8AAAAA:qrPdS2W8PGmogzFqd-p00MJ8F8jIT-cB1Ds1-G245FFh9xIsNdRBlRjP70Ug-YPgQqM65PJFWQ)
- [Cohen, L., & Billard, A. (2018). Social babbling: The emergence of symbolic gestures and words. Neural Networks, 106, 194-204.](https://www.sciencedirect.com/science/article/pii/S0893608018301989?casa_token=pQq4diA_wO8AAAAA:obMENhKEWvwdKw97PmkswFKDgmrLV9iLgFv_Q1v1QOSPsZteWcabfZlpmGonr4NROsjVsEnfkQ)
- [Irpan, A., Herzog, A., Toshev, A. T., Zeng, A., Brohan, A., Ichter, B. A., ... & Kuang, Y. (2022). Do as i can, not as i say: Grounding language in robotic affordances. In Conference on Robot Learning (No. 2022).](https://research.google/pubs/do-as-i-can-not-as-i-say-grounding-language-in-robotic-affordances/)
- [Vong, W. K., Wang, W., Orhan, A. E., & Lake, B. M. (2024). Grounded language acquisition through the eyes and ears of a single child. Science, 383(6682), 504-511.](https://www.science.org/doi/pdf/10.1126/science.adi1374?casa_token=T6TA3bRamPkAAAAA:H-BJT4MqxU2XlFhOjXlkIK2nFbG-XwNTE9tSMLLQLL0sNdKZxMjg-OIZEy5sYUp_Pq-aNZT3mxLa-Q)