ChatGPT, desarrollado por OpenAI, se basa en un modelo llamado Transformer que no tiene memoria persistente, es decir, no recuerda conversaciones pasadas una vez que se termina la interacción. Pero, se puede mejorar sus capacidades de memoria a través de varios enfoques:
1. Memorización a largo plazo: OpenAI está trabajando para mejorar el modelo de ChatGPT para que pueda recordar información entre conversaciones. Esto implica un desafío técnico debido a cuestiones de privacidad y seguridad de los datos.
2. En la fase de pre-entrenamiento, se podría alimentar al modelo con más datos y de mayor relevancia para que tenga un mayor conocimiento base.
3. En la fase de afinación, se puede proporcionar al modelo ejemplos de diálogos en los que se demuestra la recordación de información compartida en mensajes anteriores.
4. Se podría utilizar un diseño de sistema híbrido en el que el modelo de IA esté acoplado a una base de datos de respaldo.
5. OpenAI también está explorando opciones de personalización de los modelos para ajustar su comportamiento, que podría incluir la mejora de la memoria del modelo.
Es importante recordar que mejoras en la memoria del modelo también implican consideraciones éticas importantes en torno a la privacidad y el consentimiento, que deben ser abordadas.