GPT-4.5/5将发布，但AGI仍未实现@科技博主Matthew Berman
为了解决幻觉问题，研究人员采用了检索增强生成（RAG）的方法，并添加了几个重要步骤来进一步减轻幻觉，并改进对话性指标。通过这些优化，WikiChat在事实准确性方面比微调后的SOTA RAG模型Atlas高出8.5%。此外，研究人员还将基于GPT-4的WikiChat提炼成7B参数的LLaMA模型，这个模型在事实准确性方面能达到91.1%的高分，并且运行速度提高了6.5倍，能效更好，可以本地部署。
🔍 这种方法在文本嵌入领域取得了显著的成果，无需使用大量标记数据
我认为升级到GPT-4可能会有所帮助，虽然它确实提供了略微改进的结果，但仍然无法创建一个完全功能的应用程序。因此，虽然GPT-engineer显示出一些希望，但可以说它还不能完全处理严肃的编码任务。
另外，BakLLaVA是使用LLaVA1.5架构增强的Mistral7B基础模型，已经在多个基准测试中优于LLaVA213B。这三种开源视觉模型在视觉处理领域具有极大的潜力。