AI
AI Scientist
AI Scientist是由Sakana AI开发的全自动科学发现AI系统,能够独立完成从创意生成、编码、实验执行到撰写科学论文的整个研究流程。它具备全自动化研究流程、多领域应用能力、高效的计算效率和创新的同行评审机制,显著降低了科学研究的经济门槛。AI Scientist已在基础科学研究、医学研究、材料科学、工程优化和环境科学研究等多个领域得到应用,展现出广泛的应用前景。
DuoAttention
DuoAttention是由MIT韩松团队提出的新型框架,通过区分“检索头”和“流式头”两种注意力机制,显著提升了大型语言模型在处理长上下文时的推理效率。该框架有效减少了内存占用,加速了解码和预填充过程,并保持了模型的准确性。它适用于多轮对话、长文档处理、学术研究以及内容推荐等多个领域。
