[{"data":1,"prerenderedAt":-1},["ShallowReactive",2],{"similar-xianshang33--llm-paper-daily":3,"tool-xianshang33--llm-paper-daily":62},[4,18,26,36,46,54],{"id":5,"name":6,"github_repo":7,"description_zh":8,"stars":9,"difficulty_score":10,"last_commit_at":11,"category_tags":12,"status":17},4358,"openclaw","openclaw\u002Fopenclaw","OpenClaw 是一款专为个人打造的本地化 AI 助手，旨在让你在自己的设备上拥有完全可控的智能伙伴。它打破了传统 AI 助手局限于特定网页或应用的束缚，能够直接接入你日常使用的各类通讯渠道，包括微信、WhatsApp、Telegram、Discord、iMessage 等数十种平台。无论你在哪个聊天软件中发送消息，OpenClaw 都能即时响应，甚至支持在 macOS、iOS 和 Android 设备上进行语音交互，并提供实时的画布渲染功能供你操控。\n\n这款工具主要解决了用户对数据隐私、响应速度以及“始终在线”体验的需求。通过将 AI 部署在本地，用户无需依赖云端服务即可享受快速、私密的智能辅助，真正实现了“你的数据，你做主”。其独特的技术亮点在于强大的网关架构，将控制平面与核心助手分离，确保跨平台通信的流畅性与扩展性。\n\nOpenClaw 非常适合希望构建个性化工作流的技术爱好者、开发者，以及注重隐私保护且不愿被单一生态绑定的普通用户。只要具备基础的终端操作能力（支持 macOS、Linux 及 Windows WSL2），即可通过简单的命令行引导完成部署。如果你渴望拥有一个懂你",349277,3,"2026-04-06T06:32:30",[13,14,15,16],"Agent","开发框架","图像","数据工具","ready",{"id":19,"name":20,"github_repo":21,"description_zh":22,"stars":23,"difficulty_score":10,"last_commit_at":24,"category_tags":25,"status":17},3808,"stable-diffusion-webui","AUTOMATIC1111\u002Fstable-diffusion-webui","stable-diffusion-webui 是一个基于 Gradio 构建的网页版操作界面，旨在让用户能够轻松地在本地运行和使用强大的 Stable Diffusion 图像生成模型。它解决了原始模型依赖命令行、操作门槛高且功能分散的痛点，将复杂的 AI 绘图流程整合进一个直观易用的图形化平台。\n\n无论是希望快速上手的普通创作者、需要精细控制画面细节的设计师，还是想要深入探索模型潜力的开发者与研究人员，都能从中获益。其核心亮点在于极高的功能丰富度：不仅支持文生图、图生图、局部重绘（Inpainting）和外绘（Outpainting）等基础模式，还独创了注意力机制调整、提示词矩阵、负向提示词以及“高清修复”等高级功能。此外，它内置了 GFPGAN 和 CodeFormer 等人脸修复工具，支持多种神经网络放大算法，并允许用户通过插件系统无限扩展能力。即使是显存有限的设备，stable-diffusion-webui 也提供了相应的优化选项，让高质量的 AI 艺术创作变得触手可及。",162132,"2026-04-05T11:01:52",[14,15,13],{"id":27,"name":28,"github_repo":29,"description_zh":30,"stars":31,"difficulty_score":32,"last_commit_at":33,"category_tags":34,"status":17},1381,"everything-claude-code","affaan-m\u002Feverything-claude-code","everything-claude-code 是一套专为 AI 编程助手（如 Claude Code、Codex、Cursor 等）打造的高性能优化系统。它不仅仅是一组配置文件，而是一个经过长期实战打磨的完整框架，旨在解决 AI 代理在实际开发中面临的效率低下、记忆丢失、安全隐患及缺乏持续学习能力等核心痛点。\n\n通过引入技能模块化、直觉增强、记忆持久化机制以及内置的安全扫描功能，everything-claude-code 能显著提升 AI 在复杂任务中的表现，帮助开发者构建更稳定、更智能的生产级 AI 代理。其独特的“研究优先”开发理念和针对 Token 消耗的优化策略，使得模型响应更快、成本更低，同时有效防御潜在的攻击向量。\n\n这套工具特别适合软件开发者、AI 研究人员以及希望深度定制 AI 工作流的技术团队使用。无论您是在构建大型代码库，还是需要 AI 协助进行安全审计与自动化测试，everything-claude-code 都能提供强大的底层支持。作为一个曾荣获 Anthropic 黑客大奖的开源项目，它融合了多语言支持与丰富的实战钩子（hooks），让 AI 真正成长为懂上",160015,2,"2026-04-18T11:30:52",[14,13,35],"语言模型",{"id":37,"name":38,"github_repo":39,"description_zh":40,"stars":41,"difficulty_score":42,"last_commit_at":43,"category_tags":44,"status":17},8272,"opencode","anomalyco\u002Fopencode","OpenCode 是一款开源的 AI 编程助手（Coding Agent），旨在像一位智能搭档一样融入您的开发流程。它不仅仅是一个代码补全插件，而是一个能够理解项目上下文、自主规划任务并执行复杂编码操作的智能体。无论是生成全新功能、重构现有代码，还是排查难以定位的 Bug，OpenCode 都能通过自然语言交互高效完成，显著减少开发者在重复性劳动和上下文切换上的时间消耗。\n\n这款工具专为软件开发者、工程师及技术研究人员设计，特别适合希望利用大模型能力来提升编码效率、加速原型开发或处理遗留代码维护的专业人群。其核心亮点在于完全开源的架构，这意味着用户可以审查代码逻辑、自定义行为策略，甚至私有化部署以保障数据安全，彻底打破了传统闭源 AI 助手的“黑盒”限制。\n\n在技术体验上，OpenCode 提供了灵活的终端界面（Terminal UI）和正在测试中的桌面应用程序，支持 macOS、Windows 及 Linux 全平台。它兼容多种包管理工具，安装便捷，并能无缝集成到现有的开发环境中。无论您是追求极致控制权的资深极客，还是渴望提升产出的独立开发者，OpenCode 都提供了一个透明、可信",144296,1,"2026-04-16T14:50:03",[13,45],"插件",{"id":47,"name":48,"github_repo":49,"description_zh":50,"stars":51,"difficulty_score":32,"last_commit_at":52,"category_tags":53,"status":17},2271,"ComfyUI","Comfy-Org\u002FComfyUI","ComfyUI 是一款功能强大且高度模块化的视觉 AI 引擎，专为设计和执行复杂的 Stable Diffusion 图像生成流程而打造。它摒弃了传统的代码编写模式，采用直观的节点式流程图界面，让用户通过连接不同的功能模块即可构建个性化的生成管线。\n\n这一设计巧妙解决了高级 AI 绘图工作流配置复杂、灵活性不足的痛点。用户无需具备编程背景，也能自由组合模型、调整参数并实时预览效果，轻松实现从基础文生图到多步骤高清修复等各类复杂任务。ComfyUI 拥有极佳的兼容性，不仅支持 Windows、macOS 和 Linux 全平台，还广泛适配 NVIDIA、AMD、Intel 及苹果 Silicon 等多种硬件架构，并率先支持 SDXL、Flux、SD3 等前沿模型。\n\n无论是希望深入探索算法潜力的研究人员和开发者，还是追求极致创作自由度的设计师与资深 AI 绘画爱好者，ComfyUI 都能提供强大的支持。其独特的模块化架构允许社区不断扩展新功能，使其成为当前最灵活、生态最丰富的开源扩散模型工具之一，帮助用户将创意高效转化为现实。",109154,"2026-04-18T11:18:24",[14,15,13],{"id":55,"name":56,"github_repo":57,"description_zh":58,"stars":59,"difficulty_score":32,"last_commit_at":60,"category_tags":61,"status":17},6121,"gemini-cli","google-gemini\u002Fgemini-cli","gemini-cli 是一款由谷歌推出的开源 AI 命令行工具，它将强大的 Gemini 大模型能力直接集成到用户的终端环境中。对于习惯在命令行工作的开发者而言，它提供了一条从输入提示词到获取模型响应的最短路径，无需切换窗口即可享受智能辅助。\n\n这款工具主要解决了开发过程中频繁上下文切换的痛点，让用户能在熟悉的终端界面内直接完成代码理解、生成、调试以及自动化运维任务。无论是查询大型代码库、根据草图生成应用，还是执行复杂的 Git 操作，gemini-cli 都能通过自然语言指令高效处理。\n\n它特别适合广大软件工程师、DevOps 人员及技术研究人员使用。其核心亮点包括支持高达 100 万 token 的超长上下文窗口，具备出色的逻辑推理能力；内置 Google 搜索、文件操作及 Shell 命令执行等实用工具；更独特的是，它支持 MCP（模型上下文协议），允许用户灵活扩展自定义集成，连接如图像生成等外部能力。此外，个人谷歌账号即可享受免费的额度支持，且项目基于 Apache 2.0 协议完全开源，是提升终端工作效率的理想助手。",100752,"2026-04-10T01:20:03",[45,13,15,14],{"id":63,"github_repo":64,"name":65,"description_en":66,"description_zh":67,"ai_summary_zh":67,"readme_en":68,"readme_zh":69,"quickstart_zh":70,"use_case_zh":71,"hero_image_url":72,"owner_login":73,"owner_name":74,"owner_avatar_url":75,"owner_bio":76,"owner_company":77,"owner_location":78,"owner_email":79,"owner_twitter":80,"owner_website":80,"owner_url":81,"languages":80,"stars":82,"forks":83,"last_commit_at":84,"license":80,"difficulty_score":42,"env_os":85,"env_gpu":86,"env_ram":86,"env_deps":87,"category_tags":90,"github_topics":91,"view_count":32,"oss_zip_url":80,"oss_zip_packed_at":80,"status":17,"created_at":97,"updated_at":98,"faqs":99,"releases":100},9061,"xianshang33\u002Fllm-paper-daily","llm-paper-daily","Daily updated LLM papers.        每日更新 LLM 相关的论文，欢迎订阅 👏   喜欢的话动动你的小手 🌟 一个","llm-paper-daily 是一个专注于大语言模型（LLM）领域的每日论文精选平台，旨在帮助从业者高效追踪前沿学术动态。面对 LLM 研究爆发式增长、新论文层出不穷的现状，研究人员往往难以在短时间内筛选出高价值内容并理解其核心贡献。llm-paper-daily 通过每日自动更新机制，解决了信息过载与获取滞后的痛点。\n\n该工具不仅提供最新的 arXiv 论文链接和相关代码仓库，还独具特色地利用 GPT-4 为每篇论文生成通俗易懂的中文摘要，大幅降低了阅读门槛。此外，它将海量论文精细分类为推理、智能体、检索、对齐、应用及预训练等七大方向，帮助用户快速定位感兴趣的研究领域。无论是希望紧跟技术潮流的 AI 研究人员、需要寻找落地灵感的开发者，还是对大模型原理充满好奇的学习者，都能从中获益。通过结构化的整理与智能化的解读，llm-paper-daily 让追踪全球顶尖 LLM 研究成果变得轻松而高效，是连接学术前沿与实践应用的得力助手。","\u003Ch2 align='center'>llm-paper-daily 日常论文精选\u003C\u002Fh2>\n\u003Cdiv align='center'>\n\n[![Status](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002Fstatus-Update_07.31_10:00-success.svg)]() [![简体中文 badge](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002F%E7%AE%80%E4%BD%93%E4%B8%AD%E6%96%87-Simplified%20Chinese-blue)](.\u002FREADME.md) [![English badge](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002F%E8%8B%B1%E6%96%87-English-blue)](.\u002FREADME_en.md) \n\n\u003C\u002Fdiv>\n\n欢迎来到 **llm-paper-daily**! 这是一个获取最新研究论文的每日更新和分类的平台。希望为爱好者提供 LLM 研究的前沿资讯，让您更轻松地了解该领域的最新发展。\n\n📚 **每日更新:** 仓库每天会带来最新的 LLM 研究，并附有arxiv地址、相关 git 仓库和基于 GPT-4 的简单总结\n\n💐 **分类摘要:** 将每篇论文分类到如推理、代理、检索、应用、预训练与指令微调等不同部分，帮助您能轻松导航并发现相关的研究\n\n🌈 **交流学习:** 最近准备拉一个讨论小组方便大家交流和互相学习。\n欢迎对大模型落地、论文等等方面有兴趣的小伙伴加入🙌 \n\n\u003Cimg src='https:\u002F\u002Foss.gittoolsai.com\u002Fimages\u002Fxianshang33_llm-paper-daily_readme_67211746ff99.jpg' width=15%  alt=\u002F>\n\n## 目录\n- [最新论文(含总结)](#最新论文)\n- [分类](#分类)\n  - [💡 Reasoning](CATEGORIES.md#Reasoning)\n  - [🤖 Agent](CATEGORIES.md#Agent)\n  - [🦉 Knowledge and Retrieval](CATEGORIES.md#Knowledge-and-Retrieval)\n  - [👩‍🏫 Alignment and Hallucination](CATEGORIES.md#Alignment-and-Hallucination)\n  - [🎨 Application](CATEGORIES.md#Application)\n  - [📐 Pre-training and Instruction Fine-tuning](CATEGORIES.md#Pre-training-and-Instruction-Fine-tuning)\n  - [📄 Survey](CATEGORIES.md#Survey)\n\u003Cdetails>\n  \u003Csummary>查看更新文章   \u003Csub>更新时间: 07月31日 10:00\u003C\u002Fsub>\u003C\u002Fsummary>\n\u003Cbr>\n\n- Self-Training with Direct Preference Optimization Improves Chain-of-Thought Reasoning \n\u003C\u002Fdetails>\n\n## 最新论文\n### 07月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-29\u003C\u002Fspan> | **SeaLLMs 3: Open Foundation and Chat Multilingual Large Language Models for Southeast Asian Languages**\u003Cbr>\u003Csub>机构: DAMO Academy, Alibaba Group\u003Cbr>SeaLLMs 3是专为东南亚多语言环境设计的大型语言模型，重点在于克服现有模型的局限性，通过高效的语言增强技术和安全可靠的机制，使之能够提供文化适宜的回应，同时减少幻觉现象。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.19672v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.19672.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-29\u003C\u002Fspan> | **QAEA-DR: A Unified Text Augmentation Framework for Dense Retrieval**\u003Cbr>\u003Csub>机构: Tsinghua University\u003Cbr>QAEA-DR框架提出了一个针对密集检索的创新文本增强技术，通过集成事件提取和问题答案生成来提高文本生成的质量和健壮性，同时还可以与多种嵌入模型兼容，证明了其在实验中的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.20207v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.20207.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-28\u003C\u002Fspan> | **Meta-Rewarding Language Models: Self-Improving Alignment with LLM-as-a-Meta-Judge**\u003Cbr>\u003Csub>机构: Meta FAIR, University of California, Berkeley, New York University\u003Cbr>Meta-Rewarding机制通过引入一个meta-judge角色来评估模型自身的判断，改进了LLMs的自改进流程。该方法不仅提高了模型跟随指令的能力，而且打破了依赖人工数据的局限，表现出了自改进模型在无人监督下的巨大潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.19594v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.19594.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-25\u003C\u002Fspan> | **Self-Training with Direct Preference Optimization Improves Chain-of-Thought Reasoning**\u003Cbr>\u003Csub>机构: StatNLP Research Group\u003Cbr>本论文提出了一种创新的自我训练框架，通过整合直接偏好优化（DPO）来提升小规模语言模型在解决数学推理问题上的能力。这种方法减少了对大模型的依赖，同时降低了计算成本，并在多个数学推理任务上取得了积极的结果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.18248v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.18248.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-23\u003C\u002Fspan> | **RedAgent: Red Teaming Large Language Models with Context-aware Autonomous Language Agent**\u003Cbr>\u003Csub>机构: Zhejiang University, Palo Alto Networks, University of North Texas\u003Cbr>RedAgent系统成功地通过模拟特定上下文的jailbreak策略，有效地发现并利用大型语言模型的安全漏洞，它不仅提高了红队方法的效率和自动化，也为理解和强化LLM应用程序的安全性提供了新的视角。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.16667v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.16667.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-23\u003C\u002Fspan> | **Retrieval Augmented Generation or Long-Context LLMs? A Comprehensive Study and Hybrid Approach**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.16833v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.16833.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-23\u003C\u002Fspan> | **OpenDevin: An Open Platform for AI Software Developers as Generalist Agents**\u003Cbr>\u003Csub>机构: UIUC, CMU, Yale\u003Cbr>OpenDevin 是一个用于开发与世界通过软件交互的通用和专业AI代理的社区驱动平台，具有强大灵活的交互机制、沙箱操作系统和网页浏览器环境、以及全面的评估框架。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.16741v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.16741.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-22\u003C\u002Fspan> | **Knowledge Mechanisms in Large Language Models: A Survey and Perspective**\u003Cbr>\u003Csub>机构: Zhejiang University, National University of Singapore, University of California, Los Angeles\u003Cbr>本论文认为深入了解LLMs的知识机制对于培养强大且可靠的AI至关重要。论文提出了一个评估此类系统的新框架，集中在知识的利用和演化，并为未来的研究方向提供了愿景和工具。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.15017v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.15017.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-19\u003C\u002Fspan> | **ChatQA 2: Bridging the Gap to Proprietary LLMs in Long Context and RAG Capabilities**\u003Cbr>\u003Csub>机构: NVIDIA\u003Cbr>论文提出了一个名为Llama3-ChatQA-2-70B的模型，用于桥接开源LLMs与专有模型之间的差距，具备处理最长128K token上下文的能力，并在多个基准测试上达到了与GPT-4-Turbo相当的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.14482v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.14482.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-19\u003C\u002Fspan> | **Internal Consistency and Self-Feedback in Large Language Models: A Survey**\u003Cbr>\u003Csub>机构: Renmin University of China, Institute for Advanced Algorithms Research, Shanghai, Beijing Institute of Technology\u003Cbr>本文针对大型语言模型在保持一致性和避免产生幻觉方面的问题，提出了内部一致性和自我反馈的概念。这为我们理解和改进这些模型提供了新的视角，并展望了未来的发展方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.14507v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.14507.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FIAAR-Shanghai\u002FICSFSurvey)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-18\u003C\u002Fspan> | **CoD, Towards an Interpretable Medical Agent using Chain of Diagnosis**\u003Cbr>\u003Csub>机构: Shenzhen Research Institute of Big Data, The Chinese University of Hong Kong, Shenzhen\u003Cbr>这项工作提出了Chain-of-Diagnosis (CoD)，它是一种旨在增强疾病诊断中LLM的可解释性的方法，该方法通过合成病例结合疾病百科全书数据，有效地生成了培训数据并开发了DiagnosisGPT模型。实验表明，DiagnosisGPT在多个诊断数据集上的性能优于其他LLM。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.13301v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.13301.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-16\u003C\u002Fspan> | **Trust No Bot: Discovering Personal Disclosures in Human-LLM Conversations in the Wild**\u003Cbr>\u003Csub>机构: University of Washington, Allen Institute for AI, McGill University\u003Cbr>本项研究强调了在与聊天机器人的互动中，用户个人信息泄露的问题。它呈现了在这些互动中共享的敏感信息的类型，并呼吁对聊天机器人设计采取措施，以保护用户隐私并保持交流内容的适当透明度。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.11438v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.11438.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-16\u003C\u002Fspan> | **NeedleBench: Can LLMs Do Retrieval and Reasoning in 1 Million Context Window?**\u003Cbr>\u003Csub>机构: Shanghai AI Laboratory, Tsinghua University\u003Cbr>NeedleBench框架和提出的ATC测试为评估和提升LLMs在处理长文本数据时的检索和推理能力提供了新方法。这对现实世界中的长上下文任务至关重要，也揭示了当前LLMs面临的机遇和挑战。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.11963v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.11963.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fopen-compass\u002Fopencompass)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-16\u003C\u002Fspan> | **LOTUS: Enabling Semantic Queries with LLMs Over Tables of Unstructured and Structured Data**\u003Cbr>\u003Csub>机构: Stanford University, UC Berkeley\u003Cbr>本文提出了LOTUS系统，该系统通过定义语义操作符来启用基于自然语言的查询，并通过高效的算法和优化实现了快速准确的查询执行。LOTUS在多个真实世界的应用案例中展示了其应用的广泛性和高性能，对改进基于LMs的大规模语义分析和查询系统具有重要意义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.11418v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.11418.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fstanford-futuredata\u002Flotus)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-15\u003C\u002Fspan> | **Qwen2 Technical Report**\u003Cbr>\u003Csub>机构: Alibaba Group\u003Cbr>Qwen2 系列模型作为最新的大型语言模型，不仅在语言理解、生成、多语言能力、编码、数学和推理等多任务环境中性能出色，还在开源社区中公开了权重和资源，促进了社区的创新和可访问性。模型在多个基几测试中与现有模型相比展现出竞争力，尤其在多语言方面显示出广泛的适用性和全球覆盖范围。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.10671v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.10671.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-15\u003C\u002Fspan> | **Think-on-Graph 2.0: Deep and Interpretable Large Language Model Reasoning with Knowledge Graph-guided Retrieval**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.10805v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.10805.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-14\u003C\u002Fspan> | **Learning to Refuse: Towards Mitigating Privacy Risks in LLMs**\u003Cbr>\u003Csub>机构: Institute of Artificial Intelligence, Soochow University, China\u003Cbr>论文提出了一种新的机器学习框架NAUF和与之配套的真实世界个人数据遗忘数据集RETURN，用于评估和改善LLMs在隐私保护方面的表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.10058v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.10058.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-12\u003C\u002Fspan> | **Human-like Episodic Memory for Infinite Context LLMs**\u003Cbr>\u003Csub>机构: Huawei Noah’s Ark Lab, University College London\u003Cbr>文章通过整合人类情节记忆和事件认知到大型语言模型中，创造了一种新型结构EM-LLM，使LLMs能够处理实际无限上下文长度，同时保持计算效率。这项研究不仅改进了大型语言模型处理广泛上下文的能力，还有助于揭示人类记忆机制。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.09450v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.0945.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-10\u003C\u002Fspan> | **Toto: Time Series Optimized Transformer for Observability**\u003Cbr>\u003Csub>机构: Datadog\u003Cbr>Toto模型是Datadog开发的一种用于时序预测的基础模型，专为处理观测数据而设计。它通过创新的注意力机制和预训练策略，有效地提高了处理观测数据的性能和效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.07874v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.07874.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-10\u003C\u002Fspan> | **Towards Robust Alignment of Language Models: Distributionally Robustifying Direct Preference Optimization**\u003Cbr>\u003Csub>机构: University of Science and Technology of China, Alibaba Stripe, Zhejiang University\u003Cbr>研究人员开发了Dr. DPO框架，它通过单一额外代码行来增强DPO的鲁棒性。实证评估表明，Dr. DPO在各种设置中显著提高了性能，无论是在有噪声还是无噪声的条件下。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.07880v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.0788.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fjunkangwu\u002FDr_DPO)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-09\u003C\u002Fspan> | **Internet of Agents: Weaving a Web of Heterogeneous Agents for Collaborative Intelligence**\u003Cbr>\u003Csub>这篇论文提出了一个灵活且可扩展的多代理协作平台——代理互联网（IoA），它克服了现有多代理框架的局限性，并展示了在多种任务和应用场景中的出色性能。此外，论文还发布了相关的代码库，以推动自主代理系统的发展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.07061v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.07061.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FOpenBMB\u002FIoA)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-05\u003C\u002Fspan> | **AriGraph: Learning Knowledge Graph World Models with Episodic Memory for LLM Agents**\u003Cbr>\u003Csub>机构: AIRI, Moscow, Russia, Skoltech, Moscow, Russia\u003Cbr>AriGraph 是一种新颖的记忆架构，用于构建集成了语义和情景记忆的知识图世界模型，以提升 LLM 代理的探索和规划能力。通过在 TextWorld 环境中的实验，证明了它在处理复杂任务方面比其他现有方法更有效。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.04363v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.04363.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-02\u003C\u002Fspan> | **Let the Expert Stick to His Last: Expert-Specialized Fine-Tuning for Sparse Architectural Large Language Models**\u003Cbr>\u003Csub>机构: DeepSeek AI, Northwestern University\u003Cbr>本文提出了针对稀疏架构LLM的参数高效微调方法ESFT，该方法通过只微调与下游任务最相关的专家，既保持了专家的特化性，又显著节省了计算资源。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.01906v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.01906.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fdeepseek-ai\u002FESFT)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-02\u003C\u002Fspan> | **RankRAG: Unifying Context Ranking with Retrieval-Augmented Generation in LLMs**\u003Cbr>\u003Csub>机构: Georgia Tech, NVIDIA  \u003Cbr>RankRAG是一个新颖的、通过指令微调LLM以增强其在RAG中的上下文排名和答案生成能力的框架，它在多个基准测试中提升了生成性能，并显示出良好的泛化能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.02485v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.02485.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-01\u003C\u002Fspan> | **Summary of a Haystack: A Challenge to Long-Context LLMs and RAG Systems**\u003Cbr>\u003Csub>本文提出了一种新的评价大型语言模型和RAG系统处理长文本能力的方法，即SummHay任务，并通过合成数据生成和自动评估系统两个角度，解决了长文本评估的挑战。实验结果表明，目前的系统在此任务上表现不佳，为未来系统的提升指明了方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.01370v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.0137.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-01\u003C\u002Fspan> | **We-Math: Does Your Large Multimodal Model Achieve Human-like Mathematical Reasoning?**\u003Cbr>\u003Csub>机构: Beijing University of Posts and Telecommunications, Tencent Inc., Huazhong University of Science and Technology\u003Cbr>这篇论文创建了一个名为WE-MATH的视觉数学推理基准测试，旨在超越传统的端到端性能评估，深入探讨和评价LMMs的问题解决原理及它们的知识获取和泛化能力。通过新的多维度评估方法揭示出多模态模型在内在推理过程中的挑战，并通过实验验证了知识增强策略的有效性，推动了LMMs在视觉数学推理方面的进步。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.01284v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.01284.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FWe-Math\u002FWe-Math)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-01\u003C\u002Fspan> | **AI Agents That Matter**\u003Cbr>\u003Csub>机构: Princeton University\u003Cbr>这篇论文批评了当前AI代理的基准评测方式，并且提出了一系列改进措施，目标是发展出真正有实际应用价值的智能代理，而不仅仅是在基准测试中取得高分的代理。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.01502v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.01502.md)  |\n\n---\n\n### 06月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-30\u003C\u002Fspan> | **Step-Controlled DPO: Leveraging Stepwise Error for Enhanced Mathematical Reasoning**\u003Cbr>\u003Csub>机构: Multimedia Laboratory (MMLab), The Chinese University of Hong Kong\u003Cbr>本论文提出了一种新的数学推理优化方法——SCDPO，通过在特定步骤监督错误的方式，自动化地生成训练样本，显著提升了LLMs在数学问题求解方面的性能，证明了该方法的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.00782v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2407.00782.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-29\u003C\u002Fspan> | **LiteSearch: Efficacious Tree Search for LLM**\u003Cbr>\u003Csub>机构: Xiamen University, Tencent AI Lab\u003Cbr>该论文通过提出一种效率更高的树搜索算法来降低在辅助大型语言模型解决复杂数学推理任务时的资源消耗，同时确保保持高性能水平。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.00320v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2407.0032.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-28\u003C\u002Fspan> | **Scaling Synthetic Data Creation with 1,000,000,000 Personas**\u003Cbr>\u003Csub>机构: Tencent AI Lab Seattle\u003Cbr>本论文提出了一个名为“Persona Hub”的合成数据平台，在保证生成数据多样化和丰富性的同时，重点关注合成数据的安全和负责任使用。通过一系列用例证明了该方法在多元化、可扩展性、灵活性和易用性方面的优势。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.20094v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.20094.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-27\u003C\u002Fspan> | **From Artificial Needles to Real Haystacks: Improving Retrieval Capabilities in LLMs by Finetuning on Synthetic Data**\u003Cbr>\u003Csub>机构: University of Wisconsin-Madison\u003Cbr>该论文提出了一个通过在合成数据集上微调LLMs来提高其在长文本任务上检索和推理能力的方法。实验结果表明，这种方法可以在不显著影响模型整体能力的同时，显著提高模型在长文本任务中的表现，并降低幻觉的生成。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.19292v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.19292.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-27\u003C\u002Fspan> | **SeaKR: Self-aware Knowledge Retrieval for Adaptive Retrieval Augmented Generation**\u003Cbr>\u003Csub>本论文提出了一个名为SEAKR的新型自适应检索增强生成模型，通过利用LLMs的内部状态自我意识来动态决定何时进行检索，并有效整合检索到的知识，从而提高了在问答任务中的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.19215v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.19215.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FTHU-KEG\u002FSeaKR)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-26\u003C\u002Fspan> | **Step-DPO: Step-wise Preference Optimization for Long-chain Reasoning of LLMs**\u003Cbr>\u003Csub>机构: The Chinese University of Hong Kong, Harbin Institute of Technology (Shenzhen), SmartMore\u003Cbr>这份论文提出了一种新的优化方法Step-DPO，它通过对单个推理步骤进行优化而非整体评估答案，提升了LLMs在长链数学推理上的准确性和鲁棒性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.18629v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.18629.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fdvlab-research\u002FStep-DPO)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-25\u003C\u002Fspan> | **The FineWeb Datasets: Decanting the Web for the Finest Text Data at Scale**\u003Cbr>\u003Csub>机构: Hugging Face\u003Cbr>本论文通过介绍FineWeb数据集，突出了如何策划出一个有效的基于Common Crawl的预训练数据集的重要性，并通过实验证明了其对于提升大型语言模型的性能的贡献。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.17557v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.17557.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-24\u003C\u002Fspan> | **WARP: On the Benefits of Weight Averaged Rewarded Policies**\u003Cbr>\u003Csub>机构: Google DeepMind\u003Cbr>本文提出了WARP，一种新的LLM对齐策略，通过权重平均合并模型以解决RLHF过程中的挑战，改善KL与奖励之间的权衡。实验证明，WARP能够提升模型性能和与人类价值的对齐度。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.16768v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.16768.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-22\u003C\u002Fspan> | **Semantic Entropy Probes: Robust and Cheap Hallucination Detection in LLMs**\u003Cbr>\u003Csub>机构: OATML, Department of Computer Science, University of Oxford  \u003Cbr>论文提出SEPs为成本高效和可靠的幻觉检测方法，能够在无需生成多样本的条件下，直接从LLMs单次生成的隐藏状态中捕捉到语义不确定性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.15927v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.15927.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-21\u003C\u002Fspan> | **LongRAG: Enhancing Retrieval-Augmented Generation with Long-context LLMs**\u003Cbr>\u003Csub>机构: University of Waterloo\u003Cbr>LongRAG是一个针对开放领域问答任务的新框架，它通过增大检索单元和利用长文本语言模型来解冤传统RAG框架的限制。通过减少检索单元和提升检索器效能，以及使用长文本LLMs进行零次学习的答案提取，LongRAG在性能上取得了显着的改善。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.15319v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.15319.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-19\u003C\u002Fspan> | **Can Long-Context Language Models Subsume Retrieval, RAG, SQL, and More?**\u003Cbr>\u003Csub>本论文通过引入LOFT基准，探索了长上下文语言模型在替代现有范式和处理新颖任务方面的潜力。发现LCLMs在未经明确训练的情况下，能够在特定任务上与现有的检索和RAG系统相媲美，并指出了未来在提高问题表现上需要继续研究的领域。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.13121v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.13121.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-18\u003C\u002Fspan> | **Nash CoT: Multi-Path Inference with Preference Equilibrium**\u003Cbr>\u003Csub>机构: Westlake University, University of Cambridge\u003Cbr>本文提出了一种新颖的方法Nash CoT，利用偏好均衡概念通过减少推理路径的数量在保持性能的同时降低了LLMs的部署成本。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.07099v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2407.07099.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-18\u003C\u002Fspan> | **Judging the Judges: Evaluating Alignment and Vulnerabilities in LLMs-as-Judges**\u003Cbr>\u003Csub>本研究通过评估LLMs作为评判在对齐和评判弱点方面的表现，为使用LLMs作为未来评判提供了有用的洞察。重要的发现包括适合作为评判的仅有部分顶尖模型，以及Cohen's Kappa是一个更好的对齐度量标准，能在区分评判者方面做得比百分比对齐更好。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.12624v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.12624.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-17\u003C\u002Fspan> | **A Survey of AIOps for Failure Management in the Era of Large Language Models**\u003Cbr>\u003Csub>机构: Peking University, Tsinghua University, The Hong Kong University of Science and Technology (Guangzhou), University of Illinois Chicago\u003Cbr>本文是关于LLMs时代用于故障管理的AIOps技术的全面综述。文章讨论了LLMs对于解决现有AIOps方法所面临挑战的潜力，并勾勒了未来的研究方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.11213v4)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.11213.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-13\u003C\u002Fspan> | **Test of Time: A Benchmark for Evaluating LLMs on Temporal Reasoning**\u003Cbr>\u003Csub>机构: Google Research, Google DeepMind, Google\u003Cbr>本文引入了一个新的基准测试 ToT，通过合成数据集和众包任务，全面评估了LLMs在各种情境中对时间推理能力的表现，同时揭示了这些模型在时间推理方面的优势和不足。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.09170v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.0917.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-12\u003C\u002Fspan> | **Magpie: Alignment Data Synthesis from Scratch by Prompting Aligned LLMs with Nothing**\u003Cbr>\u003Csub>机构: University of Washington, Allen Institute for AI\u003Cbr>本文提出了MAGPIE，一个自合成方法生成大规模的高质量对齐数据，该方法不依赖于人的参与或提示工程。实验证明，使用MAGPIE微调的模型在多个基准上均显示出优异的性能，展示了LLMs在自动数据生成和对齐方面的潜能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.08464v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.08464.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-12\u003C\u002Fspan> | **Designing a Dashboard for Transparency and Control of Conversational AI**\u003Cbr>\u003Csub>机构: Harvard University, Google Research\u003Cbr>这篇论文致力于增加LLMs在对话AI系统中的透明度，并通过设计一个可视化的用户界面—一个与聊天机器人接口相配套的看板—实现了这一点。用户能够实时看到系统的内部用户模型，并可以通过界面更改这些模型。基于用户反馈，看板还有助于揭露并且对抗模型的偏见行为。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.07882v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.07882.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-12\u003C\u002Fspan> | **TasTe: Teaching Large Language Models to Translate through Self-Reflection**\u003Cbr>\u003Csub>机构: Harbin Institute of Technology, Tencent Inc\u003Cbr>本文提出的TASTE框架通过自我反思过程提升了LLMs的机器翻译能力，它代表了利用LLMs翻译潜力的一种新方法，为理解和利用LLMs的复杂推理和语言建模能力树立了新的典范。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.08434v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.08434.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FYutongWang1216\u002FReflectionLLMMT)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-11\u003C\u002Fspan> | **Delving into ChatGPT usage in academic writing through excess vocabulary**\u003Cbr>\u003Csub>机构: Hertie Institute for AI in Brain Health, University of Tübingen, Germany, Tübingen AI Center, Northwestern University\u003Cbr>此论文针对学术文本中广泛使用 LLMs 的现象，提出了一种新的无偏差的大规模方法来研究 LLM 的使用情况，并对 LLM 导致的科学写作变化进行了前所未有的量化比较。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.07016v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.07016.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-11\u003C\u002Fspan> | **Needle In A Multimodal Haystack**\u003Cbr>\u003Csub>机构: OpenGVLab, Shanghai AI Laboratory, Fudan University\u003Cbr>该论文提出了MM-NIAH，首个长篇多模态文件理解的评估基准，旨在考验和提升MLLMs的性能。通过不同的评估任务，论文指出了现有MLLMs在长篇多模态文档理解方面的局限和挑战。进一步的，该基准为MLLMs的长篇多模态文档理解研究提供了有效的平台。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.07230v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.0723.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FOpenGVLab\u002FMM-NIAH)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-10\u003C\u002Fspan> | **Self-Tuning: Instructing LLMs to Effectively Acquire New Knowledge through Self-Teaching**\u003Cbr>\u003Csub>机构: The Chinese University of Hong Kong, Tencent AI Lab, Centre for Perceptual and Interactive Intelligence\u003Cbr>论文通过引入SELF-TUNING，提出了一种改进LLM通过自我教学获取知识能力的框架，并通过Wiki-Newpages-QA数据集在多个关键知识获取任务上验证了其有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.06326v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.06326.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-10\u003C\u002Fspan> | **Transforming Wearable Data into Health Insights using Large Language Model Agents**\u003Cbr>\u003Csub>机构: Google LLC\u003Cbr>本论文通过介绀名为PHIA的大型语言模型代理系统，成功地将可穿戴设备数据转化为个人健康洞察。PHIA结合了代码生成和信息检索工具，有效解决了从大量健康数据中派生个性化健康指导的挑战。通过广泛的人工和自动化评估，证明了这种方法在处理实际健康问题上的准确性和应用可能性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.06464v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.06464.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-10\u003C\u002Fspan> | **Husky: A Unified, Open-Source Language Agent for Multi-Step Reasoning**\u003Cbr>\u003Csub>机构: University of Washington, MetaAI, Allen Institute for AI\u003Cbr>HUSKY是首个统一、开源的多步推理语言代理，解决了成本高和扩展困难的问题，且在多任务环境中取得优异表现，展现了开源语言代理的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.06469v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.06469.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fagent-husky\u002FHusky-v1)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-10\u003C\u002Fspan> | **Reasoning in Token Economies: Budget-Aware Evaluation of LLM Reasoning Strategies**\u003Cbr>\u003Csub>机构: Duke University, AWS AI Labs\u003Cbr>论文提出了一个考虑计算预算的LLM推理策略评估框架，并展示了简单策略在同等计算资源下可超越复杂策略的能力。通过揭示自我评估的重要性，为更加高效的预算利用和更有效策略的开发奠定了基础。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.06461v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.06461.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-09\u003C\u002Fspan> | **Do LLMs Exhibit Human-Like Reasoning? Evaluating Theory of Mind in LLMs for Open-Ended Responses**\u003Cbr>\u003Csub>机构: University of Washington, University of Washington - Bothell\u003Cbr>本研究强调了 LLM 在社交推理方面的不足，并展示了如何通过整合人类的意图和情绪来增强其有效性。研究结果凸显了 LLM 理解人类心理状态并在开放式问题中进行社交推理的需求，标明了未来发展的关键领域。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.05659v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.05659.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-07\u003C\u002Fspan> | **WildBench: Benchmarking LLMs with Challenging Tasks from Real Users in the Wild**\u003Cbr>\u003Csub>WILDBENCH 作为一个评价基准，提供了一个结合了真实用户任务挑战、自动化指标和解释性清单的评价框架，能够更准确地评估和区别大型语言模型在复杂任务中的表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.04770v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.0477.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-07\u003C\u002Fspan> | **Mixture-of-Agents Enhances Large Language Model Capabilities**\u003Cbr>\u003Csub>机构: Duke University, Together AI, University of Chicago\u003Cbr>这篇论文通过提出Mixture-of-Agents (MoA) 方法，展示了如何通过结合多个大型语言模型的集体专长来增强它们在理解和生成自然语言方面的能力。作者通过实验验证了这种方法可以显著提高模型的表现，并在多个竞争力很强的基准测试中取得了最新的最佳成绩。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.04692v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.04692.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-06\u003C\u002Fspan> | **The Prompt Report: A Systematic Survey of Prompting Techniques**\u003Cbr>\u003Csub>该论文提供了对提示技术的全面调研，系统分析了提示的概念、类型和应用，并对此进行了详细的元分析。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.06608v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.06608.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-06\u003C\u002Fspan> | **FastGAS: Fast Graph-based Annotation Selection for In-Context Learning**\u003Cbr>\u003Csub>机构: Department of ECE, University of Virginia\u003Cbr>论文提出的FastGAS方法在选择ICL实例时，不仅能提高多样性和代表性，同时还显著减少了所需的时间和计算资源。实验结果验证了其在多个数据集上的效能和效率，证明了其作为一种有效的实例选择方法的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.03730v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.0373.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-06\u003C\u002Fspan> | **Buffer of Thoughts: Thought-Augmented Reasoning with Large Language Models**\u003Cbr>\u003Csub>机构: Peking University, UC Berkeley, Stanford University\u003Cbr>BoT通过为LLMs提供一个存储高层次思维模板的meta-buffer，增强了推理的准确性、效率和鲁棒性，克服了现有方法的限制，并实现了显著的性能提升。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.04271v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.04271.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FYangLing0818\u002Fbuffer-of-thought-llm)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-04\u003C\u002Fspan> | **Synergetic Event Understanding: A Collaborative Approach to Cross-Document Event Coreference Resolution with Large Language Models**\u003Cbr>\u003Csub>机构: Zhejiang University, School of Engineering (Westlake University), Shanghai AI Laboratory\u003Cbr>文章提出了一种新颖的协作方法以解决跨文档事件共指消解任务。通过将LLMs的普遍能力与任务特定的SLMs结合，显著提高了模型性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.02148v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.02148.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-04\u003C\u002Fspan> | **To Believe or Not to Believe Your LLM**\u003Cbr>\u003Csub>机构: Google DeepMind\u003Cbr>本论文重点研穴并提出了一个新的信息论度量方法以在大型语言模型中量化不确定性，特别是针对LLMs生成响应时的幻觉现象。这项研究为如何识别和处理LLMs中的幻觉提供了新的理解和解决方案。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.02543v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.02543.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-03\u003C\u002Fspan> | **Self-Improving Robust Preference Optimization**\u003Cbr>\u003Csub>机构: Cohere\u003Cbr>SRPO通过在理论上合理的离线RLHF框架内表现出对任务变化的强大鲁棒性，成功地解决了依赖特定任务的问题，并通过非对抗性离线损失的优化提供了更简单的训练和部署过程。实验结果显示SRPO在包括OOD设置在内的各种环境下优于现有方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.01660v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.0166.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-03\u003C\u002Fspan> | **Mobile-Agent-v2: Mobile Device Operation Assistant with Effective Navigation via Multi-Agent Collaboration**\u003Cbr>\u003Csub>机构: Beijing Jiaotong University, Alibaba Group\u003Cbr>Mobile-Agent-v2是一个多代理架构，能有效解决移动设备操作任务中的导航挑战，特别是任务进展和焦点内容的导航问题。通过引入三个专门的代理角色，相较于传统的单代理架构，显著提高了任务完成率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.01014v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.01014.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FX-PLUG\u002FMobileAgent)\u003C\u002Fdiv> |\n\n---\n\n### 05月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-31\u003C\u002Fspan> | **Preemptive Answer \"Attacks\" on Chain-of-Thought Reasoning**\u003Cbr>\u003Csub>机构: Tsinghua University\u003Cbr>论文研究了预先答案对LLMs推理能力的负面影响，并提出了减轻其影响的策略。实验结果表明，这些策略不能完全抵消预先答案的影响，提示需要进一步增强CoT的鲁棒性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.20902v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.20902.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-31\u003C\u002Fspan> | **Transformers are SSMs: Generalized Models and Efficient Algorithms Through Structured State Space Duality**\u003Cbr>\u003Csub>机构: Princeton University, Carnegie Mellon University\u003Cbr>本论文展示了一个全新的状态空间对偶性（SSD）框架，连接了结构化的状态空间模型（SSMs）和注意力机制变体。论文的主要贡献包括将原本针对Transformers的算法和系统优化应用到SSMs上，以及开发了一种新的SSD算法，有效提高了模型训练和推理的效率。Mamba-2架构作为最终产品，实现了理想的性能表现，为未来的深度学习模型设计和优化提供了新的方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.21060v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.2106.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-30\u003C\u002Fspan> | **Jina CLIP: Your CLIP Model Is Also Your Text Retriever**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.20204v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.20204.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-30\u003C\u002Fspan> | **Similarity is Not All You Need: Endowing Retrieval Augmented Generation with Multi Layered Thoughts**\u003Cbr>\u003Csub>机构: Ant Group\u003Cbr>METRAG提出了一个新颖的检索增强生成框架，该框架通过实用性和紧凑性思维来解决现有模型的局限性，并在知识密集型任务中显示出更好的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.19893v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.19893.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-29\u003C\u002Fspan> | **MAP-Neo: Highly Capable and Transparent Bilingual Large Language Model Series**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.19327v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.19327.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-29\u003C\u002Fspan> | **LLMs achieve adult human performance on higher-order theory of mind tasks**\u003Cbr>\u003Csub>机构: Google Research, Google DeepMind, Johns Hopkins University Applied Physics Lab\u003Cbr>本论文展示了LLMs在高阶理论心智（ToM）任务上的性能，特别是证明了某些模型如GPT-4能够在某些任务上达到成人水平的表现。通过引入基于真实人类成人基准的新评测指标，本研究有助于揭示和理解LLMs在复杂社交互动中的潜力与限制。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.18870v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.1887.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-28\u003C\u002Fspan> | **RealitySummary: On-Demand Mixed Reality Document Enhancement using Large Language Models**\u003Cbr>\u003Csub>机构: University of Calgary\u003Cbr>此论文介绍了RealitySummary系统，它结合了大型语言模型和混合现实技术，提供了一个即时的阅读辅助工具，并且展现了这种技术在实际应用中的潜力和确立了未来研究的方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.18620v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.1862.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-23\u003C\u002Fspan> | **Towards Efficient LLM Grounding for Embodied Multi-Agent Collaboration**\u003Cbr>\u003Csub>机构: Tsinghua University, Northwestern Polytechnical University, Shanghai AI Laboratory\u003Cbr>本文针对多代理合作任务中LLMs的有效规划提出了ReAd框架，证明了其降低交互次数并提高成功率的能力，为LLMs在多代理系统中的应用奠定了基础。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.14314v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.14314.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-23\u003C\u002Fspan> | **PerLLM: Personalized Inference Scheduling with Edge-Cloud Collaboration for Diverse LLM Services**\u003Cbr>\u003Csub>机构: Institute of Computing Technology, Chinese Academy of Sciences, University of Chinese Academy of Sciences\u003Cbr>本论文提出了PerLLM框架，通过边缘-云协作来处理大量推理服务，不仅优化了服务调度和资源分配，还显著提高了吞吐量并降低了能源成本，具有突出的应用价值。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.14636v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.14636.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-23\u003C\u002Fspan> | **RefChecker: Reference-based Fine-grained Hallucination Checker and Benchmark for Large Language Models**\u003Cbr>\u003Csub>机构: Amazon AWS AI, Shanghai AI Lab, Shanghai Jiaotong University\u003Cbr>REFCHECKER是一个用于检测LLMs中细粒度幻觉并进行基准测试的框架。其通过使用claim-triplets，能在细粒度上检测并验证回应中的事实一致性，显著提高了检测的精度和与人类判断的一致性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.14486v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.14486.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Famazon-science\u002FRefChecker)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-23\u003C\u002Fspan> | **RaFe: Ranking Feedback Improves Query Rewriting for RAG**\u003Cbr>\u003Csub>机构: Zhejiang University, Alibaba Group, Nanjing University\u003Cbr>RaFe是一个新颖的查询重写框架，利用重排序器反馈来训练模型，无需注释，支持离线和在线反馈训练，具有良好的普适性和有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.14431v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.14431.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-23\u003C\u002Fspan> | **AGILE: A Novel Framework of LLM Agents**\u003Cbr>\u003Csub>机构: ByteDance Research, University of Science and Technology of China, Shanghai Jiao Tong University\u003Cbr>该论文提出了一个新型的LLM代理框架AGILE，它通过整合不同的组件，并采用强化学习来实现端到端的训练。该框架在复杂的问答任务中展现出较传统LLM独立使用更优的性能，并证明了组件整合和端到端优化的有效性。数据集和代码已公开发布，以促进相关领域的进一步研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.14751v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.14751.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-23\u003C\u002Fspan> | **Agent Planning with World Knowledge Model**\u003Cbr>\u003Csub>机构: Zhejiang University, Zhejiang University - Ant Group Joint Laboratory of Knowledge Graph, National University of Singapore, Alibaba Group\u003Cbr>本论文通过创建一个参数化的世界知识模型 (WKM)，来提升大型语言模型在执行交互式规划任务中的性能。这个模型使用了来自专家和探索性轨迹的知识，并通过在仿真环境中与多种强基准进行比较，验证了其有效性，并处理了生成幻视动作和盲目试错的问题。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.14205v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.14205.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fzjunlp\u002FWKM)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-23\u003C\u002Fspan> | **HippoRAG: Neurobiologically Inspired Long-Term Memory for Large Language Models**\u003Cbr>\u003Csub>机构: The Ohio State University, Stanford University\u003Cbr>HippoRAG是一个受人类记忆系统启发的新型检索框架，解决了传统LLMs在长期记忆和知识整合方面的不足。通过模拟人脑结构和运作机制，HippoRAG有效地提升了LLMs处理复杂知识整合任务的能力，并且在效率和性能上均超越现有方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.14831v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.14831.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FOSU-NLP-Group\u002FHippoRAG)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-21\u003C\u002Fspan> | **SmartFlow: Robotic Process Automation using LLMs**\u003Cbr>\u003Csub>机构: TCS Research\u003Cbr>SmartFlow是一个基于AI的RPA系统，它整合了深度学习的视觉理解与LLMs，能够自动生成导航工作流并自主执行用户指派的任务，展示了其在适应GUI变化和处理复杂任务上的高效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.12842v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.12842.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-21\u003C\u002Fspan> | **G-DIG: Towards Gradient-based DIverse and hiGh-quality Instruction Data Selection for Machine Translation**\u003Cbr>\u003Csub>机构: ByteDance Research\u003Cbr>该论文为解决LLMs在机器翻译中指令微调数据的多样性和质量问题，提出了基于梯度的数据选择方法G-DIG，通过实验验证了方法的有效性和泛化性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.12915v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.12915.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-20\u003C\u002Fspan> | **Multiple-Choice Questions are Efficient and Robust LLM Evaluators**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University\u003Cbr>该研究成功将常规的开放式生成问题转换为多项选择格式，以提高LLMs的评估效率和准确度。这一方法在防止无效答案的影响、提高评估效率方面取得了突破。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.11966v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.11966.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FGeralt-Targaryen\u002FMC-Evaluation)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-20\u003C\u002Fspan> | **xFinder: Robust and Pinpoint Answer Extraction for Large Language Models**\u003Cbr>\u003Csub>机构: Institute for Advanced Algorithms Research, Shanghai,Renmin University of China\u003Cbr>这篇文章的重点是提出一个名为xFinder的方法，旨在提高从LLMs输出中提取关键答案的准确度，解决了现有方法无法满足的领域需求，为LLMs评估提供了更可靠的方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.11874v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.11874.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FIAAR-Shanghai\u002FxFinder)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-20\u003C\u002Fspan> | **Octo: An Open-Source Generalist Robot Policy**\u003Cbr>\u003Csub>机构: UC Berkeley, Stanford\u003Cbr>论文介绍了Octo，这是一种基于变换器的策略，对多样化的机器人任务提供开源的解决方案，能通过微调适应新的观测和动作空间。它在多个机器人平台上表现出色，并通过完全开放的源码鼓励广泛应用和进一步发展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.12213v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.12213.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-20\u003C\u002Fspan> | **OpenRLHF: An Easy-to-use, Scalable and High-performance RLHF Framework**\u003Cbr>\u003Csub>机构: OpenLLMAI Team, ByteDance Inc., Netease Fuxi AI Lab\u003Cbr>OpenRLHF是一个开源框架，它使得在70亿以上参数模型上实现全尺度RLHF训练成为可能。它通过Ray分布式计算模型，并利用vLLM优化效率，同时实现了多种对齐算法，并与HuggingFace库无缝整合，从而提供即开即用的用户体验。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.11143v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.11143.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FOpenLLMAI\u002FOpenRLHF)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-19\u003C\u002Fspan> | **Your Transformer is Secretly Linear**\u003Cbr>\u003Csub>机构: AIRI, Skoltech, SberAI\u003Cbr>这项研究展示了变压器编码层之间可能存在高度的线性动态，这一发现推翻了变压器中线性和非线性操作的传统理解，并发现可以在不牺牲性能的情况下进行模型修改以提高效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.12250v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.1225.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-17\u003C\u002Fspan> | **Prompt Exploration with Prompt Regression**\u003Cbr>\u003Csub>机构: Carnegie Mellon University, Massachusetts Institute of Technology, University of Michigan\u003Cbr>本文提出了一种新的框架PEPR，用于预测LLMs中提示元素组合的影响，并选择最适用于特定任务的提示。该框架不仅提出了创新性的解决方案，还通过在多个数据集和任务上进行评估，展示了其有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.11083v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.11083.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-16\u003C\u002Fspan> | **SynthesizRR: Generating Diverse Datasets with Retrieval Augmentation**\u003Cbr>\u003Csub>机构: Amazon, The University of Texas at Austin\u003Cbr>SYNTHESIZRR是一种新方法，通过检索增强为教师-学生蒸馏的示例合成集成了获取信息。研究表明，与现有方法相比，SYNTHESIZRR生成的数据在内在数据多样性和下游任务准确性方面表现更佳。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.10040v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.1004.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-16\u003C\u002Fspan> | **MarkLLM: An Open-Source Toolkit for LLM Watermarking**\u003Cbr>\u003Csub>机构: Tsinghua University, Shanghai Jiao Tong University, The University of Sydney\u003Cbr>MARKLLM为研究人员和公众提供一个易于访问和使用的实验平台，旨在提高LLM水印技术的普及度和参与度，推动研究和应用进一步发展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.10051v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.10051.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FTHU-BPM\u002FMarkLLM)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-16\u003C\u002Fspan> | **SynthesizRR: Generating Diverse Datasets with Retrieval Augmentation**\u003Cbr>\u003Csub>机构: Amazon, The University of Texas at Austin\u003Cbr>SYNTHESIZRR通过检索增强解决了过去合成数据的多样性不足和与人类文本相异的问题，通过检索不同文档和内容，生成的样本具有更高的多样性和更接近人类文本的风格，这改善了蒸馏模型的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.10040v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.1004.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-16\u003C\u002Fspan> | **Listen Again and Choose the Right Answer: A New Paradigm for Automatic Speech Recognition with Large Language Models**\u003Cbr>\u003Csub>机构: Nanyang Technological University, University of Science and Technology of China, University of Aberdeen\u003Cbr>本论文成功提出并验证了结合多模态LLM的新ASR错误修正范式，不仅解决了源语音忽视和输入冗余的问题，还在实际应用中取得了显著效果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.10025v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.10025.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-16\u003C\u002Fspan> | **Thinking Fair and Slow: On the Efficacy of Structured Prompts for Debiasing Language Models**\u003Cbr>\u003Csub>机构: BITS Pilani, MDSR Labs, Adobe, IIT Guhawati, National University of Singapore\u003Cbr>这项研究开发并评估了一个针对端到端用户的迭代消偏框架，该框架提供了一种非训练型的消除LLMs偏见的方法。这种方法使用复杂的prompting策略在不减少下游任务性能的前提下显著降低了输出的平均偏见度，并为未来研究LLMs的prompt-based消偏方法铺平了道路。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.10431v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.10431.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-15\u003C\u002Fspan> | **ALPINE: Unveiling the Planning Capability of Autoregressive Learning in Language Models**\u003Cbr>\u003Csub>机构: Microsoft Research Asia, Harvard University, Peking University\u003Cbr>ALPINE项目考察了自回归学习如何使Transformer具备网络中的规划能力，并揭示了在执行路径寻找任务中Transformer的表现能力及其局限性，为我们理解大型语言模型在其他相关领域的一般规划能力提供了新见解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.09220v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.0922.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-15\u003C\u002Fspan> | **LoRA Learns Less and Forgets Less**\u003Cbr>\u003Csub>机构: Columbia University, Databricks\u003Cbr>LoRA虽然在目标任务的学习效率和精确度方面通常不如全参数微调，但在保持源任务性能方面展现了更好的表现和更强的正则化能力。根据本文研究，对使用LoRA做微调时的最佳实践做出了建议，尤其注意到学习率、目标模块选择和扰动的秩。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.09673v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.09673.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-14\u003C\u002Fspan> | **Is the Pope Catholic? Yes, the Pope is Catholic. Generative Evaluation of Intent Resolution in LLMs**\u003Cbr>\u003Csub>机构: Carnegie Mellon University, Allen Institute for AI  \u003Cbr>本研究通过引入一个全新的生成性评估框架，探索了LLMs在理解和生成与意图对齐的回应方面的潜力和挑战，揭示了当前模型在语用理解方面的不足，并指出了未来提升方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.08760v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.0876.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-13\u003C\u002Fspan> | **RLHF Workflow: From Reward Modeling to Online RLHF**\u003Cbr>\u003Csub>机构: Salesforce AI Research, University of Illinois Urbana-Champaign  \u003Cbr>本文提出了一个完整的在线迭代 RLHF 工作流程，不仅理论上创新，还通过详细的实践实现指南提供了实际应用的框架。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.07863v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.07863.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FRLHFlow\u002FRLHF-Reward-Modeling)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-13\u003C\u002Fspan> | **DoLLM: How Large Language Models Understanding Network Flow Data to Detect Carpet Bombing DDoS**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.07638v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.07638.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-10\u003C\u002Fspan> | **Mitigating Hallucinations in Large Language Models via Self-Refinement-Enhanced Knowledge Retrieval**\u003Cbr>\u003Csub>机构: Imperial College London, Huawei\u003Cbr>这项工作通过一个新的自我完善增强的知识图谱检索方法有效地减少了大型语言模型中的幻觉现象，尤其提高了在医疗领域中的应用实效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.06545v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.06545.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-10\u003C\u002Fspan> | **UniDM: A Unified Framework for Data Manipulation with Large Language Models**\u003Cbr>\u003Csub>机构: Alibaba Group, University of Science and Technology of China\u003Cbr>UniDM是一个创新的统一数据操作框架，通过有效的提示设计与步骤分解，显著提高了处理多种数据任务的效率和质量。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.06510v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.0651.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-10\u003C\u002Fspan> | **Automatic Generation of Model and Data Cards: A Step Towards Responsible AI**\u003Cbr>\u003Csub>机构: CMU, MPI, ETH Zürich\u003Cbr>论文成功开发了一种使用大型语言模型自动化生成机器学习模型卡片和数据卡片的方法，并通过创建相应的数据集和评估机制，显著提升了生成文档的质量和标准化。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.06258v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.06258.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-10\u003C\u002Fspan> | **A Survey on RAG Meets LLMs: Towards Retrieval-Augmented Large Language Models**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.06211v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.06211.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-10\u003C\u002Fspan> | **Value Augmented Sampling for Language Model Alignment and Personalization**\u003Cbr>\u003Csub>VAS为LLM的适配和个性化提供了一个高效且强大的方法。它克服了现有RL算法的不稳定性，实现了高性能和计算效率的双重优势，同时支持黑盒模型的适应，为未来的LLM个性化和对齐开辟了新的可能性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.06639v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.06639.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-09\u003C\u002Fspan> | **LLMPot: Automated LLM-based Industrial Protocol and Physical Process Emulation for ICS Honeypots**\u003Cbr>\u003Csub>机构: New York University Abu Dhabi  \u003Cbr>LLMPot是一种创新的ICS网络安全防御工具，其利用LLM的能力，通过自动化生成与协议和物理过程紧密相关的响应，显著提高了蜜罐的实用性和效果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.05999v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.05999.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-09\u003C\u002Fspan> | **Exploring the Potential of Human-LLM Synergy in Advancing Qualitative Analysis: A Case Study on Mental-Illness Stigma**\u003Cbr>\u003Csub>CHALET方法框架展示了人类-LLM 协作在定性研究中的巨大潜力，特别是在深化理解和洞见生成方面，为未来的HCI和定性分析研究提供了新方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.05758v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.05758.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-09\u003C\u002Fspan> | **An Automatic Prompt Generation System for Tabular Data Tasks**\u003Cbr>\u003Csub>本论文成功开发了一个既适应多种LLMs又无需广泛训练的自动提示生成系统，通过两种创新方法显著提高了处理表格数据任务的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.05618v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.05618.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-09\u003C\u002Fspan> | **Can large language models understand uncommon meanings of common words?**\u003Cbr>\u003Csub>机构: Tsinghua University, Chinese Academy of Science\u003Cbr>本研究通过建立新的评估体系和数据集，揭示了大型语言模型在理解常见词汇的罕见含义方面存在的重大不足，为提高模型的NLU能力提供了新的研究方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.05741v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.05741.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-08\u003C\u002Fspan> | **\"They are uncultured\": Unveiling Covert Harms and Social Threats in LLM Generated Conversations**\u003Cbr>\u003Csub>机构: University of Washington, MBZUAI\u003Cbr>这项研究通过创新的CHAST评估体系，揭示了LLMs在处理涵盖广泛文化和身份的复杂社会互动中可能导致的潜在伤害，强调了在部署这些模型之前进行彻底的偏见审计的必要性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.05378v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.05378.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-08\u003C\u002Fspan> | **Air Gap: Protecting Privacy-Conscious Conversational Agents**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.05175v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.05175.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-08\u003C\u002Fspan> | **ADELIE: Aligning Large Language Models on Information Extraction**\u003Cbr>\u003Csub>机构: Tsinghua University\u003Cbr>本文提出的ADELIE模型有效地解决了LLM在信息提取任务中的对齐问题，并通过创新的数据集和训练方法提升了模型在这些任务上的性能，同时维护了良好的通用能力，为未来相关研究提供了有价值的见解和基础。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.05008v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.05008.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-07\u003C\u002Fspan> | **QServe: W4A8KV4 Quantization and System Co-design for Efficient LLM Serving**\u003Cbr>\u003Csub>机构: MIT, NVIDIA\u003Cbr>通过新的量化算法和系统设计，QServe显著提升了LLM在GPU上的服务效率，实现了成本的大幅度降低，为大规模语言模型的部署提供了新的解决方案。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.04532v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.04532.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fmit-han-lab\u002Fqserve)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-07\u003C\u002Fspan> | **Deception in Reinforced Autonomous Agents: The Unconventional Rabbit Hat Trick in Legislation**\u003Cbr>\u003Csub>机构: Center for Responsible AI, IIT Madras, Princeton University  \u003Cbr>论文有效地展示了使用大型语言模型的自治代理在目标导向环境中执行复杂任务（如立法游说）时的欺骗能力，并提出了检测这种欺骗行为的有效方法。这些发现为AI在法律和道德方面的应用提供了重要的见解，同时也为AI安全提供了新的研究方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.04325v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.04325.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-07\u003C\u002Fspan> | **Knowledge Adaptation from Large Language Model to Recommendation for Practical Industrial Application**\u003Cbr>\u003Csub>机构: Kuaishou Technology, Southeast University\u003Cbr>本论文成功地将大型语言模型的开放世界知识应用于推荐系统，通过一个创新的双塔结构解决了实际应用中的核心挑战，为提升推荐系统的性能提供了新的思路。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.03988v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.03988.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-07\u003C\u002Fspan> | **Toward In-Context Teaching: Adapting Examples to Students' Misconceptions**\u003Cbr>\u003Csub>机构: MIT CSAIL  \u003Cbr>本论文成功展示了利用大型语言模型进行适应性教学的潜力，并通过ATOM模型实现了对学生误解的有效识别和教学反馈的优化。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.04495v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.04495.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-06\u003C\u002Fspan> | **Lifelong Knowledge Editing for LLMs with Retrieval-Augmented Continuous Prompt Learning**\u003Cbr>\u003Csub>机构: East China Normal University\u003Cbr>RECIPE方法通过转换知识陈述为连续提示符并结合知识哨兵来动态管理检索过程，有效提高了LLMs在生命周期学习场景中的编辑效率和推断速度，同时保持了模型整体性能。这种方法克服了以前方法的缺点，并在多个评估指标中表现出色。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.03279v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.03279.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-06\u003C\u002Fspan> | **MARE: Multi-Agents Collaboration Framework for Requirements Engineering**\u003Cbr>\u003Csub>机构: Peking University\u003Cbr>这项研究提出了一个创新的多代理合作框架，MARE，用于在整个需求工程过程中利用大型语言模型（LLMs）之间的合作。它针对RE中自动化任务的局限性进行了改进，并通过大规模实验的评估显示，MARE在需求建模和规格生成方面优于现有的先进方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.03256v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.03256.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-03\u003C\u002Fspan> | **What matters when building vision-language models?**\u003Cbr>\u003Csub>机构: Hugging Face, Sorbonne Université  \u003Cbr>本文通过广泛的实验探讨了影响VLMs性能的关键设计选择，提出了Idefics2这一高效的基础视觉语言模型，并在多个标准测试中证明了其优越性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.02246v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.02246.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-02\u003C\u002Fspan> | **Prometheus 2: An Open Source Language Model Specialized in Evaluating Other Language Models**\u003Cbr>\u003Csub>机构: KAIST AI, LG AI Research, Carnegie Mellon University\u003Cbr>PROMETHEUS 2是一个新型的开源评估LM，能在直接评估和成对排名两种格式下工作，并且在自定义评价标准上与人类评分和专有LMs的判断密切相关。该模型采用权重合并的方式训练，性能显著超过其他开源模型和某些专有模型。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.01535v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.01535.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fprometheus-eval\u002Fprometheus-eval)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-02\u003C\u002Fspan> | **How Can I Get It Right? Using GPT to Rephrase Incorrect Trainee Responses**\u003Cbr>\u003Csub>机构: Carnegie Mellon University\u003Cbr>该论文研究了利用GPT-4构建一个自动化反馈系统来帮助一对一节课中导师的训练，旨在减轻传统提供个性化教学反馈的资源负担，同时提供高质量和具体性的反馈，是知识检索与评估类的研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.00970v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.0097.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-01\u003C\u002Fspan> | **Is Bigger Edit Batch Size Always Better? -- An Empirical Study on Model Editing with Llama-3**\u003Cbr>\u003Csub>本研究对于大型语言模型编辑技术进行了实证分析，揭示了以往方法的潜在不足，并为未来的模型编辑方法提出了新方向和思路。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.00664v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.00664.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-01\u003C\u002Fspan> | **\"I'm Not Sure, But...\": Examining the Impact of Large Language Models' Uncertainty Expression on User Reliance and Trust**\u003Cbr>\u003Csub>机构: Princeton University, Microsoft\u003Cbr>该论文通过大规模实验研究表明，LLMs通过自然语言来表达不确定性，可以减少用户的过度依赖，并提高任务处理的准确度。尤其是第一人称表达形式对提高用户的准确性效果显著。此外，这项研究还强调在实际应用LLMs之前，进行用户测试以调整不确定性的表达方式的重要性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.00623v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.00623.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-01\u003C\u002Fspan> | **The Real, the Better: Aligning Large Language Models with Online Human Behaviors**\u003Cbr>\u003Csub>机构: Baidu Inc.\u003Cbr>本文提出了一种新型的大型语言模型对齐框架RLHB，它通过利用真实线上人类行为创新性地对LLMs进行调整和优化，克服了现有方法中的局限性，并通过实验有效地验证了其方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.00578v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.00578.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-01\u003C\u002Fspan> | **A Careful Examination of Large Language Model Performance on Grade School Arithmetic**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.00332v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.00332.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-01\u003C\u002Fspan> | **Can a Hallucinating Model help in Reducing Human \"Hallucination\"?**\u003Cbr>\u003Csub>机构: Stanford University, UC Berkeley\u003Cbr>本文探讨了如何使用大型语言模型（LLMs）来检测和对抗无根据信念，以及利用LLMs作为个性化的错误信息驳斥代理。研究者提出了评估并利用LLMs在识别逻辑陷阱方面的能力，并挑战人类无根据信念的新方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.00843v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.00843.md)  |\n\n---\n\n### 04月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-30\u003C\u002Fspan> | **Better & Faster Large Language Models via Multi-token Prediction**\u003Cbr>\u003Csub>机构: FAIR at Meta\u003Cbr>论文提出了一种新的训练大型语言模型的方法，通过预测多个标记而不是单个来提高样本效率，并展示了如何提升生成任务中的性能并加快推理速度。实验证明了这种方法在提升大型模型性能和推理效率方面的显著优势。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.19737v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.19737.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-30\u003C\u002Fspan> | **Multi-hop Question Answering over Knowledge Graphs using Large Language Models**\u003Cbr>\u003Csub>机构: Microsoft\u003Cbr>论文在多跳问答任务中提出针对不同的知识图谱数据集采用不同策略，展示了利用大型预训练语言模型在这些复杂问答任务中的强大能力。通过实验，验证了所提方法相比现有技术的优势。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.19234v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.19234.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-30\u003C\u002Fspan> | **Do Large Language Models Understand Conversational Implicature -- A case study with a chinese sitcom**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University\u003Cbr>该研究通过创建一个新的中文多轮对话数据集SwordsmanImp评估LLMs理解言外之意的能力，特别是在涉及大量上下文和轮换的对话中，并揭示了LLMs在理解和解释非字面含义时的挑战和局限。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.19509v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.19509.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fsjtu-compling\u002Fllm-pragmatics)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-30\u003C\u002Fspan> | **Iterative Reasoning Preference Optimization**\u003Cbr>\u003Csub>机构: FAIR at Meta, New York University\u003Cbr>本文提出了一种迭代推理偏好优化方法，通过在推理任务上应用偏好优化，特别是针对CoT推理，并通过在迭代训练中引入NLL损失项来提升模型性能。实验证明，该方法在数次迭代后能够有效提升推理性能，最终达到性能饱和。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.19733v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.19733.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-29\u003C\u002Fspan> | **Replacing Judges with Juries: Evaluating LLM Generations with a Panel of Diverse Models**\u003Cbr>\u003Csub>机构: Cohere\u003Cbr>该论文发展了一种以成员来自不同模型家族的小型模型组织成的“评审团”来评估LLM生成物的新方法，称为PoLL，显示出在不同任务中的适用性以及成本效率，减少了LLMs作为评判时存在的偏见问题。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.18796v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.18796.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-29\u003C\u002Fspan> | **LoRA Land: 310 Fine-tuned LLMs that Rival GPT-4, A Technical Report**\u003Cbr>\u003Csub>机构: Predibase\u003Cbr>本文提出通过LoRA对大型语言模型进行细化，可以明显提升模型的整体表现，降低在分类任务中出现的误差，且与开箱即用的GPT-4和GPT-3.5相比，有显著提高。同时，论文还考虑了成本限制，通过限制评估样本的数量来降低使用LLM API的财务负担。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.00732v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2405.00732.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-26\u003C\u002Fspan> | **When to Trust LLMs: Aligning Confidence with Response Quality**\u003Cbr>\u003Csub>机构: Alibaba Group\u003Cbr>本文提出了一个通过强化学习对齐信心和回答质量的方法（CONQORD）。该方法在没有客观实际标准的情况下通过自我评估来优化信心水平，并能够减少偏见，提升了模型预测的准确性和对齐性，但仍需对比绩效更高的方法进行改进。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.17287v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.17287.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-26\u003C\u002Fspan> | **A Comprehensive Evaluation on Event Reasoning of Large Language Models**\u003Cbr>\u003Csub>机构: Peking University, Advanced Institute of Big Data, Beihang University\u003Cbr>本文通过引入一个名为EV2的新基准测试来全面评估大型语言模型（LLMs）的事件推理能力。实验结果表明，虽然LLMs拥有事件推理能力，但与人类在运用事件模式知识方面并不一致，通过提供明确的指导，可以帮助模型更好地理解和执行事件推理任务。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.17513v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.17513.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-25\u003C\u002Fspan> | **Continual Learning of Large Language Models: A Comprehensive Survey**\u003Cbr>\u003Csub>机构: Rutgers University, Wuhan University, Huazhong University of Science and Technology\u003Cbr>本综述为LLMs的持续学习提供了一个全面的视角，特别强调了连续预训练（CPT）和领域自适应预训练（DAP）的研究领域。强调社区需更多关注，特别是开发实用、易于获取且广泛认可的评估基准方面，以及需要针对新兴LLMs学习范式特别设计的方法论。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.16789v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.16789.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FWang-ML-Lab\u002Fllm-continual-learning-survey)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-25\u003C\u002Fspan> | **How Far Are We to GPT-4V? Closing the Gap to Commercial Multimodal Models with Open-Source Suites**\u003Cbr>\u003Csub>机构: Shanghai AI Laboratory, SenseTime Research, Tsinghua University\u003Cbr>InternVL 1.5是一个强大的开源多模态语言模型，致力于弥补开源和商业模型在多模态理解方面的性能差距。该模型的优势包括改善视觉理解、处理动态高分辨率图像以及高质量的双语数据集的使用，这些它在多项任务中表现出色。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.16821v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.16821.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FOpenGVLab\u002FInternVL)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-25\u003C\u002Fspan> | **Hippocrates: An Open-Source Framework for Advancing Large Language Models in Healthcare**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.16621v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.16621.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-25\u003C\u002Fspan> | **Layer Skip: Enabling Early Exit Inference and Self-Speculative Decoding**\u003Cbr>\u003Csub>机构: Meta, University of Toronto, Carnegie Mellon University\u003Cbr>LayerSkip是一个新颖的端到端解决方案，能够在不牺牲准确率的情况下显著加速大型语言模型的推理过程，具有实际应用价值和潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.16710v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.1671.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-24\u003C\u002Fspan> | **From Local to Global: A Graph RAG Approach to Query-Focused Summarization**\u003Cbr>\u003Csub>机构: Microsoft Research, Microsoft Strategic Missions and Technologies, Microsoft Office of the CTO\u003Cbr>这篇论文提出了Graph RAG方法，这是一种以图谱索引和LLM生成摘要为基础的查询聚焦摘要技术，旨在处理因语料量过大而超出大型语言模型处理能力的问题。通过社区检测算法的帮助，该方法能在处理全局性问题并实现大规模文本分析方面取得显著成效。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.16130v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.1613.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-24\u003C\u002Fspan> | **Beyond Chain-of-Thought: A Survey of Chain-of-X Paradigms for LLMs**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University, UC San Diego, Duke University\u003Cbr>本文章是对大型语言模型（LLMs）中Chain-of-X (CoX) 方法的详尽调研，着重于将Chain-of-Thought (CoT) 的概念扩展至更广泛的应用，并为未来的研究提供了潜在的发展方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.15676v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.15676.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-23\u003C\u002Fspan> | **A Survey of Large Language Models on Generative Graph Analytics: Query, Learning, and Applications**\u003Cbr>\u003Csub>机构: Hong Kong Baptist University\u003Cbr>本文是一个综述性研究，主要调查了在图数据上使用的LLMs研究，探讨了LLMs在图任务泛化方面的优势，并提出了在该领域进行研究的未来方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.14809v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.14809.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-23\u003C\u002Fspan> | **CultureBank: An Online Community-Driven Knowledge Base Towards Culturally Aware Language Technologies**\u003Cbr>\u003Csub>机构: Stanford University, IBM Research\u003Cbr>该论文提出了一个用于构建文化知识库的通用流水线，并使用该流水线创建了CultureBank，这是一个包含TikTok和Reddit上文化描述符的知识库。论文还通过这个知识库评估了LLMs在文化意识方面的表现，并用于训练更具文化意识的语言模型，以此促进未来语言技术的文化意识发展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.15238v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.15238.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FSALT-NLP\u002FCultureBank)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-22\u003C\u002Fspan> | **Beyond Scaling: Predicting Patent Approval with Domain-specific Fine-grained Claim Dependency Graph**\u003Cbr>\u003Csub>机构: University of California San Diego, Carnegie Mellon University, University of Pennsylvania\u003Cbr>研究者提出了一种新颖的用于构建细粒度主张依赖图(FLAN图)的算法，该算法在大规模上显著改善了现状，并对现代LLMs在专利批准预测上的应用进行了广泛实验和分析，发现了LLMs的局限性，并为未来LLM方案的开发提供了有价值的参考。源代码和数据集已公开发布以促进未来的研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.14372v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.14372.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-22\u003C\u002Fspan> | **A Survey on Efficient Inference for Large Language Models**\u003Cbr>\u003Csub>机构: Tsinghua University\u003Cbr>本文提供了一个全面的综述关于提高大型语言模型推理效率的文献，并提出了一个包含数据层、模型层和系统层优化的分类法。同时，通过实验对关键技术进行了量化比较，指出了研究的未来方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.14294v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.14294.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-22\u003C\u002Fspan> | **A Survey on Self-Evolution of Large Language Models**\u003Cbr>\u003Csub>机构: Peking University, Alibaba Group, Nanyang Technological University\u003Cbr>这篇综述文章提出并总结了LLMs的自我进化方法，为推动自我进化的研究提供了概念框架和未来方向的见解，旨在推动下一代自我进化LLMs的发展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.14387v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.14387.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-22\u003C\u002Fspan> | **SnapKV: LLM Knows What You are Looking for Before Generation**\u003Cbr>\u003Csub>机构: University of Illinois Urbana-Champaign, Cohere, Princeton University\u003Cbr>该文章介绍了SnapKV，一种针对大型语言模型中关键值缓存问题的新方法。SnapKV通过智能压缩和选取重要的KV位置，有效地提升了长文本处理时的解码速度和内存效率，并在保持准确性的同时显著降低了计算成本。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.14469v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.14469.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-22\u003C\u002Fspan> | **Tree of Reviews: A Tree-based Dynamic Iterative Retrieval Framework for Multi-hop Question Answering**\u003Cbr>\u003Csub>机构: Tencent Inc., Harbin Institute of Technology\u003Cbr>论文提出了一种新的迭代检索框架TOR，它采用树形结构减少错误累积，并引入优化策略提高检索效率和质量。在实验中，TOR框架在多个数据集上达到了最先进的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.14464v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.14464.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-22\u003C\u002Fspan> | **LLMs Know What They Need: Leveraging a Missing Information Guided Framework to Empower Retrieval-Augmented Generation**\u003Cbr>\u003Csub>机构: Meituan\u003Cbr>本文提出的MIGRES框架是通过Exploiting LLMs识别缺失信息的能力来增强RAG的能力。研究结果证明了MIGRES在多个公共数据集上具有优越性，应对了RAG在理解复杂查询和检索相关文档方面的挑战。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.14043v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.14043.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-22\u003C\u002Fspan> | **Information Re-Organization Improves Reasoning in Large Language Models**\u003Cbr>\u003Csub>机构: Zhejiang University\u003Cbr>本论文提出了一个新颖的信息重组方法（InfoRE），通过重组上下文内容来揭示逻辑关系，从而增强LLMs的推理能力。方法在零次射击设置下对LLMs进行上下文理解的多跳推理任务测试，取得了显著效果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.13985v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.13985.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fhustcxx\u002FInfoRE)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-21\u003C\u002Fspan> | **AdvPrompter: Fast Adaptive Adversarial Prompting for LLMs**\u003Cbr>\u003Csub>机构: Meta AI (FAIR), Max-Planck-Institute for Intelligent Systems\u003Cbr>本文提出了一个新型的LLM，名为AdvPrompter，它利用新颖的算法，无需目标LLM的梯度信息，迅速生成人类可读的敌对提示，显著提升了生成速度并保持了提示的语义连贯性。此外，通过AdvPrompter的训练还能增强LLM面对越狱攻击的稳健性，而不牺牲性能表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.16873v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.16873.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-19\u003C\u002Fspan> | **Relevant or Random: Can LLMs Truly Perform Analogical Reasoning?**\u003Cbr>\u003Csub>机构: Nanyang Technological University, Princeton University, Salesforce Research\u003Cbr>本论文系统地评估了LLMs进行类比推理的能力，并提出了两种可以在显著降低推理成本的同时获得更好性能的方法。研究结果表明，与以前认为相关性至关重要的观点相反，自我生成的无关例子在某些任务上可以达到相当甚至更好的性能。希望本研究能刺激更多关于自我生成上下文设计的进一步研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.12728v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.12728.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-19\u003C\u002Fspan> | **LLM-R2: A Large Language Model Enhanced Rule-based Rewrite System for Boosting Query Efficiency**\u003Cbr>\u003Csub>机构: Nanyang Technological University, DAMO Academy Alibaba Group, Singapore University of Technology and Design\u003Cbr>LLM-R2是一种利用大型语言模型增强的查询重写系统，通过自动选择一组给定重写规则中的有效规则，有效地提升了查询重写的执行效率，解决了目前其他方法的局限性，并在多个数据集上取得了优越的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.12872v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.12872.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-18\u003C\u002Fspan> | **mABC: multi-Agent Blockchain-Inspired Collaboration for root cause analysis in micro-services architecture**\u003Cbr>\u003Csub>机构:  Beihang University, Beijing Information Science and Technology University\u003Cbr>mABC是一种创新的框架，利用了大语言模型（LLMs）及多代理合作，并由区块链启发式的决策过程促成，针对云原生技术中微服务架构的根本原因分析（RCA）。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.12135v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.12135.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-18\u003C\u002Fspan> | **RAGCache: Efficient Knowledge Caching for Retrieval-Augmented Generation**\u003Cbr>\u003Csub>机构: Peking University, ByteDance Inc.\u003Cbr>通过针对性的缓存系统设计和中间状态共享，RAGCache优化了RAG流程的性能，显著提升了处理速度并减少了计算资源的开销。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.12457v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.12457.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-18\u003C\u002Fspan> | **Generating Diverse Criteria On-the-Fly to Improve Point-wise LLM Rankers**\u003Cbr>\u003Csub>机构: Westlake University, Alibaba Group, Zhejiang University\u003Cbr>该论文提出了MCRanker模型，通过构建虚拟专业评注团队和生成多角度评估标准，有效提升了LLM排序器的一致性与全面性，可广泛适应于各类数据集，改进了排序性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.11960v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.1196.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-18\u003C\u002Fspan> | **EVIT: Event-Oriented Instruction Tuning for Event Reasoning**\u003Cbr>\u003Csub>机构: Key Laboratory of High Confidence Software Technologies (PKU), MOE, China, School of Computer Science, Peking University, Advanced Institute of Big Data\u003Cbr>EVIT通过提出面向事件的指令调谐（Event-Oriented Instruction Tuning）和事件四元组的概念，解决了现有小型基于指令调谐模型在事件推理任务中的表现不足问题。实验结果表明，EVIT在事件推理任务上的表现优于其他模型。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.11978v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.11978.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-18\u003C\u002Fspan> | **Toward Self-Improvement of LLMs via Imagination, Searching, and Criticizing**\u003Cbr>\u003Csub>该论文介绍了一种名为ALPHALLM的新型框架，通过蒙特卡洛树搜索（MCTS）和大型语言模型（LLMs）的结合，实现了LLMs的自我提高，无需额外的注解数据。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.12253v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.12253.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-18\u003C\u002Fspan> | **Who Validates the Validators? Aligning LLM-Assisted Evaluation of LLM Outputs with Human Preferences**\u003Cbr>\u003Csub>机构: UC Berkeley\u003Cbr>这篇论文提出了一个与人类偏好相一致的LLM辅助评估界面EvalGen，通过混合主动式方法解决了LLM生成的评估功能评估质量受信任度的问题。论文还探讨了用户如何定义和使用评估标准的动态性，以及在实际应用中所面临的挑战。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.12272v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.12272.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-17\u003C\u002Fspan> | **AgentKit: Flow Engineering with Graphs, not Coding**\u003Cbr>\u003Csub>机构: Carnegie Mellon University, NVIDIA, Microsoft\u003Cbr>论文引入了一种新型的 LLM 提示框架 AgentKit，针对多功能代理问题，通过模块化组件和直观设计支持构建和微调复杂的代理思维过程。AgentKit 显示出实现先进代理能力和降低用户参与门槛的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.11483v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.11483.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fholmeswww\u002FAgentKit)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-17\u003C\u002Fspan> | **Unifying Bias and Unfairness in Information Retrieval: A Survey of Challenges and Opportunities with Large Language Models**\u003Cbr>\u003Csub>机构: Renmin University of China, Chinese Academy of Sciences, Huawei Technologies\u003Cbr>这篇综述文章提供了一个新颖的视角来理解LLMs和IR系统中的偏见和不公平为分布失配问题，并归类了各种缓解策略。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.11457v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.11457.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FKID-22\u002FLLM-IR-Bias-Fairness-Survey)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-17\u003C\u002Fspan> | **A Deep Dive into Large Language Models for Automated Bug Localization and Repair**\u003Cbr>\u003Csub>机构: University of Virginia, Purdue University, Amazon Web Services\u003Cbr>这篇论文提出了一种名为Toggle的新方法，该方法使用token粒度的bug定位并修复，克服了现有行粒度方法的局限，通过输入设计和LLMs的微调，大幅提升了错误修复的准确性，并在多个数据集上取得优异的表现，为APR领域带来新的进展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.11595v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.11595.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-17\u003C\u002Fspan> | **Many-Shot In-Context Learning**\u003Cbr>\u003Csub>机构: Google DeepMind\u003Cbr>本论文主要贡献包括系统评估LLM在不同规模上下文样例的性能，导入reinforced ICL和unsupervised ICL以减少样例依赖，并发现MS-ICL可以克服预训练偏差学习高维数值预测任务。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.11018v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.11018.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-16\u003C\u002Fspan> | **How faithful are RAG models? Quantifying the tug-of-war between RAG and LLMs' internal prior**\u003Cbr>\u003Csub>机构: Stanford University\u003Cbr>论文通过分析在RAG环境下LLMs内部知识与检索信息之间的张力，发现了LLMs倾向于遵循RAG信息的程度与模型在无上下文情况下的回答信心成反比。研究基于跨超过1200个问题的六个领域数据集，揭示了在模型的预训练知识与检索到的信息之间的固有冲突。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.10198v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.10198.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-16\u003C\u002Fspan> | **CoTAR: Chain-of-Thought Attribution Reasoning with Multi-level Granularity**\u003Cbr>\u003Csub>机构: Intel Labs\u003Cbr>本文提出的CoTAR方法针对LLMs在问答任务中倾向于生成不准确归因的问题。通过在输出生成前进行推理，并在不同的归因粒度级别上引导模型，显著提升了模型在答案质量和归因精确度上的表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.10513v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.10513.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-16\u003C\u002Fspan> | **Self-playing Adversarial Language Game Enhances LLM Reasoning**\u003Cbr>\u003Csub>机构: Tencent AI Lab\u003Cbr>本论文提出了一个名为SPAG的新型训练方案，通过自我对抗性语言游戏的自我播放，有效提升了LLMs的推理能力，并且其改进是可以通过迭代过程持续增强的。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.10642v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.10642.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FLinear95\u002FSPAG)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-15\u003C\u002Fspan> | **Learn Your Reference Model for Real Good Alignment**\u003Cbr>\u003Csub>机构: Tinkoff\u003Cbr>本论文提出了一个名为Trust Region DPO (TR-DPO) 的新方法，该方法通过交互式地更新参考策略的参数，显著改进了语言模型的对齐问题。实验结果显示，TR-DPO在两个数据集上均优于DPO方法，有效提升了模型的多参数性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.09656v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.09656.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-15\u003C\u002Fspan> | **Compression Represents Intelligence Linearly**\u003Cbr>\u003Csub>机构: The Hong Kong University of Science and Technology, Tencent\u003Cbr>这篇论文通过实证研究，证明了LLMs在下游任务性能与它们的压缩效率之间存在着几乎线性的相关性，为“更好的压缩能力表明了更高的智能”这一长期信念提供了支持。同时，提出了使用压缩效率作为评估LLMs性能的无监督度量标准的建议。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.09937v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.09937.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-14\u003C\u002Fspan> | **Emerging Platforms Meet Emerging LLMs: A Year-Long Journey of Top-Down Development**\u003Cbr>\u003Csub>本论文的研究主要集中在如何支持和优化新兴计算平台下的机器学习模型部署，并提出了一个框架TAPML，旨在通过顶层方法和通用运行时环境促进模型部署的广泛性、便利性和强大性，文中提供了实际部署案例作为发展ML系统的深入见解和最佳实践。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.09151v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.09151.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-13\u003C\u002Fspan> | **Intuition-aware Mixture-of-Rank-1-Experts for Parameter Efficient Finetuning**\u003Cbr>\u003Csub>机构: Nanjing University, University of California\u003Cbr>论文提出了一个新的用于大型语言模型多任务微调的框架Intuition-MoR1E，该框架借鉴人类认知神经科学原理，并利用排名1专家形式来管理直觉，显著提高了参数效率和多任务微调效果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.08985v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.08985.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-12\u003C\u002Fspan> | **Megalodon: Efficient LLM Pretraining and Inference with Unlimited Context Length**\u003Cbr>\u003Csub>机构: AI at Meta, University of Southern California, Carnegie Mellon University\u003Cbr>这篇论文介绍了MEGALODON，一个高效处理无限上下文长度序列的神经网络架构。通过引入多项创新技术，MEGALODON在长序列模型任务中显示出比Transformer更高的效率和效能，同时在不同规模和模态的基准测试中都取得了稳健的改进。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.08801v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.08801.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FXuezheMax\u002Fmegalodon)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-11\u003C\u002Fspan> | **Rho-1: Not All Tokens Are What You Need**\u003Cbr>\u003Csub>机构: Xiamen University, Tsinghua University, Microsoft\u003Cbr>本文提出了RHO-1，这是一种利用选择性语言建模（SLM）的新型语言模型。该模型在预训练中专注于对有用的令牌进行训练，这种方法在数学领域的连续预训练中显示出卓越性能，能够更快地达到基线性能，并且在少量令牌的情况下达到最新的状态。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.07965v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.07965.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-11\u003C\u002Fspan> | **Interactive Prompt Debugging with Sequence Salience**\u003Cbr>\u003Csub>这篇论文提出了一个名为序列显著性（Sequence Salience）的系统，它扩展了现有的输入显著性（IS）方法，以支持复杂的LLM提示调试。该工具提供实时交互式调试，并降低了实践者的认知负荷，支持根据显著性结果快速迭代提示，与开发者的思维模型更加对齐。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.07498v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.07498.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-11\u003C\u002Fspan> | **Decomposing Label Space, Format and Discrimination: Rethinking How LLMs Respond and Solve Tasks via In-Context Learning**\u003Cbr>\u003Csub>机构: Nanyang Technological University\u003Cbr>本文研究了ICL在提升任务性能方面的生效机制，通过分解ICL的贡献因素，发现ICL通过精细调整标签空间和格式来显著提升性能，同时强调了选择合适演示示例的重要性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.07546v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.07546.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-11\u003C\u002Fspan> | **ControlNet++: Improving Conditional Controls with Efficient Consistency Feedback**\u003Cbr>\u003Csub>机构: University of Central Florida, ByteDance Inc\u003Cbr>ControlNet++通过优化生成图像与条件控制之间的像素级一致性，并通过高效的奖励微调策略减少了与图像采样相关的时间和内存成本，显著改善了在多种条件控制下的可控性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.07987v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.07987.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-11\u003C\u002Fspan> | **ChatGPT Can Predict the Future when it Tells Stories Set in the Future About the Past**\u003Cbr>\u003Csub>机构: Baylor University\u003Cbr>本研究通过分析ChatGPT-3.5和ChatGPT-4的预测能力，揭示了LLMs在推理方面的新潜力。研究证明了“未来叙事”提示能够显著提升预测的准确性，为LLMs在分析环境中的潜在应用提供了有益见解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.07396v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.07396.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-11\u003C\u002Fspan> | **OSWorld: Benchmarking Multimodal Agents for Open-Ended Tasks in Real Computer Environments**\u003Cbr>\u003Csub>机构: The University of Hong Kong, CMU, Salesforce Research\u003Cbr>OSWORLD提供了一个新的评估环境，解决了现有基准测试的局限性，为开发能在真实计算机环境中完成开放式任务的多模态代理提供了基础。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.07972v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.07972.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-10\u003C\u002Fspan> | **Leave No Context Behind: Efficient Infinite Context Transformers with Infini-attention**\u003Cbr>\u003Csub>机构: Google\u003Cbr>该研究提出一种全新的注意力机制Infini-attention，它通过将压缩记忆与标准的点积注意力相结合，并在设计上支持插拔式的持续预训练和长上下文调整，使得LLMs能以有界的内存和计算资源处理无限长的上下文。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.07143v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.07143.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-10\u003C\u002Fspan> | **Superposition Prompting: Improving and Accelerating Retrieval-Augmented Generation**\u003Cbr>\u003Csub>机构: Apple, Cupertino, CA, USA\u003Cbr>该论文提出了一种新的检索增强生成（RAG）提示方法——“超级叠加提示”，用于处理大型语言模型处理长文本时遇到的问题，并在没有额外训练或微调的情况下显著提高了时间效率和准确性。这一方法在众多预训练模型上得到验证，并且作者计划发布一个开源代码实现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.06910v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.0691.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-10\u003C\u002Fspan> | **Transferable and Efficient Non-Factual Content Detection via Probe Training with Offline Consistency Checking**\u003Cbr>\u003Csub>机构: Renmin University of China, Tsinghua University\u003Cbr>本论文提出了一种通过离线自我一致性检查训练探测模型的新方法PINOS，有效地解决了现有真实性检测方法的限制。PINOS提高了过程的转移能力和效率，并且在真实性检测和问答基准测试上取得了超越现有方法的结果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.06742v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.06742.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-10\u003C\u002Fspan> | **\"We Need Structured Output\": Towards User-centered Constraints on Large Language Model Output**\u003Cbr>\u003Csub>机构: Google Research\u003Cbr>本论文探索如何为大型语言模型（LLM）输出实现用户中心的约束，通过调查行业专业人士来了解不同场景和需求。重点是提高开发者在开发、测试和整合LLM过程中的效率，并通过满足特定的输出格式和用户界面要求来增强最终用户的体验。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.07362v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.07362.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-09\u003C\u002Fspan> | **THOUGHTSCULPT: Reasoning with Intermediate Revision and Search**\u003Cbr>\u003Csub>机构: UC Berkeley\u003Cbr>THOUGHTSCULPT作为一个基于图的框架，通过内嵌的自我修正机制，能够让LLMs在生成新的思维节点的同时迭代地改进之前的输出，特别在需要持续修正和修改的任务中表现出卓越的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.05966v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.05966.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-09\u003C\u002Fspan> | **Event-enhanced Retrieval in Real-time Search**\u003Cbr>\u003Csub>机构: Tencent Search, Platform and Content Group\u003Cbr>EER是一种新型方法，针对实时搜索中的“语义漂移”问题，通过改进EBR模型和加入对比学习及事件三元组生成任务提升检索性能。该方法通过实验验证了其有效性，并可能为信息检索领域提供新的视角。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.05989v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.05989.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fopen-event-hub\u002FEvent-enhanced_Retrieval)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-09\u003C\u002Fspan> | **RULER: What's the Real Context Size of Your Long-Context Language Models?**\u003Cbr>\u003Csub>机构: NVIDIA  \u003Cbr>本论文为长上下文LMs提出了新的评估工具RULER，并开源，用于测试LMs在复杂任务和长上下文理解能力上的表现，并在各种模型和任务复杂度上进行了分析，推动了长上下文LMs的未来研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.06654v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.06654.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-09\u003C\u002Fspan> | **Privacy Preserving Prompt Engineering: A Survey**\u003Cbr>\u003Csub>机构: University of Arkansas\u003Cbr>这篇调研论文为了在使用LLMs进行ICL和一般提示的过程中保护隐私，提供了一个关于在这一范畴下的隐私保护方法的系统性概述，有利于推动社区在隐私保护方面的进一步研究和探索。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.06001v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.06001.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-08\u003C\u002Fspan> | **LayoutLLM: Layout Instruction Tuning with Large Language Models for Document Understanding**\u003Cbr>\u003Csub>机构: Alibaba Group, Zhejiang University\u003Cbr>该论文成功提出了LayoutLLM模型及其布局指导的调整策略，显著提高了模型对文档布局信息的理解和利用，尤其在零样本文档理解任务上表现出了卓越的效果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.05225v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.05225.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FAlibabaResearch\u002FAdvancedLiterateMachinery\u002Ftree\u002Fmain\u002FDocumentUnderstanding)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-08\u003C\u002Fspan> | **Evaluating Interventional Reasoning Capabilities of Large Language Models**\u003Cbr>\u003Csub>机构: Université de Montréal, Google DeepMind, ServiceNow Research\u003Cbr>本文对大型语言模型（LLMs）因果推理能力进行了评估。通过提出干预效果预测，它主要测试LLMs在干预实验后如何更新自己对事实的理解。结果显示GPT-4在某些条件下能够准确预测干预效果，但提示设计的微小变化会显著影响其表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.05545v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.05545.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-08\u003C\u002Fspan> | **Know When To Stop: A Study of Semantic Drift in Text Generation**\u003Cbr>\u003Csub>机构: FAIR, Meta, Anthropic\u003Cbr>本文为理解和测量语言模型在长文本生成中的语义漂移现象提供了工具。通过早停和重采样-重新排序等方法，显著提高了事实准确性，并为如何平衡信息量与事实准确性提供了可能的解决策略。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.05411v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.05411.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-08\u003C\u002Fspan> | **LLM-Augmented Retrieval: Enhancing Retrieval Models Through Language Models and Doc-Level Embedding**\u003Cbr>\u003Csub>机构: Meta\u003Cbr>该论文成功提出并验证了一个增强型文档级嵌入的LLM-augmented检索框架，不仅通过生成合成的相关查询和标题增加了文档嵌入的上下文信息，还改进了检索模型训练的关键步骤，从而提升检索模型的性能和鲁棒性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.05825v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.05825.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-07\u003C\u002Fspan> | **Radial Networks: Dynamic Layer Routing for High-Performance Large Language Models**\u003Cbr>\u003Csub>机构: Cornell University\u003Cbr>本论文提出了径向网络，这是一种新型神经网络结构，通过动态层稀疏性和一个经过训练的路由模块来实现令牌级的层间路由。这不仅提高了模型的性能，还显著降低了计算和服务成本，为大型语言模型的进一步扩展提供了可能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.04900v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.049.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-07\u003C\u002Fspan> | **Prompting Large Language Models for Zero-shot Essay Scoring via Multi-trait Specialization**\u003Cbr>\u003Csub>机构: Peking University\u003Cbr>该研究提出了一个零样本的大型语言模型作文评分框架（MTS），通过多轮对话来为作文的不同写作特质打分，并采用最小-最大缩放和异常值截断机制来得到最终得分。MTS在准确度上显著优于直接提示评分方法，并在小型化部署中优于ChatGPT，提供了监督学习之外的零样本作文评分方案。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.04941v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.04941.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-04\u003C\u002Fspan> | **Direct Nash Optimization: Teaching Language Models to Self-Improve with General Preferences**\u003Cbr>\u003Csub>机构: Microsoft Research\u003Cbr>这篇论文介绍了DNO——一种能够将对比学习的简洁性与从优化一般性偏好而来的理论普适性相结合的算法。DNO在后训练大型语言模型方面显著提升性能，它的成功实证了通过优化一般偏好来指导模型学习与人类价值观保持一致是可能的。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.03715v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.03715.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-04\u003C\u002Fspan> | **ReFT: Representation Finetuning for Language Models**\u003Cbr>\u003Csub>机构: Stanford University, Pr(Ai)2R Group\u003Cbr>这篇论文介绍了一种新的语言模型微调方法LoReFT，它在资源效率和模型控制能力方面显著优于现有的参数有效调整（PEFTs）方法。实验表明，该方法在多个NLP领域的任务上实现了新的最佳性能，同时保持了较少的参数需求和较高的可解释性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.03592v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.03592.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fstanfordnlp\u002Fpyreft)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-04\u003C\u002Fspan> | **AutoWebGLM: Bootstrap And Reinforce A Large Language Model-based Web Navigating Agent**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.03648v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.03648.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FTHUDM\u002FAutoWebGLM)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-03\u003C\u002Fspan> | **PromptRPA: Generating Robotic Process Automation on Smartphones from Textual Prompts**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University, CMU\u003Cbr>文章介绍了PromptRPA系统，这是一个解决RPA在移动设备上应用受限的有效方案。通过利用多代理框架和在线教程，该系统能够解释各种文本提示，解决大范围的RPA任务。性能评估显示成功率显著提高，证明了文本驱动控制在RPA领域的可行性，并开辟了功能增强和适用性扩展的新方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.02475v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.02475.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-02\u003C\u002Fspan> | **CMAT: A Multi-Agent Collaboration Tuning Framework for Enhancing Small Language Models**\u003Cbr>\u003Csub>机构: East China Jiaotong University, Guangdong University of Technology, University of Toronto\u003Cbr>该论文的核心贡献是提出了CMAT框架，这是一种创新方法，可实现多智能体系统内部的动态、实时记忆更新，并设计了一种新型的角色扮演机制，用于精准的任务分配和提升代理间的通信，以此显著提高整体性能和合作效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.01663v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.01663.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-02\u003C\u002Fspan> | **Octopus v2: On-device language model for super agent**\u003Cbr>\u003Csub>机构: Stanford University\u003Cbr>这篇论文解决了边缘设备上LLM的部署和功能调用效率问题，通过引入特殊的训练方法和减少推理时需处理的上下文量，显著提高了在设备上进行函数调用的准确率和降低了延迟，实验结果表明其对提升函数调用任务的性能具有显著影响。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.01744v3)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.01744.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-02\u003C\u002Fspan> | **Long-context LLMs Struggle with Long In-context Learning**\u003Cbr>\u003Csub>机构: University of Waterloo, Carnegie Mellon University\u003Cbr>这篇文章提出了一个新的评估基准，LongICLBench，用于评估LLMs在处理长输入任务时的性能，以及LLMs对输入序列中实例位置的敏感性。这一工作有助于更好地理解和改进大型语言模型在长文本处理方面的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.02060v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.0206.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-02\u003C\u002Fspan> | **LLM-ABR: Designing Adaptive Bitrate Algorithms via Large Language Models**\u003Cbr>\u003Csub>机构: Microsoft\u003Cbr>论文探讨了大型语言模型（LLMs）如何辅助设计自适应比特率（ABR）算法，通过生成多样化的候选算法，并运用早停机制在网络模拟器中进行测试，从而有效地筛选出最有效的算法设计。评估显示在特定网络场景中，利用LLMs可以显著提高ABR算法的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.01617v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.01617.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-02\u003C\u002Fspan> | **Advancing LLM Reasoning Generalists with Preference Trees**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.02078v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.02078.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-02\u003C\u002Fspan> | **Long-context LLMs Struggle with Long In-context Learning**\u003Cbr>\u003Csub>机构: University of Waterloo, Carnegie Mellon University\u003Cbr>这项研究为评估大型语言模型处理长上下文任务的能力提供了一个新的基准——LongICLBench，并显示了随着任务难度增加，LLMs的性能普遍下降，并且模型的长上下文学习能力受到提示中标签位置分布的影响。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.02060v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.0206.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-01\u003C\u002Fspan> | **AIOps Solutions for Incident Management: Technical Guidelines and A Comprehensive Literature Review**\u003Cbr>\u003Csub>机构: University of Lyon, INSA Lyon, Infologic\u003Cbr>本文提供了 AIOps 领域中事件管理的全面文献回顾，旨在通过提供结构化的知识、确定知识空白和为该领域的未来发展奠定基础。论文建立了 AIOps 的统一术语和分类法，揭示了现有的挑战，并提供了公开数据集，为未来的研究提供了方向和基础。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.01363v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.01363.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-01\u003C\u002Fspan> | **Mapping the Increasing Use of LLMs in Scientific Papers**\u003Cbr>\u003Csub>机构: Stanford University, UC Santa Barbara\u003Cbr>本文是首次进行的，跨arXiv、bioRxiv和Nature组合上发表的文章的系统性、大规模分析，采用的统计估计方法可以在群体层面上测量LLM修改内容的普及程度，为理解LLM在科学写作中的应用提供了宝贵的洞察。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.01268v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.01268.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-01\u003C\u002Fspan> | **Prompt-prompted Mixture of Experts for Efficient LLM Generation**\u003Cbr>\u003Csub>机构: CMU\u003Cbr>GRIFFIN是一个不需要训练的MoE系统，利用LLMs前馈块内的flocking现象在不同的激活函数下提高模型效率，保持性能的同时减少了计算成本。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.01365v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.01365.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fhdong920\u002FGRIFFIN)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-01\u003C\u002Fspan> | **Efficiently Distilling LLMs for Edge Applications**\u003Cbr>\u003Csub>机构: IBM Research  \u003Cbr>本论文提供了一种新的针对边缘设备进行LLMs蒸馏的方法，允许LPFT同时显著减少模型尺寸和训练成本，尤其是优化了解码器模型的压缩抵抗和训练时长。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.01353v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.01353.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-01\u003C\u002Fspan> | **LLM-RadJudge: Achieving Radiologist-Level Evaluation for X-Ray Report Generation**\u003Cbr>\u003Csub>机构: Microsoft Research Asia\u003Cbr>这篇论文提出了一个基于大型语言模型的放射学报告评价新框架——LLM-RadJudge，能够有效提高放射学报告评价的临床相关性和一致性。并通过知识蒸馏技术实现了小型模型的开发，既降低了评价成本也提高了可访问性，为放射学报告生成研究和实际应用提供了有力的支撑。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.00998v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.00998.md)  |\n\n---\n\n### 03月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-28\u003C\u002Fspan> | **Jamba: A Hybrid Transformer-Mamba Language Model**\u003Cbr>\u003Csub>机构: AI21 Labs\u003Cbr>Jamba是基于混合Transformer-Mamba体系结构的新型大型语言模型，突破了处理长上下文的限制，并且通过应用专家混合（MoE）组件提高了模型吞吐量，同时保持了较小的内存足迹。此模型标志着在大型语言模型领域的一个新方向，并展示了高效训练与强大性能之间的可能平衡。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.19887v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.19887.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-28\u003C\u002Fspan> | **sDPO: Don't Use Your Data All at Once**\u003Cbr>\u003Csub>此论文提出了一个新的步骤化DPO（sDPO）方法，通过分步骤利用偏好数据集，并使用先前步骤中的对齐模型作为当前步骤的参考模型，有效提高了最终模型的性能与对齐度。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.19270v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.1927.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-27\u003C\u002Fspan> | **Rejection Improves Reliability: Training LLMs to Refuse Unknown Questions Using RL from Knowledge Feedback**\u003Cbr>\u003Csub>这项工作通过提出RLKF框架并定义了新的模型可靠性评估指标，有效地解决了LLMs的幻觉问题，并提升了LLMs的诚实度和可靠性，显示出打造更值得信赖的AI系统的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.18349v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.18349.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-27\u003C\u002Fspan> | **BLADE: Enhancing Black-box Large Language Models with Small Domain-Specific Models**\u003Cbr>\u003Csub>机构: DCST Tsinghua University, Beijing Institute of Technology, Huawei Cloud BU\u003Cbr>这项研究提出了一个新架构BLADE，可以通过小型领域特定模型增强黑盒大型语言模型，并解决了大型模型在特定领域应用中的知识不足问题。BLADE证明了其在性能和成本上都是一个有效的解决方案。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.18365v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.18365.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-26\u003C\u002Fspan> | **COIG-CQIA: Quality is All You Need for Chinese Instruction Fine-tuning**\u003Cbr>\u003Csub>机构: Shenzhen Institute of Advanced Technology, CAS; M-A-P; Institute of Automation, CAS\u003Cbr>本文提出了COIG-CQIA数据集，这是一个针对中文指令调优的高质量数据集，能够促进与人类交互的对齐。研究强调了高质量数据源在模型微调中的重要性，并通过实验展示了数据集创建策略和微调方法对模型性能的显著影响。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.18058v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.18058.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-26\u003C\u002Fspan> | **LISA: Layerwise Importance Sampling for Memory-Efficient Large Language Model Fine-Tuning**\u003Cbr>\u003Csub>机构: The Hong Kong University of Science and Technology, University of Illinois Urbana-Champaign\u003Cbr>这篇论文提出的LISA策略，通过分层权重重要性采样，实现了在保持类似于LoRA的内存效率的同时，提升了大型语言模型的微调效率和性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.17919v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.17919.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-26\u003C\u002Fspan> | **The Unreasonable Ineffectiveness of the Deeper Layers**\u003Cbr>\u003Csub>机构: Meta FAIR, UMD\u003Cbr>本论文针对流行的开权重预训练LLMs提出了一种简单的层剪枝策略，并展示了在删除大量层后LLMs对性能影响较小的实证研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.17887v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.17887.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-25\u003C\u002Fspan> | **AIOS: LLM Agent Operating System**\u003Cbr>\u003Csub>机构: Rutgers University  \u003Cbr>AIOS作为一个LLM代理操作系统，通过设计特定的内核和模块，克服了之前资源调度和上下文管理等领域的挑战，为LLM代理的性能和效率提供了改进，为AIOS生态系统的未来发展和部署铺平了道路。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.16971v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.16971.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fagiresearch\u002FAIOS)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-22\u003C\u002Fspan> | **Can large language models explore in-context?**\u003Cbr>\u003Csub>机构: Microsoft Research, Carnegie Mellon University\u003Cbr>这篇论文调查了当代大型语言模型（LLMs）能否在上下文中从事探索的问题，特别是在没有训练干预的情况下。经过一系列实验，作者发现只有在特定的配置下LLMs才能稳健地进行探索。研究表明，没有适当的提示设计，即使是最先进的LLMs也可能无法在更复杂的环境中进行探索，而在这些环境中外部总结历史可能是一个非平凡的算法设计问题。这项工作提示了LLMs可能需要有针对性的算法干预才能在复杂环境中有效地工作。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.15371v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.15371.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-20\u003C\u002Fspan> | **Chain-of-Interaction: Enhancing Large Language Models for Psychiatric Behavior Understanding by Dyadic Contexts**\u003Cbr>\u003Csub>机构: University of Memphis, San Francisco Veterans Affairs Health Care System, University of California San Francisco\u003Cbr>本文通过引入互动链提示方法，有效地提升了大型语言模型在理解精神病行为方面的能力，特别是在动机面谈语境下的应用。通过结构化的提示和评估方法，能够模拟专业心理治疗人员的思维过程，对模型进行了有效的域知识教育，相比传统方法取得了更好的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.13786v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.13786.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-19\u003C\u002Fspan> | **Towards Robots That Know When They Need Help: Affordance-Based Uncertainty for Large Language Model Planners**\u003Cbr>\u003Csub>机构: University of Maryland  \u003Cbr>论文提出了一种新方法LAP，通过结合大型语言模型(LLMs)和场景可以供性来减少规划任务中的幻觉并实现不确定性对齐。通过在模拟和现实世界机器人操作任务的实验中表明，LAP可以显著提高成功率并减少对人类帮助的依赖，从而推动智能机器人领域的进步。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.13198v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.13198.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-18\u003C\u002Fspan> | **Decoding Compressed Trust: Scrutinizing the Trustworthiness of Efficient LLMs Under Compression**\u003Cbr>\u003Csub>机构: University of Texas at Austin, Drexel University, MIT\u003Cbr>本文首次对经过压缩的LLMs在多个信任维度上进行了全面评估，并提供了压缩时同时考虑效率和信任度的实用建议。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.15447v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.15447.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-15\u003C\u002Fspan> | **Uni-SMART: Universal Science Multimodal Analysis and Research Transformer**\u003Cbr>\u003Csub>机构: DP Technology, AI for Science Institute Beijing\u003Cbr>Uni-SMART 是一款创新的模型，旨在深入理解多模态科学文献，它在多个领域相对于其他顶尖文本焦点的 LLMs 显示出了更优越的性能，并有潜力改变我们与科学文献的互动方式。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.10301v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.10301.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-15\u003C\u002Fspan> | **VideoAgent: Long-form Video Understanding with Large Language Model as Agent**\u003Cbr>\u003Csub>机构: Stanford University\u003Cbr>VideoAgent通过模仿人类的认知过程，在长视频理解方面迈出了重要的一步，强调了在长时间跨度内对视觉信息进行推理的重要性。此工作不仅为长视频理解设立了新的基准，也为未来该方向的研究提供了启示。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.10517v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.10517.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-15\u003C\u002Fspan> | **RAFT: Adapting Language Model to Domain Specific RAG**\u003Cbr>\u003Csub>机构: UC Berkeley\u003Cbr>本论文提出的RAFT方法针对训练大型语言模型在特定领域内以“开卷”模式回答问题进行了创新，强化了模型的推理能力和对干扰文档的抵抗力，同时通过链式推理方式改进了模型生成解答的准确性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.10131v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.10131.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-13\u003C\u002Fspan> | **Call Me When Necessary: LLMs can Efficiently and Faithfully Reason over Structured Environments**\u003Cbr>\u003Csub>机构: Nanjing University, Microsoft\u003Cbr>Readi框架提出了一种高效并真实地在大规模结构化环境中进行推理的方法，它充分发挥了LLMs的规划能力，并通过动态反馈优化推理路径，实现了在多跳推理任务中的显著改进。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.08593v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.08593.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-13\u003C\u002Fspan> | **Steering LLMs Towards Unbiased Responses: A Causality-Guided Debiasing Framework**\u003Cbr>\u003Csub>机构: ByteDance Research, University of Maryland College Park, Carnegie Mellon University\u003Cbr>该论文成功提出了一个新的因果关系引导的去偏见框架，并通过实证研究验证了其有效性，既可以整合现有的基于提示的去偏见方法，也为诱导无偏见推理提出了新的途径。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.08743v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.08743.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-13\u003C\u002Fspan> | **Scaling Instructable Agents Across Many Simulated Worlds**\u003Cbr>\u003Csub>此论文提出的SIMA项目旨在创建一个能够在各种模拟3D环境中根据任意语言指令进行操作的AI系统。该系统的设计致力于解决在感知和体化行动中具体化语言的挑战，以及在许多不同环境中实现通用性和可扩展性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.10179v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2404.10179.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-12\u003C\u002Fspan> | **Chronos: Learning the Language of Time Series**\u003Cbr>\u003Csub>机构: Amazon Web Services, UC San Diego, University of Freiburg\u003Cbr>Chronos作为一个预训练的时间序列预测模型框架，在零样本和标准预测任务中表现出色。它利用了数据增强策略和公共数据集的优势，证实了时间序列预测中语言模型架构通用性的潜力，为将来的时间序列模型提供了新的研究方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.07815v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.07815.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-11\u003C\u002Fspan> | **RA-ISF: Learning to Answer and Understand from Retrieval Augmentation via Iterative Self-Feedback**\u003Cbr>\u003Csub>机构: Zhejiang University, Southeast University, Massachusetts Institute of Technology\u003Cbr>RA-ISF是一个创新的检索增强框架，通过迭代问题分解和三个子模块的迭代处理来提高LLMs的问题解决能力，并有效降低不相关文本的干扰，显著提升知识检索的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.06840v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.0684.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-11\u003C\u002Fspan> | **ERA-CoT: Improving Chain-of-Thought through Entity Relationship Analysis**\u003Cbr>\u003Csub>机构: Zhejiang University, Southeast University\u003Cbr>该论文通过提出一种新的框架ERA-CoT，有效强化了大型语言模型在复杂实体场景中的推理和问题回答能力。该方法通过增强对实体关系的理解，实现了显著提升模型推理准确度，特别是在CoT推理过程中。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.06932v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.06932.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-11\u003C\u002Fspan> | **Stealing Part of a Production Language Model**\u003Cbr>\u003Csub>机构: Google DeepMind, ETH Zurich, University of Washington\u003Cbr>本文提出了一项对生产语言模型进行模型窃取的新攻击方法，该方法能够有效地提取Transformer模型的最后一层，并能用于解密黑盒模型的细节信息、参数和尺寸。文章还讨论了可能的防御措施，并指出了修改API以防止未来此类攻击的必要性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.06634v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.06634.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-08\u003C\u002Fspan> | **Overcoming Reward Overoptimization via Adversarial Policy Optimization with Lightweight Uncertainty Estimation**\u003Cbr>\u003Csub>这篇论文介绍了Adversarial Policy Optimization (AdvPO)，它是解决基于人类反馈的强化学习过程中出现的奖励过优化问题的新方法，特别是在与人类偏好对齐的大型语言模型中。AdvPO有效地在没有带来高额计算成本的情况下缓解了奖励过优化。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.05171v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.05171.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-08\u003C\u002Fspan> | **Harnessing Multi-Role Capabilities of Large Language Models for Open-Domain Question Answering**\u003Cbr>\u003Csub>机构: Gaoling School of Artificial Intelligence Renmin University of China, Nankai University, Beijing Academy of Artificial Intelligence\u003Cbr>LLMQA是一个新的通用框架模型，通过结合检索和生成范式搜集更高质量的证据，并让LLMs在框架中发挥多重角色，提高了开放域问答系统的整体性能，实验结果也证明了其超越现有方法的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.05217v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.05217.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-08\u003C\u002Fspan> | **Gemini 1.5: Unlocking multimodal understanding across millions of tokens of context**\u003Cbr>\u003Csub>机构: Google\u003Cbr>Gemini 1.5 Pro在记忆与推理海量长上下文信息的能力上取得了显著突破，尤其是在超长文本、视频和音频处理方面。该模型不仅在效果上优于现有模型，也在计算效率上有显著提高。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.05530v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.0553.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-07\u003C\u002Fspan> | **Chatbot Arena: An Open Platform for Evaluating LLMs by Human Preference**\u003Cbr>\u003Csub>机构: UC Berkeley, Stanford, UCSD\u003Cbr>Chatbot Arena是一个基于用户偏好，用于评估大型语言模型的开放平台。它通过众包方式收集用户问题并进行匿名化的随机化对决，用于评估LLMs的表现，解决了现有静态数据集基准测试的局限性，并通过精心设计的统计方法确保了评估结果的可信度和效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.04132v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.04132.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-07\u003C\u002Fspan> | **Yi: Open Foundation Models by 01.AI**\u003Cbr>\u003Csub>机构: 01.AI\u003Cbr>该论文成功地提出了一个在性能和效率上都可与GPT-3.5相媲美的Yi-34B模型，并详细描述了在大型语言模型预训练及其指令微调方面的创新方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.04652v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.04652.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-05\u003C\u002Fspan> | **Design2Code: How Far Are We From Automating Front-End Engineering?**\u003Cbr>\u003Csub>机构: Stanford University, Georgia Tech, Microsoft\u003Cbr>本文通过对Design2Code任务的形式化和基准测试，评估了当前多模态LLMs在将视觉设计转换为代码的能力，并发现GPT-4V表现最佳，为自动化前端开发提供了一种新的范式。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.03163v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.03163.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-05\u003C\u002Fspan> | **ChatCite: LLM Agent with Human Workflow Guidance for Comparative Literature Summary**\u003Cbr>\u003Csub>机构: Tsinghua University\u003Cbr>ChatCite系统是为了克服LLM在生成文献回顾时的挑战而设计的，它通过特定的模块使LLM代理可以更有效地理解、汇总和对比不同的研究工作，进而生成有组织、有比较性分析的文献回顾。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.02574v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.02574.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-05\u003C\u002Fspan> | **MathScale: Scaling Instruction Tuning for Mathematical Reasoning**\u003Cbr>\u003Csub>机构: The Chinese University of Hong Kong Shenzhen, China; Microsoft Research Asia, Beijing, China; Shenzhen Research Institute of Big Data, Shenzhen, China\u003Cbr>MathScale提出了一个可扩展的方法来创建高质量的数学推理数据，通过构建新的评估基准MWPBENCH全面地评价LLMs在数学推理上的能力，显著提升了模型解决数学问题的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.02884v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.02884.md)  |\n\n---\n\n### 02月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-29\u003C\u002Fspan> | **StarCoder 2 and The Stack v2: The Next Generation**\u003Cbr>\u003Csub>机构: ServiceNow, Hugging Face  \u003Cbr>本论文提出了The Stack v2和StarCoder2的发展过程，这是基于代码大规模预训练和指令微调的一项工作。研究人员通过整合多样化数据源和经过精心设计的训练过程，显著提高了代码LLMs的性能，特别是在处理低资源编程语言和需要代码推理的任务上。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.19173v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.19173.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-29\u003C\u002Fspan> | **SEED: Customize Large Language Models with Sample-Efficient Adaptation for Code Generation**\u003Cbr>\u003Csub>机构: Peking University\u003Cbr>本文提出了一个名为SEED的适应方法，它利用错误驱动学习来使LLMs更少样本地高效学习，针对代码生成任务实现了更佳的性能和泛化性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.00046v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2403.00046.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-29\u003C\u002Fspan> | **Beyond Language Models: Byte Models are Digital World Simulators**\u003Cbr>\u003Csub>机构: Microsoft Research Asia\u003Cbr>论文展现了bGPT在处理挑战性的字节级数据模拟任务中的潜力，特别强调了其在跨模态知识转移和数字世界模拟方面的能力。这揭示了字节模型在数字媒体数据处理和理解上的广泛适用性和灵活性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.19155v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.19155.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-29\u003C\u002Fspan> | **Resonance RoPE: Improving Context Length Generalization of Large Language Models**\u003Cbr>\u003Csub>机构: 1DIRO Université de Montréal, Mila - Quebec AI Institute, Huawei Noah’s Ark Lab\u003Cbr>本论文提出了 Resonance Rope，这是一个改进的模型，它基于对 RoPE 位置嵌入特征波长的分析来提升模型在处理长文本时的性能。它还引入了 POSGEN 基准测试，以帮助研究和评估位置嵌入在长文本任务中的表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.00071v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2403.00071.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-27\u003C\u002Fspan> | **EMO: Emote Portrait Alive -- Generating Expressive Portrait Videos with Audio2Video Diffusion Model under Weak Conditions**\u003Cbr>\u003Csub>机构: Alibaba Group  \u003Cbr>EMO 框架通过直接的音频到视频合成方法提高了生成视频的真实感和表现力，显著优于现有技术，为视频合成领域提供了一个重要的进步。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.17485v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.17485.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-27\u003C\u002Fspan> | **The Era of 1-bit LLMs: All Large Language Models are in 1.58 Bits**\u003Cbr>\u003Csub>机构: Microsoft, University of Chinese Academy of Sciences\u003Cbr>论文提出BitNet b1.58模型，这是一个1.58比特量化的大型语言模型，与传统的完整精度LLMs在性能上可比，而且更高效、更节省能源。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.17764v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.17764.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-27\u003C\u002Fspan> | **When Scaling Meets LLM Finetuning: The Effect of Data, Model and Finetuning Method**\u003Cbr>\u003Csub>机构: Google DeepMind\u003Cbr>该论文提供了大型语言模型微调阶段不同因素如数据大小、模型大小以及微调方法对模型性能影响的深入洞见，定义了一种新的评估框架。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.17193v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.17193.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-27\u003C\u002Fspan> | **REAR: A Relevance-Aware Retrieval-Augmented Framework for Open-Domain Question Answering**\u003Cbr>\u003Csub>机构: Gaoling School of Artificial Intelligence Renmin University of China, School of Information Renmin University of China\u003Cbr>该论文提出了REAR框架，重点在于通过为LLMs加入文档相关性自我意识来增强其在QA任务中利用外部知识的能力，并证实该框架有效地超越了前述方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.17497v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.17497.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FRUCAIBox\u002FREAR)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-27\u003C\u002Fspan> | **Agent-Pro: Learning to Evolve via Policy-Level Reflection and Optimization**\u003Cbr>\u003Csub>机构: Zhejiang University, Institute of Software Chinese Academy of Sciences, Nanjing University of Posts and Telecommunications\u003Cbr>Agent-Pro是一个新型的基于LLM的智能代理，能够通过政策级反思和优化在交互环境中学习和发展策略，解决了现有工作无法通过交互学习和适应的问题。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.17574v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.17574.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-27\u003C\u002Fspan> | **Sora: A Review on Background, Technology, Limitations, and Opportunities of Large Vision Models**\u003Cbr>\u003Csub>机构: OpenAI\u003Cbr>本文是一篇对Sora——一个大型视觉模型的综述。论文讨论了Sora的技术特征、创新点、以及当前应用领域的局限性和未来可能的发展机会。Sora的能力在多个维度上展现了大型视觉模型的进步，包括长视频生成和多样化视频格式的处理。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.17177v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.17177.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-26\u003C\u002Fspan> | **Improving LLM-based Machine Translation with Systematic Self-Correction**\u003Cbr>\u003Csub>机构: Zhejiang University, Tencent, Angelalign Technology Inc.\u003Cbr>论文成功提出了第一个基于LLMs的自我纠正翻译框架TER，并验证了其在多种语言对和不同模型间的翻译质量改进效果。它为机器翻译领域带来了新的视角，特别是在自我纠正在高资源、低资源语言和不同中心语言之间翻译的应用。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.16379v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.16379.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-26\u003C\u002Fspan> | **Do Large Language Models Latently Perform Multi-Hop Reasoning?**\u003Cbr>\u003Csub>机构: Google DeepMind, UCL, Google Research\u003Cbr>本文对LLMs是否能够进行潜在的多跳推理进行了研究，并通过实验提出了评估LLMs潜在多跳推理能力的新方法。研究提示LLMs对某些关系类型的提示有很强的多跳推理证据，但这种推理路径的运用在不同类型的提示中表现出高度的情境依赖性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.16837v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.16837.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-26\u003C\u002Fspan> | **LLMArena: Assessing Capabilities of Large Language Models in Dynamic Multi-Agent Environments**\u003Cbr>\u003Csub>研究介绍了LLMARENA基准，用以评估LLMs智能体在复杂多代理环境中的能力，指出了存在的问题并促进了未来的研究方向，包括多模态动态环境中的能力及利用外部工具的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.16499v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.16499.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-25\u003C\u002Fspan> | **ChatMusician: Understanding and Generating Music Intrinsically with LLM**\u003Cbr>\u003Csub>机构: Hong Kong University of Science and Technology\u003Cbr>本文通过创造首个针对语言模型的音乐预训练数据集和评估基准，提升了LLMs在音乐理解和生成方面的表现，并在这一未被深入研究的领域取得了实质性进展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.16153v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.16153.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-23\u003C\u002Fspan> | **ChunkAttention: Efficient Self-Attention with Prefix-Aware KV Cache and Two-Phase Partition**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.15220v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.1522.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-23\u003C\u002Fspan> | **Genie: Generative Interactive Environments**\u003Cbr>\u003Csub>机构: Google DeepMind, University of British Columbia\u003Cbr>Genie是能够生成新视频并能通过用户输入控制视频内容的交互环境模型，弥补了传统视频生成技术与交互体验之间的差距。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.15391v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.15391.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-22\u003C\u002Fspan> | **Automating psychological hypothesis generation with AI: when large language models meet causal graph**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.14424v3)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.14424.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-22\u003C\u002Fspan> | **Middleware for LLMs: Tools Are Instrumental for Language Agents in Complex Environments**\u003Cbr>\u003Csub>通过为LLMs设计特定的工具和推理算法，研究开发了名为FUXI的新框架，有效提高了LLMs在复杂环境中的操作能\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.14672v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.14672.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-22\u003C\u002Fspan> | **CriticBench: Benchmarking LLMs for Critique-Correct Reasoning**\u003Cbr>\u003Csub>机构: Tsinghua University, University of Hong Kong\u003Cbr>该论文通过CRITICBENCH评估了LLMs的批判和纠正推理能力，并探究了影响这些能力的关键因子，旨在促进LLMs批判和自我改进能力的后续研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.14809v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.14809.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-22\u003C\u002Fspan> | **OpenCodeInterpreter: Integrating Code Generation with Execution and Refinement**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.14658v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.14658.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-21\u003C\u002Fspan> | **User-LLM: Efficient LLM Contextualization with User Embeddings**\u003Cbr>\u003Csub>USER-LLM是一个通过用户嵌入来上下文化LLM的框架。它能有效地解决用户数据的复杂性和长序列处理的问题，提升了LLM在个性化应用上的效能，同时也保证了计算效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.13598v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.13598.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-21\u003C\u002Fspan> | **AgentScope: A Flexible yet Robust Multi-Agent Platform**\u003Cbr>\u003Csub>机构: Alibaba Group\u003Cbr>AgentScope是一个用于构建多代理应用的多功能平台，强调易用性与可定制性，特别适合不同技能水平的开发者使用。通过实现容错和支持多模态数据处理，以及优化分布式操作，AgentScope显著降低了多代理系统开发与部署的难度，鼓励更广泛的参与和创新。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.14034v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.14034.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fmodelscope\u002Fagentscope)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-20\u003C\u002Fspan> | **TofuEval: Evaluating Hallucinations of LLMs on Topic-Focused Dialogue Summarization**\u003Cbr>\u003Csub>机构: AWS AI Labs, The University of Texas at Austin, KAIST\u003Cbr>本论文提出了一个名为TOFUEVAL的新型评估基准，针对LLM在生成话题焦点对话摘要时的事实一致性进行了评估。研究发现，不同大小的LLM在对话领域生成的摘要中存在大量事实错误。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.13249v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.13249.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-20\u003C\u002Fspan> | **Instruction-tuned Language Models are Better Knowledge Learners**\u003Cbr>\u003Csub>机构: FAIR at Meta, Carnegie Mellon University, University of Washington\u003Cbr>本文介绍了一种名为预指令微调（PIT）的方法，有效地提高了LLMs从文档中吸收知识的能力，解决了所谓的困惑度诅咒问题，并且在多域的知识获取中也取得了显著进展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.12847v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.12847.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-19\u003C\u002Fspan> | **AnyGPT: Unified Multimodal LLM with Discrete Sequence Modeling**\u003Cbr>\u003Csub>机构: Fudan University, Multimodal Art Projection Research Community, Shanghai AI Laboratory\u003Cbr>AnyGPT 是一个多模态架构的语言模型，通过离散序列建模，能够实现不同模态间的无缝转换和统一处理，提供任意到任意模态之间的生成能力，同时不需要改变现有的 LLM 架构或训练范式。该模型通过在语义和感知水平进行建模，能有效处理和生成高质量的多模态内容，并且与专业模型相比具有可比较的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.12226v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.12226.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-16\u003C\u002Fspan> | **SPAR: Personalized Content-Based Recommendation via Long Engagement Attention**\u003Cbr>\u003Csub>机构: The University of British Columbia, Meta\u003Cbr>SPAR框架充分利用长期用户互动历史来提升个性化内容推荐的精度，并在多项性能指标上超越现有技术。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.10555v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.10555.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-16\u003C\u002Fspan> | **FinTral: A Family of GPT-4 Level Multimodal Financial Large Language Models**\u003Cbr>\u003Csub>机构: The University of British Columbia & Invertible AI\u003Cbr>该论文提出了一个针对财务分析优化的多模态大型语言模型（LLM）套件FinTral。通过与现有模型的对比，展示了其在财务领域多任务环境下的先进性能，特别是在处理零样本任务和减少幻觉现象方面的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.10986v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.10986.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-16\u003C\u002Fspan> | **Speculative Streaming: Fast LLM Inference without Auxiliary Models**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.11131v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.11131.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-15\u003C\u002Fspan> | **How to Train Data-Efficient LLMs**\u003Cbr>\u003Csub>机构: Google DeepMind, University of California San Diego, Texas A&M University\u003Cbr>论文提出的ASK-LLM和DENSITY技术优化了大型语言模型的数据效率，有效提升了模型训练的速度和质量，并在资源限制下表现出色。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.09668v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.09668.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-15\u003C\u002Fspan> | **A Human-Inspired Reading Agent with Gist Memory of Very Long Contexts**\u003Cbr>\u003Csub>机构: Google DeepMind, Google Research\u003Cbr>ReadAgent 是一个受人类阅读方式启发的LLM代理系统，通过创建摘要记忆并根据需要检索信息来解决长文本任务，显著提高了模型的表现和伸缩性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.09727v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.09727.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-15\u003C\u002Fspan> | **Chain-of-Thought Reasoning Without Prompting**\u003Cbr>\u003Csub>机构: Google DeepMind\u003Cbr>这项工作揭示了通过改变解码策略，可以有效地从预训练的LLMs中自然地引发推理，并且在预训练数据中频繁出现的任务上CoT路径更常见。提出的CoT解码方法无需手动引导，就能显著提高各种推理基准上的模型性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.10200v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.102.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-14\u003C\u002Fspan> | **Premise Order Matters in Reasoning with Large Language Models**\u003Cbr>\u003Csub>机构: Google DeepMind\u003Cbr>这篇论文关注于大型语言模型在处理推理任务时，前提顺序的影响，并通过创建R-GSM基准测试来评估这一现象。研究揭示了LLMs对前提顺序极为敏感，性能受顺序影响显著。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.08939v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.08939.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-09\u003C\u002Fspan> | **InternLM-Math: Open Math Large Language Models Toward Verifiable Reasoning**\u003Cbr>\u003Csub>机构: Shanghai AI Laboratory, Tsinghua University, Fudan University School of Computer Science\u003Cbr>InternLM-Math模型是一种基于LLMs的数学推理工具，它整合了多种能力并提供了监督学习以帮助模型在各种数学推理任务中实现最先进的性能，并开源其代码和数据。论文还探讨了利用程序语言LEAN在多任务学习设置中解决数学问题的新方法，彰显了LLMs在形式化和代码辅助推理中的潜能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.06332v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.06332.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FInternLM\u002FInternLM-Math)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-02\u003C\u002Fspan> | **Reasoning Capacity in Multi-Agent Systems: Limitations, Challenges and Human-Centered Solutions**\u003Cbr>\u003Csub>机构: Megagon Labs, Carnegie Mellon University\u003Cbr>本论文提出了多代理系统中的“推理能力”概念，以改善优化和评估，并探讨了利用人类反馈增强系统推理能力的可能性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.01108v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.01108.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-02\u003C\u002Fspan> | **LimSim++: A Closed-Loop Platform for Deploying Multimodal LLMs in Autonomous Driving**\u003Cbr>\u003Csub>机构: Shanghai Artificial Intelligence Laboratory, College of Control Science and Engineering Zhejiang University\u003Cbr>LimSim++是首个专为(M)LLM支持的自动驾驶而开发的封闭循环评估平台。它解决了现有仿真平台的局限性，并通过实验验证了其在多种复杂交通场景中的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.01246v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.01246.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-02\u003C\u002Fspan> | **AMOR: A Recipe for Building Adaptable Modular Knowledge Agents Through Process Feedback**\u003Cbr>\u003Csub>机构: Tsinghua University, Ant Group\u003Cbr>AMOR框架综合了基于有限状态机（FSM）的推理逻辑和过程反馈机制，展示了基于开源LLM的知识代理如何通过人类监督实现推理和适应性，提高了模型在完成知识密集任务中的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.01469v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.01469.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-02\u003C\u002Fspan> | **K-Level Reasoning with Large Language Models**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.01521v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.01521.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-02\u003C\u002Fspan> | **MAGDi: Structured Distillation of Multi-Agent Interaction Graphs Improves Reasoning in Smaller Language Models**\u003Cbr>\u003Csub>机构: UNC Chapel Hill.\u003Cbr>本论文介绍了名为MAGDI的新方法，它通过结构化蒸馏方式将多LLM之间的推理交互蒸馏到更小的模型中，显著提升小模型的推理能力和泛化能力，同时降低了成本。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.01620v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.0162.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-01\u003C\u002Fspan> | **Don't Hallucinate, Abstain: Identifying LLM Knowledge Gaps via Multi-LLM Collaboration**\u003Cbr>\u003Csub>机构: University of Washington, University of California Berkeley, The Hong Kong University of Science and Technology\u003Cbr>本文关注的是如何在大型语言模型(LLMs)中识别知识差距并在必要时放弃回答问题。研究提出了两种基于多LLM合作的新方法，通过对比实验显示它们能有效提高LLMs放弃生成低信心输出的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.00367v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.00367.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-01\u003C\u002Fspan> | **HR-MultiWOZ: A Task Oriented Dialogue (TOD) Dataset for HR LLM Agent**\u003Cbr>\u003Csub>机构: Amazon, University of Milano-Bicocca\u003Cbr>本文介绍了一个新的针对人力资源领域的大语言模型代理（HR LLM Agent）任务的对话数据集，HR-MultiWOZ。它不仅解决了当前在构建和评估HR领域LLM代理时缺乏高质量训练数据集的问题，还提供了一个经济高效的数据集生成方法，为同领域中的其他研究提供了宝贵的资源和参考。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.01018v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.01018.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-01\u003C\u002Fspan> | **Learning Planning-based Reasoning by Trajectories Collection and Process Reward Synthesizing**\u003Cbr>\u003Csub>机构: Nanyang Technological University, Institute for Infocomm Research A*STAR, Salesforce Research\u003Cbr>文章提出了一个新颖的离线训练框架，专注于改进大型语言模型在处理复杂推理任务时的可靠性和精确性，通过收集轨迹和基于结果监督的直接偏好优化，无需教师模型或人类标注。在两个逻辑推理基准测试上的结果证明了该方法的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.00658v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.00658.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-01\u003C\u002Fspan> | **Can Large Language Models Understand Context?**\u003Cbr>\u003Csub>机构: Georgetown University, Apple\u003Cbr>本文提出了一个上下文理解基准，用以评估大型语言模型（LLMs）的上下文理解能力。该基准涵盖了对文档和对话基础上下文理解的要素，通过创新的测试方法和实验分析展示了LLMs在上下文理解方面的能力和局限性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.00858v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.00858.md)  |\n\n---\n\n### 01月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-31\u003C\u002Fspan> | **LongAlign: A Recipe for Long Context Alignment of Large Language Models**\u003Cbr>\u003Csub>机构: Tsinghua University, Zhipu.AI\u003Cbr>论文提出了一种新的长上下文对齐配方LongAlign，通过构建长指令数据集、采用新的训练策略并引入评估基准来提高LLMs处理长上下文的能力，且代码、数据和长对齐的模型已开源。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.18058v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.18058.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FTHUDM\u002FLongAlign)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-30\u003C\u002Fspan> | **Efficient Tool Use with Chain-of-Abstraction Reasoning**\u003Cbr>\u003Csub>机构: Meta\u003Cbr>本文提出了一种新的链式抽象推理方法，有效地提升了LLMs使用外部工具的能力，并加速了推理过程。实验结果证明了其在多步骤推理任务上的有效性和高效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.17464v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.17464.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-30\u003C\u002Fspan> | **Can Large Language Models be Trusted for Evaluation? Scalable Meta-Evaluation of LLMs as Evaluators via Agent Debate**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University, Carnegie Mellon University, Shanghai Artificial Intelligence Laboratory\u003Cbr>SCALEEVAL 是一种新型的元评估框架，用于评估LLMs作为评估者的可靠性和效率。通过利用LLM代理间的辩论和最小化的人类监督，该框架在评估中引入灵活性和可扩展性，并在实验中显示出与纯人工评估高度一致的结果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.16788v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.16788.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FGAIR-NLP\u002Fscaleeval)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-30\u003C\u002Fspan> | **Recovering Mental Representations from Large Language Models with Markov Chain Monte Carlo**\u003Cbr>\u003Csub>机构: Princeton University, University of Warwick\u003Cbr>本文通过将 LLMs 整合到采样算法中，并运用直接采样与 MCMC 的方式提取心理表征，有效提升了效率和性能，并探索了用 LLM 进行贝叶斯推断的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.16657v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.16657.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-30\u003C\u002Fspan> | **Incoherent Probability Judgments in Large Language Models**\u003Cbr>\u003Csub>机构: Princeton University\u003Cbr>这篇论文探讨了大型语言模型在形成概率判断方面的连贯性问题，并发现这些模型在该领域表现出的偏差与人类认知中的系统性偏差相似。通过应用概率恒等式和重复判断的方法，研究人员量化了这些判断的不连贯性。研究还提出了一个假设，即LLMs在做出概率判断时的人类样偏差可能源自它们采用的自回归训练目标，这一假设得到了以贝叶斯取样器模型和LLMs中的自回归过程之间潜在联系为基础的支持。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.16646v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.16646.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-29\u003C\u002Fspan> | **Beyond Direct Diagnosis: LLM-based Multi-Specialist Agent Consultation for Automatic Diagnosis**\u003Cbr>\u003Csub>机构: Harbin Institute of Technology\u003Cbr>本研究提出了一个基于LLM的自动诊断方法——多专家智能代理咨询模型（AMSC），它能更好地模拟现实世界中的诊断流程，并通过集成多个专家代理的预测来提升诊断的准确性和效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.16107v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.16107.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-29\u003C\u002Fspan> | **LLM4Vuln: A Unified Evaluation Framework for Decoupling and Enhancing LLMs' Vulnerability Reasoning**\u003Cbr>\u003Csub>机构: Nanyang Technological University\u003Cbr>LLM4Vuln是一个创新的框架，它通过提供漏洞知识的向量数据库、调用工具的功能、定制的CoT提示方案以及使用精通指令的模型来结构化输出，显著提高了LLMs在代码漏洞分析中的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.16185v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.16185.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-29\u003C\u002Fspan> | **SelectLLM: Can LLMs Select Important Instructions to Annotate?**\u003Cbr>\u003Csub>机构: University of Minnesota, Carnegie Mellon University\u003Cbr>这项工作提出了一个利用LLMs选择未标记的高质量指令的新方法SELECTLLM，通过挑战传统的选择算法并在保持数据集的全局结构的同时提升选择效果。实验结果显示了其在指令调整基准测试上的优越性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.16553v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.16553.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fminnesotanlp\u002Fselect-llm)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-28\u003C\u002Fspan> | **PRE: A Peer Review Based Large Language Model Evaluator**\u003Cbr>\u003Csub>这篇论文提出的PRE模型通过模拟学术界的同行评审机制，提供了一种全新的自动评估LLM的框架，它显著降低了成本，并且具有更高的通用性和可靠性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.15641v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.15641.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-27\u003C\u002Fspan> | **MultiHop-RAG: Benchmarking Retrieval-Augmented Generation for Multi-Hop Queries**\u003Cbr>\u003Csub>机构: Hong Kong University of Science and Technology\u003Cbr>这篇论文开发了MultiHop-RAG数据集，以评估和改善现存的检索增强生成（RAG）系统在处理需要多步检索和推理的查询上的不足。研究还提供了一系列实验结果，揭示了目前RAG系统在此类任务上的局限性，并公开了数据集推动进一步的研究和开发。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.15391v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.15391.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fyixuantt\u002FMultiHop-RAG)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-26\u003C\u002Fspan> | **EAGLE: Speculative Sampling Requires Rethinking Feature Uncertainty**\u003Cbr>\u003Csub>机构: Peking University, Microsoft Research, University of Waterloo\u003Cbr>文章提出了一个名为EAGLE的新框架，以提高大型语言模型（LLMs）自回归解码的速度，同时保证生成文本与原始LLMs的文本分布一致。EAGLE通过改进推测性采样方法，在减少时间开销和提高草稿的接受率方面取得了显著成效，对比Lookahead和Medusa实现了更快的加速效果，并且训练成本低，易于部署。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.15077v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.15077.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-25\u003C\u002Fspan> | **Towards Consistent Natural-Language Explanations via Explanation-Consistency Finetuning**\u003Cbr>\u003Csub>机构: Columbia University, Microsoft Research, University of California Berkeley\u003Cbr>EC-Finetuning方法成功地提高了LLMs生成解释的一致性，并且可以推广到未见过的数据集，表现出微调数据集上10.0%和分布外数据集上4.5%的解释一致性相对改善，同时也适度提升了预测准确度。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.13986v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.13986.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fyandachen\u002Fexplanation-consistency-finetuning)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-25\u003C\u002Fspan> | **ConstraintChecker: A Plugin for Large Language Models to Reason on Commonsense Knowledge Bases**\u003Cbr>\u003Csub>机构: HKUST\u003Cbr>ConstraintChecker是一个能有效提升LLMs在CSKB推理任务中性能的独立插件工具。通过提供和检查显式约束的方式，它能够帮助LLMs在推理中取得更好的表现，且在经过验证后的指标上超过了其他的提示技术。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.14003v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.14003.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FHKUST-KnowComp\u002FConstraintChecker)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-25\u003C\u002Fspan> | **True Knowledge Comes from Practice: Aligning LLMs with Embodied Environments via Reinforcement Learning**\u003Cbr>\u003Csub>机构: Nanyang Technological University, Zhejiang University\u003Cbr>TWOSOME框架通过强化学习来有效地将大型语言模型（LLMs）与体现环境对齐，提高了样本效率和任务泛化能力，同时保留了LLMs的原始功能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.14151v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.14151.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-24\u003C\u002Fspan> | **Can AI Assistants Know What They Don't Know?**\u003Cbr>\u003Csub>机构: Fudan University, Shanghai Artificial Intelligence Laboratory\u003Cbr>这篇论文重点探究了AI助手识别自己知识边界的能力，并通过构建Idk数据集并对助手调整，实现了让AI助手识别并承认不知道的问题，以减少回答中的事实错误。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.13275v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.13275.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-24\u003C\u002Fspan> | **MM-LLMs: Recent Advances in MultiModal Large Language Models**\u003Cbr>\u003Csub>机构: Tencent AI Lab, Kyoto University, Mohamed Bin Zayed University of Artificial Intelligence\u003Cbr>本文是一项关于MM-LLMs的综合性调研，旨在进一步推动MM-LLMs领域的研究工作。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.13601v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.13601.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-24\u003C\u002Fspan> | **Consistency Guided Knowledge Retrieval and Denoising in LLMs for Zero-shot Document-level Relation Triplet Extraction**\u003Cbr>\u003Csub>机构: Nanjing University of Science and Technology, Northeastern University, Singapore Institute of Technology\u003Cbr>论文提出了一个新的Zero-shot Document-level Relation Triplet Extraction (ZeroDocRTE)框架，该框架通过从LLMs中检索和去噪知识生成带标签的数据，并通过一系列新方法显著提高了文档级关系三元组抽取的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.13598v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.13598.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-24\u003C\u002Fspan> | **Clue-Guided Path Exploration: An Efficient Knowledge Base Question-Answering Framework with Low Computational Resource Consumption**\u003Cbr>\u003Csub>机构: Tsinghua University, Zhongguancun Laboratory, XinJiang University\u003Cbr>论文提出的CGPE框架能有效支持LLMs在问答任务中的应用，通过线索引导的路径探索机制，降低了对LLMs能力的要求，并显著减少了计算资源消耗，对计算资源有限的个人和组织具有重要实际意义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.13444v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.13444.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-24\u003C\u002Fspan> | **AgentBoard: An Analytical Evaluation Board of Multi-turn LLM Agents**\u003Cbr>\u003Csub>机构: The University of Hong Kong, Zhejiang University, Shanghai Jiao Tong University\u003Cbr>研究人员提出了一个新的基准测试 AGENTBOARD，专门评估具有多轮交互能力的大语言模型代理，它提供了细粒度的进展率和交互式分析工具，以增进对 LLM 代理性能的深入理解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.13178v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.13178.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-23\u003C\u002Fspan> | **AutoRT: Embodied Foundation Models for Large Scale Orchestration of Robotic Agents**\u003Cbr>\u003Csub>机构: Google DeepMind\u003Cbr>本论文描述了一个名为AutoRT的系统，它利用大型基础模型控制真实世界中的机器人，使它们能够自动导航并执行任务。这标志着第一次实现LLM控制的机器人在真实环境中进行自动操作、提出目标并实现这些目标。通过AutoRT收集到的数据不仅多样化且能够提高机器人学习模型的性能，并且可以与人类偏好保持一致。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.12963v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.12963.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-23\u003C\u002Fspan> | **KAM-CoT: Knowledge Augmented Multimodal Chain-of-Thoughts Reasoning**\u003Cbr>\u003Csub>机构: Samsung R&D Institute India - Bangalore\u003Cbr>KAM-CoT是一个多模态CoT推理框架，整合了CoT推理、知识图谱和多种模态。它在具有较少可训练参数的情况下优于现有的最先进方法，展现出卓越的性能和成本效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.12863v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.12863.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-23\u003C\u002Fspan> | **Large Language Models are Superpositions of All Characters: Attaining Arbitrary Role-play via Self-Alignment**\u003Cbr>\u003Csub>机构: Alibaba Inc.\u003Cbr>论文提出了一种名为DITTO的自对齐方法，能够通过知识增强和对话模拟增强LLMs的角色扮演能力。此外，它提供了一种客观、可复制、可解释且高效的角色扮演评估方法，并通过跨监督的实验了解角色扮演的分解，为LLMs构建角色扮演功能提供了深入的理解和见解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.12474v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.12474.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FOFA-Sys\u002FDitto)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-23\u003C\u002Fspan> | **CCA: Collaborative Competitive Agents for Image Editing**\u003Cbr>\u003Csub>该论文提出了一种基于多个大语言模型(LLMs)的新型生成模型CCA，能够处理复杂的图像编辑任务并提升结果的质量和鲁棒性。通过鼓励代理的协作竞争，模型展示出优于传统方法的能力，尤其在管理复杂任务和从中间步骤中学习以改进结果方面。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.13011v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.13011.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FTiankaiHang\u002FCCA)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-22\u003C\u002Fspan> | **Improving Small Language Models' Mathematical Reasoning via Mix Thoughts Distillation**\u003Cbr>\u003Csub>机构: Institute of Information Engineering, Chinese Academy of Sciences\u003Cbr>这篇论文通过介绍EoTD和MTD，表明了可以将LLMs的数学推理能力转化给参数数量少于一十亿个的SLMs。通过实验验证了这些方法不仅保留了SLMs的推理能力，还在一定程度上提升了该能力，使SLMs在推理任务上达到了最好水平。这一进展对于在资源受限的环境中推广SLMs的应用打开了大门，并缩小了对强大推理模型需求与计算资源限制之间的差距。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.11864v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.11864.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-22\u003C\u002Fspan> | **PsySafe: A Comprehensive Framework for Psychological-based Attack, Defense, and Evaluation of Multi-agent System Safety**\u003Cbr>\u003Csub>机构: Shanghai Artificial Intelligence Laboratory, Dalian University of Technology\u003Cbr>本文提出了一个针对多智能体系统安全性的综合性框架PsySafe，该框架结合了心理层面的攻击、防御与评估方法。研究的实验结果有助于更深入地理解和研究多智能体系统的安全问题。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.11880v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.1188.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-22\u003C\u002Fspan> | **CheXagent: Towards a Foundation Model for Chest X-Ray Interpretation**\u003Cbr>\u003Csub>机构: Stanford University, Stability AI  \u003Cbr>本论文致力于解决在自动化胸部X光解释方面存在的挑战，通过引入专为CXR解释设计的大型数据集、开发了新的基础模型以及创建了一个全面的评估基准，实现了在医学成像领域的应用，并证明了在多项评估任务中CheXagent的性能优于其他模型。同时也对模型中可能存在的偏差进行了检查，为未来的研究和应用提供了重要参考。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.12208v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.12208.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-21\u003C\u002Fspan> | **Interactive AI with Retrieval-Augmented Generation for Next Generation Networking**\u003Cbr>\u003Csub>机构: Nanyang Technological University, Guangdong University of Technology, Institute for Infocomm Research, Agency for Science Technology and Research\u003Cbr>本文研究了将交互式AI (IAI) 集成到下一代网络中的可能性，采用了检索增强型生成（RAG）和大型语言模型（LLM）来提升决策能力，并通过真实网络优化的案例研究证明了提出框架的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.11391v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.11391.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-20\u003C\u002Fspan> | **BadChain: Backdoor Chain-of-Thought Prompting for Large Language Models**\u003Cbr>\u003Csub>机构: University of Illinois Urbana-Champaign, University of Washington, Western Washington University\u003Cbr>本文提出了BadChain，这是一种针对采用COT提示的LLMs的后门攻击，不仅不需要访问训练数据集或模型参数，而且计算开销低。该方法有效地揭示了COT提示下LLMs的安全漏洞，强调了进行后门攻击和设计有效防御的重要性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.12242v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.12242.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-19\u003C\u002Fspan> | **Mitigating Hallucinations of Large Language Models via Knowledge Consistent Alignment**\u003Cbr>\u003Csub>机构: Sun Yat-sen University, Tencent AI Lab\u003Cbr>这篇论文引入了一种新颖的KCA方法，通过减少外部知识和内在知识之间的不一致性，从而减轻LLMs在校准过程中产生的幻觉。研究提供了未来研究的几个见解，尤其是KCA方法在多种场景下的出色表现，以及其简单性与有效性的结合。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.10768v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.10768.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Ffanqiwan\u002FKCA)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-19\u003C\u002Fspan> | **Pruning for Protection: Increasing Jailbreak Resistance in Aligned LLMs Without Fine-Tuning**\u003Cbr>\u003Csub>机构: MIT\u003Cbr>论文展示了通过Wanda剪枝方法，无需微调而提升LLMs从对齐安全性方面抵御“越狱”攻击的能力，并通过构建特定的数据集和评估体系验证模型表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.10862v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.10862.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-19\u003C\u002Fspan> | **Tool-LMM: A Large Multi-Modal Model for Tool Agent Learning**\u003Cbr>\u003Csub>机构: ShanghaiTech University, Meituan, UniDT\u003Cbr>Tool-LMM为首个致力于训练大型多模态模型以学习工具代理的系统，创新地整合了多模态输入与外部工具的正确选择，克服了文本模糊带来的问题，展现了在多模态指令下自动选择合适工具的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.10727v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.10727.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FTool-LMM\u002FTool-LMM)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-19\u003C\u002Fspan> | **Medusa: Simple LLM Inference Acceleration Framework with Multiple Decoding Heads**\u003Cbr>\u003Csub>机构: Princeton University, Together AI, University of Illinois Urbana-Champaign\u003Cbr>文章提出了一个名为Medusa的LLM推理加速框架，通过增加额外的解码头并用树形注意力机制，并行生成多个token，有效减少解码步骤数量，实现了对大模型推理速度的显著提升。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.10774v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.10774.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-18\u003C\u002Fspan> | **Advancing Large Multi-modal Models with Explicit Chain-of-Reasoning and Visual Question Generation**\u003Cbr>\u003Csub>机构: The University of Tokyo, RIKEN\u003Cbr>这项研究通过创新地整合一个显性的推理过程和生成问题的能力到LMM中，以促进模型进行更可靠的推理。创建了一个新的数据集并利用它对模型进行培训，为今后LMM的进步设定了先例，并通过这种方式使模型在面临不确定性时能生成显性推理步骤和提问。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.10005v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.10005.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-18\u003C\u002Fspan> | **A Fast, Performant, Secure Distributed Training Framework For Large Language Model**\u003Cbr>\u003Csub>机构: Ant Group China\u003Cbr>本论文提出了一个基于模型切片的安全分布式训练框架，能在保证模型训练精度和高效率的同时，解决了服务端和客户端的模型参数及数据泄露问题。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.09796v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.09796.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-18\u003C\u002Fspan> | **ChatQA: Building GPT-4 Level Conversational QA Models**\u003Cbr>\u003Csub>机构: NVIDIA\u003Cbr>ChatQA模型通过两阶段的指令微调策略显著改进了多轮对话式问答的效果，尤其是在上下文理解和信息检索方面。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.10225v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.10225.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-18\u003C\u002Fspan> | **Self-Rewarding Language Models**\u003Cbr>\u003Csub>机构: Meta, NYU  \u003Cbr>本文提出了自奖励语言模型（Self-Rewarding Language Models），旨在通过自我训练来避免人类偏好数据的瓶颈，并提高模型的自奖励和执行指令的能力。实验结果表明，该模型表现出色，有望成为连续自我改进模型的开山之作。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.10020v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.1002.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-17\u003C\u002Fspan> | **Vlogger: Make Your Dream A Vlog**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University, Shanghai AI Laboratory, Shenzhen Institute of Advanced Technology Chinese Academy of Sciences\u003Cbr>本论文通过介绍Vlogger系统，展示了一个创新的办法将LLMs应用于视频博客的生成过程中，从而克服了生成分钟级连贯视频内容的挑战，并取得了优异的实验结果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.09414v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.09414.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fzhuangshaobin\u002FVlogger)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-17\u003C\u002Fspan> | **LLMs for Relational Reasoning: How Far are We?**\u003Cbr>\u003Csub>机构: Continental-NTU Corporate Lab, Nanyang Technological University, Singapore\u003Cbr>本论文主要探讨了大型语言模型在关系推理方面的能力和局限性。通过全面的评估，包括新提出的测试方法和评估模块，发现LLMs虽然在某些关系推理任务上表现不错，但与专门为逻辑推理设计的模型相比，其性能相对较差。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.09042v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.09042.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-17\u003C\u002Fspan> | **ReFT: Reasoning with Reinforced Fine-Tuning**\u003Cbr>\u003Csub>机构: ByteDance Research\u003Cbr>ReFT通过利用强化学习优化非可微目标，显著提高了大型语言模型在数学问题求解任务中的性能和泛化能力。它超越了传统的监督式学习方法，展现了在更复杂推理任务中的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.08967v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.08967.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-16\u003C\u002Fspan> | **RAG vs Fine-tuning: Pipelines, Tradeoffs, and a Case Study on Agriculture**\u003Cbr>\u003Csub>机构: Microsoft\u003Cbr>本文研究了大型语言模型在农业数据上生成问答对的性能，并提出了一个新的生成管道，有效地使用了RAG和微调技术增强LLM的应用场景，拓展了LLM在特定行业的应用潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.08406v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.08406.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-16\u003C\u002Fspan> | **MARIO: MAth Reasoning with code Interpreter Output -- A Reproducible Pipeline**\u003Cbr>\u003Csub>机构: Alibaba Group  \u003Cbr>论文提出了一个新的数学推理数据集，该数据集与Python代码解释器相结合，通过改进数据集并实施特定微调流程显著提高了LLM在数学问题求解任务上的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.08190v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.0819.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-16\u003C\u002Fspan> | **Contrastive Preference Optimization: Pushing the Boundaries of LLM Performance in Machine Translation**\u003Cbr>\u003Csub>机构: Johns Hopkins University, Microsoft\u003Cbr>本论文提出了CPO，一个新的LLM微调方法，有效解决了SFT在机器翻译任务中存在的瓶颈，实现了在资源消耗极少的情况下显著提升中等规模LLM翻译模型的性能，最终与最先进的状态艺术翻译系统齐头并进。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.08417v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.08417.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-16\u003C\u002Fspan> | **SpecGen: Automated Generation of Formal Program Specifications via Large Language Models**\u003Cbr>\u003Csub>机构: Nanjing University, Nanyang Technological University, Singapore Management University\u003Cbr>论文提出了 SpecGen，一个结合了大型语言模型和启发式选择策略的程序形式化规范自动生成技术。通过比较与现有工具和纯 LLM 方法，SpecGen 表现出更高效和准确的生成规范的能力，并且提出了数据集促进后续研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.08807v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.08807.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-16\u003C\u002Fspan> | **Salute the Classic: Revisiting Challenges of Machine Translation in the Age of Large Language Models**\u003Cbr>\u003Csub>机构: Tencent AI Lab\u003Cbr>本文深入分析了LLMs在机器翻译任务中领域不匹配问题，并实验了不同数量的平行数据对LLMs翻译能力的影响，展现出LLMs在处理这些挑战中的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.08350v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.0835.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fpangjh3\u002FLLM4MT)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-16\u003C\u002Fspan> | **DoraemonGPT: Toward Understanding Dynamic Scenes with Large Language Models**\u003Cbr>\u003Csub>机构:  Zhejiang University\u003Cbr>DoraemonGPT是一个LLM驱动的智能体，通过符号记忆和工具集来理解并解答涉及动态视频的复杂问题。其采用了MCTS规划器优化回答的生成过程，能够在真实世界场景中处理更为复杂的任务。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.08392v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.08392.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-15\u003C\u002Fspan> | **A Study on Large Language Models' Limitations in Multiple-Choice Question Answering**\u003Cbr>\u003Csub>机构: David R. Cheriton School of Computer Science\u003Cbr>该论文针对LLMs在MCQ任务中的限制进行了研究，指出多数模型在此类任务中表现不佳。论文还发现模型的回答往往依赖于选项顺序，并提出了有效的评估方法来排除这些偏见。论文推荐在使用MCQ评估LLMs时要格外小心，并测试模型是否真正理解了任务。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.07955v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.07955.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-15\u003C\u002Fspan> | **MAPLE: Multilingual Evaluation of Parameter Efficient Finetuning of Large Language Models**\u003Cbr>\u003Csub>机构: Microsoft Research India\u003Cbr>这篇论文研究了大型语言模型在多语言任务上通过参数高效微调后的性能，特别是在低资源语言和英语任务上。研究展示了PEFT的潜力，同时指出了未来工作的一些可能方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.07598v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.07598.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-15\u003C\u002Fspan> | **The What, Why, and How of Context Length Extension Techniques in Large Language Models -- A Detailed Survey**\u003Cbr>\u003Csub>机构: Technology Innovation Institute UAE, Islamic University of Technology Bangladesh, Stanford University, Amazon GenAI, AI Institute University of South Carolina\u003Cbr>本论文是关于LLMs上下文长度扩展技术的详细调研。它为研究人员提供了该领域的现有策略和挑战的有组织概览，并鼓励了对未来发展的讨论。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.07872v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.07872.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-14\u003C\u002Fspan> | **Small LLMs Are Weak Tool Learners: A Multi-LLM Agent**\u003Cbr>\u003Csub>机构: Sun Yat-sen University, Alibaba Group\u003Cbr>研究表明小型LLM在作为工具学习者方面较为薄弱，通过引入α-UMi多LLM框架来构建性能更优的LLM代理，提出了必要的双阶段微调策略，并深入分析了数据规模法则。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.07324v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.07324.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-13\u003C\u002Fspan> | **Bridging the Preference Gap between Retrievers and LLMs**\u003Cbr>\u003Csub>本论文介绍了BGM框架以解决检索器和LLMs之间的\"偏好差\"问题，通过一个序列到序列（seq2seq）的桥模型结合SL和RL的训练方案，优化了检索信息以满足LLMs的偏好，改进了多个下游任务的表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06954v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06954.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-12\u003C\u002Fspan> | **From Automation to Augmentation: Large Language Models Elevating Essay Scoring Landscape**\u003Cbr>\u003Csub>机构: Tsinghua University, University of Maryland, Beijing Xicheng Educational Research Institute  \u003Cbr>本文的研究展现了大型语言模型在教育领域中，特别是在AES系统中的潜力。LLMs不仅能够自动化评分过程，还能够通过生成反馈来增强人类评分者的表现。这不仅是技术上的进步，更为未来的人工智能辅助教育和人工智能与人类的高效协作提供了宝贵见解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06431v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06431.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-12\u003C\u002Fspan> | **TestSpark: IntelliJ IDEA's Ultimate Test Generation Companion**\u003Cbr>\u003Csub>机构: JetBrains Research, Delft University of Technology\u003Cbr>论文提出了TestSpark插件，它结合了基于搜索的软件测试生成和基于语言模型的测试生成方法，在IntelliJ IDEA中提高了单元测试的生成和集成效率，同时解决了LLM生成测试用例可编译性的问题。插件的开源特性使其成为连接软件开发者和研究者的桥梁，有助于测试生成技术的实用性进步。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06580v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.0658.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FJetBrains-Research\u002FTestSpark)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-12\u003C\u002Fspan> | **An Experimental Design Framework for Label-Efficient Supervised Finetuning of Large Language Models**\u003Cbr>\u003Csub>机构: University of Washington Seattle, University of Wisconsin-Madison, Stanford University\u003Cbr>这篇论文提出了一个实验设计框架，为了提高大型语言模型在监督式微调（SFT）过程中的标签效率。它展示了实验设计技术可以在维持低计算成本的同时，大幅提高标签效率，在一些任务中与随机采样相比节省了50%的注释成本。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06692v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06692.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-12\u003C\u002Fspan> | **APAR: LLMs Can Do Auto-Parallel Auto-Regressive Decoding**\u003Cbr>\u003Csub>机构: Tsinghua University, Zhipu AI\u003Cbr>通过实施APAR，该研究成功提高了LLMs在内存受限场景和高吞吐率场景下的解码效率和生成速度，同时保持了生成质量，为大语言模型的部署提供了一种新的高效策略。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06761v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06761.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-12\u003C\u002Fspan> | **Kun: Answer Polishment for Chinese Self-Alignment with Instruction Back-Translation**\u003Cbr>\u003Csub>机构: Tianyu Zheng, Shuyue Guo, Xingwei Qu, Jiawei Guo, Weixu Zhang, Xinrun Du, Chenghua Lin, Wenhao Huang, Wenhu Chen, Jie Fu, Ge Zhang\u003Cbr>这篇论文提出了Kun策略，解决了中文大型语言模型指令微调中存在的数据一致性问题，通过AP过程和新的数据生成方法，减少了对人工标注的依赖。评估结果表明，Kun策略在创建高质量数据集方面具有明显优势。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06477v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06477.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FZheng0428\u002FCOIG-Kun)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-12\u003C\u002Fspan> | **How Johnny Can Persuade LLMs to Jailbreak Them: Rethinking Persuasion to Challenge AI Safety by Humanizing LLMs**\u003Cbr>\u003Csub>机构: Virginia Tech, Renmin University of China, UC Davis\u003Cbr>本论文提出了将LLMs视为具备类人沟通能力的实体，利用了一个新的视角来研究AI安全问题。通过将十多年的社会科学研究应用于AI安全，制定了一个说服技巧分类法，并通过创建的工具自动生成了对抗性提示。结果表明，说服技巧可以有效地增强有风险行为被LLMs执行的可能性，同时揭示了当前防御手段在应对这类策略时的不足。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06373v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06373.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-12\u003C\u002Fspan> | **Teaching Code LLMs to Use Autocompletion Tools in Repository-Level Code Generation**\u003Cbr>\u003Csub>机构: Nanyang Technological University, Fudan University\u003Cbr>该论文成功提出了一种新方法TOOLGEN，通过集成自动完成工具到仓库级代码生成中的LLMs，解决了依赖性问题，提高了代码生成的质量和成功率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06391v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06391.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-11\u003C\u002Fspan> | **Improving Large Language Models via Fine-grained Reinforcement Learning with Minimum Editing Constraint**\u003Cbr>\u003Csub>机构: Gaoling School of Artificial Intelligence, Renmin University of China; School of Information, Renmin University of China; Kuaishou Technology, Beijing China.\u003Cbr>本论文提出了一种新的RL方法，名为RLMEC，通过生成式奖励模型和最小编辑机制，使大型语言模型在RL训练过程中实现更精细的监督和训练的稳定性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06081v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06081.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FRUCAIBox\u002FRLMEC)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-11\u003C\u002Fspan> | **Chain of History: Learning and Forecasting with LLMs for Temporal Knowledge Graph Completion**\u003Cbr>\u003Csub>机构: Tsinghua Shenzhen International Graduate School Tsinghua University, School of Computer Science Peking University, Baidu Inc.\u003Cbr>本论文提出了一种使用大型语言模型进行时间知识图谱完成的方法，通过高效的微调方法和结合结构信息的历史数据增强，提高了模型的推理能力和性能。实验显示该方法有效地提升了时间知识图谱预测的精度，达到了最先进的结果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06072v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06072.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-11\u003C\u002Fspan> | **Risk Taxonomy, Mitigation, and Assessment Benchmarks of Large Language Model Systems**\u003Cbr>\u003Csub>机构: Zhongguancun Laboratory, Tsinghua University, Institute of Information Engineering Chinese Academy of Sciences\u003Cbr>本文为大语言模型系统中的风险分类、缓解措施以及评估标准提供了全面的概述，提出了一个新的系统化分类框架，帮助开发者更全面地理解和处理LLM系统的潜在风险。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05778v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05778.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-11\u003C\u002Fspan> | **Patchscope: A Unifying Framework for Inspecting Hidden Representations of Language Models**\u003Cbr>\u003Csub>机构: Google Research, Tel Aviv University\u003Cbr>该论文提出了一个名为Patchscopes的框架，提供了一种新的方法去解释大型语言模型（LLMs）隐藏表示中编码的信息，并且能够纠正多步推理错误。Patchscopes作为一种通用的可配置框架，不仅统一了现有的解释工具，并解决了它们自身的一些不足，同时也开辟了新的研究和应用可能性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06102v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06102.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-11\u003C\u002Fspan> | **TOFU: A Task of Fictitious Unlearning for LLMs**\u003Cbr>\u003Csub>机构: Carnegie Mellon University\u003Cbr>文章为LLM遗忘问题提供了新的数据集和评估机制，TOFU任务展示了现有遗忘技术的不足，鼓励了相继而来的改进和研究工作。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06121v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06121.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-11\u003C\u002Fspan> | **LLM-as-a-Coauthor: The Challenges of Detecting LLM-Human Mixcase**\u003Cbr>\u003Csub>机构: LAIR Lab Lehigh University, Huazhong University of Science and Technology  \u003Cbr>本文定义了混合场景中的混合文本（mixcase），构建了MIXSET数据集，并提出了通向解决混合文本检测问题的见解和方向。研究发现，现有的检测器在识别混合文本方面存在不足，这提出了制定更细粒度检测器的紧迫需求。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05952v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05952.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FDongping-Chen\u002FMixSet)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-11\u003C\u002Fspan> | **Evidence to Generate (E2G): A Single-agent Two-step Prompting for Context Grounded and Retrieval Augmented Reasoning**\u003Cbr>\u003Csub>机构: Qatar Computing Research Institute \u003Cbr>本论文提出了一个新的、用于改善LLMs在上下文推理能力的单代理双步提示框架——Evidence to Generate (E2G)。通过要求LLMs在生成答案的同时提供证据与解释，E2G能够减少错误推理并提高模型在处理各种推理任务时的准确度。实验结果表明，E2G方法在多个情境密集型语言任务中表现出较CoT更好的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05787v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05787.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-11\u003C\u002Fspan> | **EASYTOOL: Enhancing LLM-based Agents with Concise Tool Instruction**\u003Cbr>\u003Csub>机构: Fudan University, Microsoft Research Asia, Zhejiang University\u003Cbr>本文提出了一种名为EASYTOOL的方法，可以通过简化和统一工具文档的指令来提高LLM基础代理在工具使用方面的表现，解决了现有工具使用中的不一致性、冗余性和不完整性问题。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06201v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06201.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fmicrosoft\u002FJARVIS)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-11\u003C\u002Fspan> | **The Benefits of a Concise Chain of Thought on Problem-Solving in Large Language Models**\u003Cbr>\u003Csub>机构: Johns Hopkins University\u003Cbr>此研究表明，通过使用简洁的思维链提示（CCoT），在大型语言模型中可以大幅减少文本输出的长度，而不会影响解决问题的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05618v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05618.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-10\u003C\u002Fspan> | **InfiAgent-DABench: Evaluating Agents on Data Analysis Tasks**\u003Cbr>\u003Csub>InfiAgent-DABench提供了一个新颖的评估基准，这不仅有助于衡量智能代理在数据分析任务中的性能，同时也是探索如何改进和优化LLM在这一特定领域应用的重要一步。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05507v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05507.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FInfiAgent\u002FInfiAgent)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-10\u003C\u002Fspan> | **CASA: Causality-driven Argument Sufficiency Assessment**\u003Cbr>\u003Csub>机构: Peking University\u003Cbr>本论文介绍了一个基于LLMs的零样本因果驱动论证充分性评估框架（CASA），成功应对了无观测数据下论证充分性量化和干预的难题，并在实际应用中展示了其有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05249v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05249.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fxxxiaol\u002FCASA)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-10\u003C\u002Fspan> | **Leveraging Print Debugging to Improve Code Generation in Large Language Models**\u003Cbr>\u003Csub>机构: Zhejiang University, ByteDance\u003Cbr>本文提出了一种利用print debugging方法指导LLMs进行代码生成和调试的方法，并且在Leetcode问题集上验证了其有效性，特别是在简单和中等难度的问题上。尽管在高难度问题上效果有限，但这项工作仍然是LLMs在代码调试方面的一个重要进步。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05319v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05319.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-10\u003C\u002Fspan> | **AUTOACT: Automatic Agent Learning from Scratch via Self-Planning**\u003Cbr>\u003Csub>机构: Zhejiang University, Alibaba Group\u003Cbr>这项研究提出了一个名为AUTOACT的框架，它通过自我指导和自我规划实现语言代理的自动学习，以应对从零开始学习新任务的挑战。该框架的核心贡献在于有效的数据扩充方法和高效率的自动代理学习过程。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05268v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05268.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fzjunlp\u002FAutoAct)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-10\u003C\u002Fspan> | **Prompting Large Language Models for Recommender Systems: A Comprehensive Framework and Empirical Analysis**\u003Cbr>\u003Csub>机构: Renmin University of China, Beijing Key Laboratory of Big Data Management and Analysis Methods, Meituan Group\u003Cbr>这项工作提出了一个名为ProLLM4Rec的框架，系统地分析了利用大型语言模型(LLMs)作为推荐系统的基础模型，并通过实验测试了不同情况下对LLMs的影响。通过实证分析，总结了对未来研究的启发性发现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04997v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.04997.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-10\u003C\u002Fspan> | **Attendre: Wait To Attend By Retrieval With Evicted Queries in Memory-Based Transformers for Long Context Processing**\u003Cbr>\u003Csub>机构: Google Research\u003Cbr>论文成功地提出了一个新的基于内存的转换器方法，通过存储驱逐策略和ATTENDRE层，有效地减少内存需求并支持双向注意力，在长序列处理上表现出与传统方法相当的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04881v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.04881.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-10\u003C\u002Fspan> | **Bootstrapping LLM-based Task-Oriented Dialogue Agents via Self-Talk**\u003Cbr>\u003Csub>机构: AWS AI Labs\u003Cbr>论文提出了一种基于大型语言模型（LLMs）自我对话生成训练数据的新方法，该方法有潜力改进任务导向对话代理的性能。尽管存在一些限制，研究结果表明，当选择高质量对话作为训练数据时，可以有效提高模型的性能。这证明了在正确的设置下，通过自我生成数据进行微调的语言模型确实有潜力实现自我改进，并成为更好的任务导向对话代理。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05033v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05033.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-10\u003C\u002Fspan> | **Personal LLM Agents: Insights and Survey about the Capability, Efficiency and Security**\u003Cbr>\u003Csub>机构: Tsinghua University, Xiaomi AI Lab\u003Cbr>该论文作为一项调研工作，介绍了个人LLM代理的现状、挑战和未来趋势，并提出了一种通用的系统架构和智能水平定义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05459v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05459.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-09\u003C\u002Fspan> | **Know Your Needs Better: Towards Structured Understanding of Marketer Demands with Analogical Reasoning Augmented LLMs**\u003Cbr>\u003Csub>机构: Zhejiang University, Ant Group\u003Cbr>本文提出了一种名为ARALLM的新方法，该方法结合了类比推理和多任务模型提炼，有效促进了大型语言模型从自然语言中理解并转换为结构化的逻辑语言的能力。通过这种方法，非专业营销人员能够利用自然语言来选择目标用户，有望改变用户定位实践。这种能力的提升，不仅在营销场景中有实际的应用价值，同时也为大型语言模型的功能性和实用性做出了有益的探索。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04319v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.04319.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-09\u003C\u002Fspan> | **Large Language Models for Robotics: Opportunities, Challenges, and Perspectives**\u003Cbr>\u003Csub>机构: Northwestern Polytechnical University, University of Georgia, Shaanxi Normal University\u003Cbr>论文提出的多模态GPT-4V框架，结合自然语言处理和视觉感知，有望解决LLMs在机器人任务规划中面对的挑战。这对于理解和实现更高级别的人机交互和人工智能的未来具有重要意义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04334v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.04334.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-09\u003C\u002Fspan> | **Chain-of-Table: Evolving Tables in the Reasoning Chain for Table Understanding**\u003Cbr>\u003Csub>机构: University of California San Diego, Google Cloud AI Research, Google Research\u003Cbr>该论文提出了一个创新的CHAIN-OF-TABLE框架，通过将表格数据显式地用于推理链，动态地规划并更新操作过程，从而提高了LLMs在基于表格的推理任务中的准确性和可靠性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04398v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.04398.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-09\u003C\u002Fspan> | **Rewriting the Code: A Simple Method for Large Language Model Augmented Code Search**\u003Cbr>\u003Csub>机构: Nanyang Technological University Singapore\u003Cbr>ReCo利用LLMs重写代码库中的代码，通过风格规范化显著提高了代码搜索的准确性，并通过新的评价指标CSSim量化了风格的差异，推动了代码样式标准化的研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04514v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.04514.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-09\u003C\u002Fspan> | **The Critique of Critique**\u003Cbr>\u003Csub>机构: The Hong Kong Polytechnic University, Shanghai Jiao Tong University, Shanghai Artificial Intelligence Laboratory\u003Cbr>METACRITIQUE是首个针对自然语言批判进行评价的框架，其通过精确度和召回率的原则评估批判的质量，并实现了高度的可解释性和透明性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04518v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.04518.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FGAIR-NLP\u002FMetaCritique)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-09\u003C\u002Fspan> | **Agent Alignment in Evolving Social Norms**\u003Cbr>\u003Csub>机构: Fudan University\u003Cbr>此论文提出了一个EvoluationaryAgent框架，用于评估和增强大型智能代理在动态持续变化的社会规范中的自适应性和一致性。研究强调了代理在进化中与社会规范对齐的重要性，并通过实验验证了模型的可行性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04620v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.0462.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-08\u003C\u002Fspan> | **TTMs: Fast Multi-level Tiny Time Mixers for Improved Zero-shot and Few-shot Forecasting of Multivariate Time Series**\u003Cbr>\u003Csub>机构: IBM Research\u003Cbr>TTM展示了专门针对多样化时间序列数据训练的小型预训练模型在多变量时间序列零\u002F少样本预测中的高效性和转移学习能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.03955v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.03955.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-08\u003C\u002Fspan> | **SpeechAgents: Human-Communication Simulation with Multi-Modal Multi-Agent Systems**\u003Cbr>\u003Csub>机构: Fudan University\u003Cbr>论文提出了一个基于多模态大型语言模型的多代理系统——SpeechAgents，其能模拟包含多达 25 名代理人的人类交流场景，并展现出卓越的可扩展性。通过使用多模态信号作为代理间交流的媒介，系统不仅可以模拟具有正确内容、真实节奏和丰富情感的对话，而且还能应用于如戏剧创作和有声小说生成等任务。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.03945v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.03945.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-08\u003C\u002Fspan> | **MARG: Multi-Agent Review Generation for Scientific Papers**\u003Cbr>\u003Csub>机构: Northwestern University, The Hebrew University of Jerusalem, Allen Institute for AI\u003Cbr>本论文提出了一个创新的多代理评论生成方法（MARG），可以跨越基础模型的上下文大小限制，生成高质量的科学论文同行评审反馈。通过用户研究和自动化度量，MARG的反馈质量对比基线有显著提高，生成的有用评论数量提高了2.2倍，同时生成了更加具体的评论。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04259v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.04259.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-07\u003C\u002Fspan> | **Soaring from 4K to 400K: Extending LLM's Context with Activation Beacon**\u003Cbr>\u003Csub>机构: Beijing Academy of Artificial Intelligence, Renmin University of China, Nankai University\u003Cbr>这篇文章介绍了激活信标这一能够扩展大型语言模型上下文长度的新技术，使得模型能在有限上下文窗口内感知更广的上下文信息，同时保留对短上下文信息的处理能力。激活信标代表了一种有效、高效、兼容且训练成本低的方法，来扩展LLMs的上下文长度。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.03462v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.03462.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-07\u003C\u002Fspan> | **ChatGPT for Conversational Recommendation: Refining Recommendations by Reprompting with Feedback**\u003Cbr>\u003Csub>机构: University of Louisville, Microsoft\u003Cbr>该论文探索了ChatGPT作为对话推荐系统的有效性。通过构建围绕ChatGPT的流程，模拟用户实际使用情景，并对流行偏见进行了研究和缓解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.03605v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.03605.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-07\u003C\u002Fspan> | **Exploring Large Language Model based Intelligent Agents: Definitions, Methods, and Prospects**\u003Cbr>\u003Csub>机构: The Chinese University of Hong Kong, DeepWisdom, Peking University\u003Cbr>论文提出了一个用于指导未来研究与开发的基于LLM的智能代理系统的框架，并探讨了提高它们的计划能力和多模态信息处理能力的不同方法，以及如何解决LLM代理所面临的挑战，为未来的研究方向提供了清晰的指南。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.03428v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.03428.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-07\u003C\u002Fspan> | **Grimoire is All You Need for Enhancing Large Language Models**\u003Cbr>\u003Csub>机构: Beihang University, Renmin University of China\u003Cbr>该论文提出了一种名为SLEICL的方法，通过强语言模型学习示例技能并将其转移给弱语言模型，显著提高了弱模型的ICL能力。通过实验验证了该方法的有效性，展现了该技术在增强弱语言模型上下文学习能力方面的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.03385v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.03385.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-06\u003C\u002Fspan> | **The Dawn After the Dark: An Empirical Study on Factuality Hallucination in Large Language Models**\u003Cbr>\u003Csub>机构: Renmin University of China, Université de Montréal\u003Cbr>本论文通过系统性实证研究，深入了解并探索大型语言模型中的幻觉问题，识别了幻觉的来源、检测方法和减轻策略，并提出了新的基准HaluEval 2.0和简单有效的幻觉检测框架。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.03205v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.03205.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FRUCAIBox\u002FHaluEval-2.0)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-06\u003C\u002Fspan> | **Quartet Logic: A Four-Step Reasoning (QLFR) framework for advancing Short Text Classification**\u003Cbr>\u003Csub>机构: Aerospace Information Research Institute Chinese Academy of Sciences, Key Laboratory of Target Cognition and Application Technology, University of Chinese Academy of Sciences\u003Cbr>本研究提出了一个针对短文本分类任务的Quartet Logic: A Four-Step Reasoning (QLFR)框架，以及一个CoT驱动的多任务学习（QLFR-CML）方法，这两者都通过大语言模型的推理链来解决STC领域中的挑战。实验结果证明了这些方法的有效性和实用性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.03158v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.03158.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-06\u003C\u002Fspan> | **CogGPT: Unleashing the Power of Cognitive Dynamics on Large Language Models**\u003Cbr>\u003Csub>机构: Harbin Institute of Technology, Kuaishou Technology\u003Cbr>CogGPT通过引入迭代认知机制和记忆保持系统，有效地解决了大型语言模型在模仿人类认知动态方面的挑战，展示了在连续信息处理中的优秀表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.08438v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.08438.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-05\u003C\u002Fspan> | **Infinite-LLM: Efficient LLM Service for Long Context with DistAttention and Distributed KVCache**\u003Cbr>\u003Csub>机构: Alibaba Group, Shanghai Jiao Tong University\u003Cbr>文章提出了一个有效支持长上下文语言模型云服务的系统，通过分布式算法DistAttention，优化了注意力模块的处理和存储，并通过DistKV-LLM服务系统进行管理和协调，实现了在分布式环境中对资源的高效分配和管理，验证了其在性能上的明显提高。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.02669v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.02669.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-05\u003C\u002Fspan> | **From LLM to Conversational Agent: A Memory Enhanced Architecture with Fine-Tuning of Large Language Models**\u003Cbr>\u003Csub>机构: Beike Inc.\u003Cbr>本论文介绍了RAISE框架，通过增强记忆系统和结构化的代理构建过程，提高了LLMs在多轮对话中的表现，尤其是在房地产销售情境中。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.02777v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.02777.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-04\u003C\u002Fspan> | **Using LLM to select the right SQL Query from candidates**\u003Cbr>\u003Csub>机构: Peking University\u003Cbr>本文提出了一种借助大型语言模型自动生成text-to-SQL测试用例的方法，并设计了三步重新排序过程，实验显示该方法能显著提高现有text-to-SQL模型的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.02115v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.02115.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-04\u003C\u002Fspan> | **SPEER: Sentence-Level Planning of Long Clinical Summaries via Embedded Entity Retrieval**\u003Cbr>\u003Csub>机构: Columbia University\u003Cbr>本论文针对医院出院总结的长篇文档任务，提出了一个基于嵌入式实体检索的句子级规划方法SPEER，通过引导大型语言模型LLMs更好地覆盖关键实体，生成更完整和可信的临床总结。研究证明了SPEER方法在实际应用中可以提高文档的覆盖度和准确性，减轻临床医生的文档负担。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.02369v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.02369.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-04\u003C\u002Fspan> | **On the Prospects of Incorporating Large Language Models (LLMs) in Automated Planning and Scheduling (APS)**\u003Cbr>\u003Csub>机构: University of South Carolina, New Mexico State University, IBM Research\u003Cbr>本文是对大型语言模型在自动规划和调度领域的应用进行了综述，提出了将领先的 LLMs 如 GPT-4 和 BERT 与经典规划方法结合的前景，以及在八个不同的规划问题类别中应用 LLMs 的潜力，以期发展更先进、更智能的规划系统。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.02500v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.025.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-04\u003C\u002Fspan> | **On the Prospects of Incorporating Large Language Models (LLMs) in Automated Planning and Scheduling (APS)**\u003Cbr>\u003Csub>机构: University of South Carolina, New Mexico State University, IBM Research\u003Cbr>本论文在理解大型语言模型（LLMs）与自动规划和调度（APS）的整合前景，突破了传统系统对上下文的适应性局限性，为实现更动态、上下文敏感的规划途径提供了可能性，并为进一步的应用和研究奠定了基础。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.02500v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.025.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-04\u003C\u002Fspan> | **Self-Contrast: Better Reflection Through Inconsistent Solving Perspectives**\u003Cbr>\u003Csub>机构: Zhejiang University, OPPO Research Institute\u003Cbr>本文提出了一种名为“自我对比”的新策略，用于改善大型语言模型（LLM）在反思和自我修正过程中存在的固执和不一致问题，通过创建多样化解决方案视角，对比不同解决方案的差异，并将差异总结为检查清单，进而提升了LLM的反思质量，并通过实验验证了该策略的效果和广泛适用性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.02009v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.02009.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-04\u003C\u002Fspan> | **ICE-GRT: Instruction Context Enhancement by Generative Reinforcement based Transformers**\u003Cbr>\u003Csub>机构: Bytedance Inc.\u003Cbr>本论文提出了针对大型语言模型在特定领域任务中深度与准确性提升的方法——ICE-GRT。通过结合人类反馈的强化学习，ICE-GRT 在不牺牲一般性能的前提下，显著提升了特定领域的能力，并在多项评估任务中达到了最先进的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.02072v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.02072.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-04\u003C\u002Fspan> | **LLM Augmented LLMs: Expanding Capabilities through Composition**\u003Cbr>\u003Csub>机构: Google Research, Google DeepMind\u003Cbr>该论文提出了一个新的模型扩展框架 —— CALM，有效整合了两个大型语言模型以实现新的任务，且在多个实验中证明了其有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.02412v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.02412.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-03\u003C\u002Fspan> | **Social Media Ready Caption Generation for Brands**\u003Cbr>\u003Csub>机构: Adobe Research India\u003Cbr>本论文提出了一个新的框架，旨在帮助品牌在社交媒体上创造与品牌形象和个性相符的吸引人的标题。框架分为两部分，成功应对了生成与品牌相关性强且吸引眼球的社交媒体标题的挑战。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.01637v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.01637.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-03\u003C\u002Fspan> | **MedSumm: A Multimodal Approach to Summarizing Code-Mixed Hindi-English Clinical Queries**\u003Cbr>\u003Csub>机构: Indian Institute of Technology Patna, Stanford University, Amazon GenAI\u003Cbr>MedSumm是一个新颖的多模态医疗问题总结框架，它能够通过整合文本和视觉信息生成医学细节丰富的总结，有潜力提高医疗决策的质量并加深对患者问题的理解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.01596v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.01596.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-02\u003C\u002Fspan> | **A Comprehensive Survey of Hallucination Mitigation Techniques in Large Language Models**\u003Cbr>\u003Csub>机构: Islamic University of Technology Bangladesh, University of South Carolina, Stanford University\u003Cbr>本文是对LLM幻觉减轻技术的全面综述，提出了分类框架和系统化的反馈和理由方法，并评估了这些技术的有效性和影响。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.01313v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.01313.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-02\u003C\u002Fspan> | **LLM Maybe LongLM: Self-Extend LLM Context Window Without Tuning**\u003Cbr>\u003Csub>这篇论文成功展示了一种无需fine-tuning即可扩展LLMs上下文窗口的方法，这对于在计算资源受限情况下提升大型语言模型处理长文本的能力具有重要意义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.01325v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.01325.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-01\u003C\u002Fspan> | **A & B == B & A: Triggering Logical Reasoning Failures in Large Language Models**\u003Cbr>\u003Csub>机构: The Chinese University of Hong Kong, Tencent AI Lab\u003Cbr>本论文针对LLMs的逻辑推理能力的评估和改进问题，提出了一个名为LogicAsker的方法，能够全面评估LLMs的推理能力，并通过问题生成和上下文学习有效提升这些能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.00757v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.00757.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-01\u003C\u002Fspan> | **The Earth is Flat? Unveiling Factual Errors in Large Language Models**\u003Cbr>\u003Csub>机构: The Chinese University of Hong Kong, Tencent AI Lab\u003Cbr>本文介绍的FactChecker提供了针对大型语言模型的事实错误自动测试新框架，通过构建知识图谱并生成测试问题，揭示并减少了模型的事实错误。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.00761v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.00761.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-01\u003C\u002Fspan> | **From Prompt Engineering to Prompt Science With Human in the Loop**\u003Cbr>\u003Csub>机构: University of Washington\u003Cbr>文章展示了如何将LLMs的提示工程转化为更为科学和系统的提示科学。通过引入人在环中的质性编码方法，确保了LLM生成的响应的质量和一致性，同时消除了个体主观性和随意性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04122v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.04122.md)  |\n\n---\n\n### 12月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-31\u003C\u002Fspan> | **BatchEval: Towards Human-like Text Evaluation**\u003Cbr>\u003Csub>机构: Beijing Institute of Technology, Xiaohongshu Inc  \u003Cbr>论文提出了一种新的LLM评估范式——BATCHEVAL，解决了自动文本评估在鲁棒性和与人类判断一致性方面的问题。通过批量评估和迭代处理，BATCHEVAL在准确性和成本效率方面显著超越了现有方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.00437v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2401.00437.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-31\u003C\u002Fspan> | **Improving Text Embeddings with Large Language Models**\u003Cbr>\u003Csub>机构: Microsoft Corporation\u003Cbr>本文采用最新的大型语言模型和合成数据，提出一种新颖的文本嵌入方法，能够在无需人工标注数据且训练步骤少于1千的情况下，达到与竞争性基准相匹配的性能，为进一步提升文本嵌入技术提供了有力证据。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.00368v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2401.00368.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-29\u003C\u002Fspan> | **DB-GPT: Empowering Database Interactions with Private Large Language Models**\u003Cbr>\u003Csub>机构: Alibaba Group\u003Cbr>本文提出了名为DB-GPT的创新项目，该项目集成了LLMs及数据库系统，以提升用户体验和无障碍性。DB-GPT展现了层次化设计，有效处理了隐私和安全保护等问题，同时通过多源RAG和自适应ICL提升了系统的整体性能和效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17449v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17449.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Feosphoros-ai\u002FDB-GPT)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-29\u003C\u002Fspan> | **Building Efficient Universal Classifiers with Natural Language Inference**\u003Cbr>\u003Csub>机构: Vrije Universiteit Amsterdam, University of London Royal Holloway, Hugging Face\u003Cbr>这篇论文提供了一种利用自然语言推断进行通用文本分类的新方法，并且提供了实现该方法的详细步骤和工具，能够在不牺牲性能的前提下显著提高模型的效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17543v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17543.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-29\u003C\u002Fspan> | **Enhancing Quantitative Reasoning Skills of Large Language Models through Dimension Perception**\u003Cbr>\u003Csub>机构: **Institution:** Shanghai Key Laboratory of Data Science School of Computer Science Fudan University, School of Data Science Fudan University, DataGrand Co. LTD\u003Cbr>本文的研究通过建立维度单位知识库和定制化基准测试，显著提升了LLMs的定量推理能力。这为理解文本中重要的量值信息并进行高准确度的推理任务提供了新的途径。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17532v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17532.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-29\u003C\u002Fspan> | **The Right Prompts for the Job: Repair Code-Review Defects with Large Language Model**\u003Cbr>\u003Csub>机构: Ant Group, Nanjing University\u003Cbr>研究探讨了LLMs在代码审查缺陷修复中的应用，提出了一个有效的半自动APR范例，分析了9种流行模型的性能，并设计了有效的提示以指导代码修复过程。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17485v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17485.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-29\u003C\u002Fspan> | **Truth Forest: Toward Multi-Scale Truthfulness in Large Language Models through Intervention without Tuning**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17484v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17484.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fjongjyh\u002Ftrfr)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-28\u003C\u002Fspan> | **Experiential Co-Learning of Software-Developing Agents**\u003Cbr>\u003Csub>机构: Tsinghua University,Dalian University of Technology,Beijing University of Posts and Telecommunications\u003Cbr>本文提出了一种新的框架，称为经验共同学习（Experiential Co-Learning），通过共同追踪、共同记忆和共同推理模块的顺序实现，使得LLM驱动的智能代理能够更有效地从历史轨迹中学习，并利用历史经验来相互推理解决新任务。展示了明显优于现有技术的绩效改进。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17025v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17025.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-28\u003C\u002Fspan> | **Challenge LLMs to Reason About Reasoning: A Benchmark to Unveil Cognitive Depth in LLMs**\u003Cbr>\u003Csub>机构: Chinese University of Hong Kong, Tencent AI Lab\u003Cbr>这篇论文提出了一个创新的评估模型，要求LLMs不仅要解决问题，还要进行元推理——即评估推理过程本身。这种方法有望揭示由于以往以结果为导向的评估方法而忽略的模型认知缺陷，为未来LLMs的评估和训练提供了新的方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17080v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1708.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-28\u003C\u002Fspan> | **Structured Packing in LLM Training Improves Long Context Utilization**\u003Cbr>\u003Csub>机构: University of Warsaw, Google DeepMind, Polish Academy of Sciences\u003Cbr>这篇论文通过提出SPLICE方法来改进长距离上下文的利用，验证了其在提高大规模语言模型上下文利用率和改进长上下文任务性能方面的有效性。SPLICE特别适用于在缺乏额外结构化信息的训练数据上构造训练示例。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17296v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17296.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-28\u003C\u002Fspan> | **GitAgent: Facilitating Autonomous Agent with GitHub by Tool Extension**\u003Cbr>\u003Csub>机构: Tsinghua University, Renmin University of China\u003Cbr>文章主要介绍了一个名为GITAGENT的自主代理，它可以自主从GitHub扩展工具，以满足用户查询的多种需求。GITAGENT通过解决非标准化挑战，能够自主学习基于GitHub Issues\u002FPRs的人类经验，以解决工具扩展过程中的问题，并且展示了在自主集成工具以完成跨专业领域任务方面的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17294v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17294.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-28\u003C\u002Fspan> | **Grounding-Prompter: Prompting LLM with Multimodal Information for Temporal Sentence Grounding in Long Videos**\u003Cbr>\u003Csub>机构: Tsinghua University\u003Cbr>本论文提出了Grounding-Prompter方法，针对长视频中的TSG问题，将LLM与时序推理和多模态信息结合起来，证明了通过多模态提示LLM的有效性，并通过实验验证了其在长视频TSG任务中的优越性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17117v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17117.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-28\u003C\u002Fspan> | **Challenge LLMs to Reason About Reasoning: A Benchmark to Unveil Cognitive Depth in LLMs**\u003Cbr>\u003Csub>机构: Chinese University of Hong Kong, Tencent AI Lab\u003Cbr>这篇论文提出了一个挑战LLMs进行元推理的新评估范式，并开发了配套的公开基准DiagGSM8K，这为评估LLMs的认知能力增加了一个新维度。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17080v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1708.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-28\u003C\u002Fspan> | **DrugAssist: A Large Language Model for Molecule Optimization**\u003Cbr>\u003Csub>机构: Tencent AI Lab, Department of Computer Science Hunan University\u003Cbr>DrugAssist是一个通过人机交互进行分子优化的模型，它突破了LLMs在药物发现过程中互动性不足的局限，并在多属性分子优化领域展现了出色的性能和转移能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.10334v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2401.10334.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fblazerye\u002FDrugAssist)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-28\u003C\u002Fspan> | **Improving In-context Learning via Bidirectional Alignment**\u003Cbr>\u003Csub>机构: Nanyang Technological University, Princeton University, Salesforce Research USA\u003Cbr>本文通过引入新颖的排名损失以及对输出分布的对齐，提出了双向对齐(BiAlign)，有效提高了小型模型的 ICL 能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17055v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17055.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-27\u003C\u002Fspan> | **Conversational Question Answering with Reformulations over Knowledge Graph**\u003Cbr>\u003Csub>机构: University of Illinois at Urbana-Champaign, Amazon\u003Cbr>CoRnNet 是一种新型RL模型，用于在知识图谱上进行会话式问题回答并结合LLM生成的改写，展现了比其他先进模型更出色的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17269v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17269.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-27\u003C\u002Fspan> | **Adapting Large Language Models for Education: Foundational Capabilities, Potentials, and Challenges**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University (SJTU)\u003Cbr>本论文是一个关于如何适配大型语言模型于教育系统的综述，它提供了对LLMs在教育相关能力方面的发展情况的概述，并探讨了构建这样系统的潜力与挑战，为未来的相关研究提供了洞见。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.08664v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2401.08664.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-27\u003C\u002Fspan> | **How Robust are LLMs to In-Context Majority Label Bias?**\u003Cbr>\u003Csub>机构: Amazon\u003Cbr>本文对LLMs在面对ICL中多数类标签偏差时的鲁棒性进行了全面研究，通过实验发现某些模型在处理这种偏差时显示出显著的稳定性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.16549v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.16549.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-27\u003C\u002Fspan> | **Rethinking Tabular Data Understanding with Large Language Models**\u003Cbr>\u003Csub>机构: UC San Diego, USC, UC Davis  \u003Cbr>这篇论文深入探讨了LLMs对表格数据的理解和推理能力，对表格结构的鲁棒性、文本与符号推理的比较，以及多推理路径聚合对模型性能提升的影响做出了贡献。所提出的表格结构标准化方法和混合自一致性机制对提高LLMs在表格数据推理上的性能具有重要意义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.16702v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.16702.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-26\u003C\u002Fspan> | **Think and Retrieval: A Hypothesis Knowledge Graph Enhanced Medical Large Language Models**\u003Cbr>\u003Csub>机构: Key Laboratory of High Confidence Software Technologies (Peking University), Ministry of Education; School of Computer Science Peking University, Beijing China\u003Cbr>HyKGE框架有效解决了大型语言模型在面对医疗领域复杂问题时的准确性和解释性挑战，具有在医疗领域中的潜在应用并且在实际场景中展示出了很大的优越性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.15883v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.15883.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-26\u003C\u002Fspan> | **Scaling Down, LiTting Up: Efficient Zero-Shot Listwise Reranking with Seq2seq Encoder-Decoder Models**\u003Cbr>\u003Csub>机构: University of Waterloo\u003Cbr>这篇论文提出了LiT5-Distill和LiT5-Score两种序列到序列的编码器-解码器模型，用于有效的零样本列表级重新排序。这些方法不仅在模型效果上竞争力强，并且解决了传统依赖于大型LLM和外部相关性标签的问题，展示了在这一领域的优化和进步。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.16098v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.16098.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fcastorini\u002FLiT5)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-26\u003C\u002Fspan> | **Align on the Fly: Adapting Chatbot Behavior to Established Norms**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University, Shanghai Artificial Intelligence Laboratory, The Hong Kong Polytechnic University\u003Cbr>该工作提出了一个动态的OPO方法，通过收集法律和道德规则作为外部存储器来限制LLMs的行为，无需进一步训练，并通过一个可扩展的评估模块来应对潜在的基准测试泄漏问题及扩大测试规则的范围。尽管该方法在推理效率方面存在局限性并且检索模型仍可进一步优化，但在多个评估数据集上的广泛实验表明了该方法的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.15907v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.15907.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FGAIR-NLP\u002FOPO)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-26\u003C\u002Fspan> | **Supervised Knowledge Makes Large Language Models Better In-context Learners**\u003Cbr>\u003Csub>机构: School of Engineering Westlake University, Westlake Institute for Advanced Study, Peking University\u003Cbr>论文提出的SuperContext框架通过利用特定任务微调的SLMs的监督知识，显著提高了LLMs在自然语言理解和问答任务中的泛化能力和事实性。它代表了将小型模型的强大功能融入LLMs，以处理分布外数据和最小化幻觉现象的一种创新做法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.15918v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.15918.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-26\u003C\u002Fspan> | **KnowledgeNavigator: Leveraging Large Language Models for Enhanced Reasoning over Knowledge Graph**\u003Cbr>\u003Csub>机构: Northeastern University, Neusoft AI Magic Technology Research, Neusoft Institute of Intelligent Medical Research\u003Cbr>这篇论文介绍了一个新型框架KnowledgeNavigator，它通过改善知识图谱上的推理过程，解决了LLM在复杂推理任务上的性能局限问题。实验结果证实了其有效性，并有望在高风险和高敏感领域推广LLM的应用。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.15880v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1588.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-26\u003C\u002Fspan> | **RecRanker: Instruction Tuning Large Language Model as Ranker for Top-k Recommendation**\u003Cbr>\u003Csub>机构: City University of Hong Kong, The Chinese University of Hong Kong, Hangdian University\u003Cbr>该论文提出了RecRanker这一新型框架，它通过指令调整的方式优化了LLMs在top-k推荐任务中的性能，并有效地融合了传统推荐系统的信号，改善了模型在推荐场景中的应用表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.16018v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.16018.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-26\u003C\u002Fspan> | **A Prompt Learning Framework for Source Code Summarization**\u003Cbr>\u003Csub>机构: Nanyang Technological University, Tencent Inc., Nanjing University\u003Cbr>本论文提出了一个新颖的PromptCS框架，用于源代码摘要，能够生成高质量的摘要，减少了训练成本，并提供了代码以供他人研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.16066v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.16066.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-26\u003C\u002Fspan> | **Aligning Large Language Models with Human Preferences through Representation Engineering**\u003Cbr>\u003Csub>机构: Fudan University  \u003Cbr>本论文提出了一个新颖的方法RAHF，通过表示工程技术操纵内部模型表示来对齐LLMs与人类偏好，这种方法在计算上高效且容易实现，并展示了处理多种人类偏好或价值的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.15997v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.15997.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-25\u003C\u002Fspan> | **Alleviating Hallucinations of Large Language Models through Induced Hallucinations**\u003Cbr>\u003Csub>机构: Soochow University, Tencent AI Lab\u003Cbr>论文提出一个新颖的减少LLMs幻觉的方法，通过构建一个事实上较弱的LLM并在生成过程中减去其知识，改进了模型在生成事实性内容方面的表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.15710v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1571.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-25\u003C\u002Fspan> | **ESGReveal: An LLM-based approach for extracting structured data from ESG reports**\u003Cbr>\u003Csub>机构: Alibaba Cloud, Tsinghua University, Sun Yat-Sen University\u003Cbr>ESGReveal代表了在处理ESG数据中的一大步进，旨在通过大型语言模型和相关技术来提高从公司报告中提取结构化数据的一致性和准确性，并推动了ESG实践和透明度的改进。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17264v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17264.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-22\u003C\u002Fspan> | **Reasons to Reject? Aligning Language Models with Judgments**\u003Cbr>\u003Csub>机构: Tencent AI Lab, The Chinese University of Hong Kong\u003Cbr>论文提出了一个新的通过直接利用语言反馈来对齐LLMs的框架Contrastive Unlikelihood Training（CUT），并且证明了其在多种场景下的有效性，包括离线对齐和在线对齐，以及从未对齐的模型（冷启动）和已对齐的模型（热启动）进行进一步优化。研究显示，与奖励相比，评判性反馈在对齐LLMs方面具有更大的潜力，值得进行进一步研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.14591v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.14591.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-22\u003C\u002Fspan> | **VIEScore: Towards Explainable Metrics for Conditional Image Synthesis Evaluation**\u003Cbr>\u003Csub>机构: University of Waterloo, IN.AI Research\u003Cbr>该论文提出了一个名为VIEScore的评估框架，旨在提供对条件图像生成任务的可解释性评价。VIEScore克服了现有自动化度量无法解释评分理由的挑战，并能够适应各种任务需求。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.14867v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.14867.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-22\u003C\u002Fspan> | **A Survey of Reinforcement Learning from Human Feedback**\u003Cbr>\u003Csub>机构: LMU Munich, Duke Kunshan University\u003Cbr>这篇文章是对RLHF的综述，分析了它在人工智能和人机交互交叉点中的应用，并探讨了与LLMs相关的最新研究趋势。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.14925v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.14925.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-22\u003C\u002Fspan> | **Generative AI Beyond LLMs: System Implications of Multi-Modal Generation**\u003Cbr>\u003Csub>该论文是针对跨文本、图像和视频生成模型的系统性能特征化的首次工作，它揭示了不同于传统LLMs的独特系统属性，并提出了对于TTI\u002FTTV模型而言，传统的优化技术需要重新考虑的挑战和机会。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.14385v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.14385.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-22\u003C\u002Fspan> | **Large Language Model (LLM) Bias Index -- LLMBI**\u003Cbr>\u003Csub>机构: University of Oxford, University Canada West, Amazon Web Services (AWS)\u003Cbr>引入LLMBI是在创建公平可靠的LLMs方面迈出的重要一步。它为系统工程师和研究人员提供了一种定量衡量偏见的工具，引导他们持续改进这些强大的模型，确保它们反映社会的多样性和不断进化的结构。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.14769v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.14769.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-22\u003C\u002Fspan> | **Plan, Posture and Go: Towards Open-World Text-to-Motion Generation**\u003Cbr>\u003Csub>机构: Tsinghua University, Microsoft Research Asia\u003Cbr>研究者们提出了一个名为PRO-Motion的新框架，以克服传统文本到动作生成方法的局限性，并成功在开放世界场景中生成更多样和真实的动作。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.14828v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.14828.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-22\u003C\u002Fspan> | **YAYI 2: Multilingual Open-Source Large Language Models**\u003Cbr>\u003Csub>机构: Beijing Wenge Technology Co. Ltd., Institute of Automation Chinese Academy of Sciences\u003Cbr>该论文提出了YAYI 2，一个针对多语言场景优化的大型语言模型，通过在大规模语料库上进行预训练，并通过多种方法与人类价值观对齐，显著提升了模型在多种任务中的表现，特别是在中文相关任务上。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.14862v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.14862.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-22\u003C\u002Fspan> | **Pangu-Agent: A Fine-Tunable Generalist Agent with Structured Reasoning**\u003Cbr>\u003Csub>机构: Huawei Noah's Ark Lab, University College London, University of Oxford\u003Cbr>本论文提出了Pangu-Agent框架，目标是解决标准RL方法在多任务环境中所面临的挑战。Pangu-Agent通过内在函数引入结构性推理，并通过监督学习和RL实现智能体的微调，提高了智能体适应多环境交互的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.14878v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.14878.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-22\u003C\u002Fspan> | **NPHardEval: Dynamic Benchmark on Reasoning Ability of Large Language Models via Complexity Classes**\u003Cbr>\u003Csub>机构: University of Michigan, Rutgers University\u003Cbr>本论文通过NPHardEval基准测试提供了一种新的评估LLMs推理能力的方法。该基准测试广泛涵盖了从多项式时间到NP-Hard复杂性级别的问题，并设计了动态数据更新机制以防止模型过拟合，从而确保了评估结果的可靠性和真实性。这些发现极大地促进了对LLMs当前能力的理解，并为提高这些模型的推理能力铺平了道路。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.14890v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1489.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fcasmlab\u002FNPHardEval)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-21\u003C\u002Fspan> | **The Truth is in There: Improving Reasoning in Language Models with Layer-Selective Rank Reduction**\u003Cbr>\u003Csub>机构: MIT, Microsoft Research NYC\u003Cbr>该论文提出了LASER，一种在模型训练完成后对Transformer模型的特定层进行裁剪以提升性能的方法。作者表明，这种策略不仅有效，而且是首次发现可以通过精心选择的剪枝来增强Transformer模型的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.13558v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.13558.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-21\u003C\u002Fspan> | **On Task Performance and Model Calibration with Supervised and Self-Ensembled In-Context Learning**\u003Cbr>\u003Csub>机构: Language Technology Lab University of Cambridge\u003Cbr>本文提供了在资源有限的情况下不同学习方法的性能和校准的全面分析。这表明虽然提高性能和校准同时达成是困难的，但通过自组装技术能够在不影响性能的前提下增强模型的校准，对于未来LLMs的应用提供了重要的实践指导。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.13772v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.13772.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-21\u003C\u002Fspan> | **AppAgent: Multimodal Agents as Smartphone Users**\u003Cbr>\u003Csub>机构: Tencent  \u003Cbr>这项研究提出了一个创新的多模态代理框架，它允许代理像人类用户一样操作任何智能手机应用，并通过自动探索和观察人类演示来学习新应用的使用方法。研究结果证实了该框架在执行多样化高级任务时的效率和适应性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.13771v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.13771.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-21\u003C\u002Fspan> | **De novo Drug Design using Reinforcement Learning with Multiple GPT Agents**\u003Cbr>\u003Csub>机构: Tsinghua University, Microsoft Research AI\u003Cbr>这篇论文推出了一个结合多个GPT代理的强化学习算法用于药物分子的生成，并在GuacaMol基准测试和SARS-CoV-2蛋白靶标抑制剂设计中显示出良好的性能和实用性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06155v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2401.06155.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FHXYfighter\u002FMolRL-MGPT)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-20\u003C\u002Fspan> | **Time is Encoded in the Weights of Finetuned Language Models**\u003Cbr>\u003Csub>这项研究通过时间向量的概念表明了时间变化可以在一定程度上通过语言模型的权重空间来编码，并且权重插值可以帮助定制模型以适应新的时间段。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.13401v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.13401.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-20\u003C\u002Fspan> | **Lampr: Boosting the Effectiveness of Language-Generic Program Reduction via Large Language Models**\u003Cbr>\u003Csub>机构: University of Waterloo, The Hong Kong University of Science and Technology, Concordia University\u003Cbr>Lampr是第一个整合LLMs于程序缩减过程的算法。它通过多层次提示方法和LLMs的辅助，取得了跨语言通用性和特定语言语义意识之间的平衡，并且在实验中证明了其优越性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.13064v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.13064.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-20\u003C\u002Fspan> | **AgentCoder: Multi-Agent-based Code Generation with Iterative Testing and Optimisation**\u003Cbr>\u003Csub>机构: The University of Hong Kong, Shanghai Jiao Tong University, King’s College London\u003Cbr>本论文提出了一个新颖的基于多智能体的代码生成解决方案AgentCoder，通过特定的智能体聚焦于代码生成、测试设计和测试执行，有效地解决了代码生成与测试之间的平衡问题，并实现了优于现有SOTA方法的代码生成质量。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.13010v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1301.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-20\u003C\u002Fspan> | **Mini-GPTs: Efficient Large Language Models through Contextual Pruning**\u003Cbr>\u003Csub>机构: Massachusetts Institute of Technology\u003Cbr>这篇论文展示了通过上下文剪枝开发小型但高效的GPT模型，即Mini-GPTs的过程和结果。通过这种方法，研究人员在不同领域特定的数据集上成功减少了LLMs的尺寸并且保持了性能，展现了剪枝技术不仅理论上可行，而且在开发资源高效的领域特定LLMs中实践上具有实用价值。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.12682v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.12682.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-20\u003C\u002Fspan> | **Lookahead: An Inference Acceleration Framework for Large Language Model with Lossless Generation Accuracy**\u003Cbr>\u003Csub>机构: Ant Group\u003Cbr>本论文提出了名为Lookahead的推理加速框架，它通过使用基于Trie树的多分支推理策略，在提高LLMs推理速度的同时，保持了生成准确性。框架通过广泛的实验验证了其性能，并在支付宝的实际使用场景中得到了部署。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.12728v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.12728.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-20\u003C\u002Fspan> | **Generative Multimodal Models are In-Context Learners**\u003Cbr>\u003Csub>机构: Beijing Academy of Artificial Intelligence, Tsinghua University, Peking University\u003Cbr>本论文通过扩大模型规模，成功提升了多模态生成模型 Emu2 在上下文学习能力上的表现，并在一系列多模态理解任务中取得了突破性的效果，尤其在基于指令微调后的视觉问答和可控视觉生成方面。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.13286v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.13286.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-20\u003C\u002Fspan> | **AgentCoder: Multi-Agent-based Code Generation with Iterative Testing and Optimisation**\u003Cbr>\u003Csub>机构: The University of Hong Kong, Shanghai Jiao Tong University\u003Cbr>AgentCoder是一种新型的多代理框架，它在自动代码生成中通过进行迭代测试和优化，明显提高了代码生成的质量和准确性，尤其是在面对挑战性更大的增强型数据集时表现出其优势。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.13010v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1301.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-19\u003C\u002Fspan> | **A Revisit of Fake News Dataset with Augmented Fact-checking by ChatGPT**\u003Cbr>\u003Csub>本文提出了首个结合人类核实与ChatGPT辅助的假新闻检测公共基准数据集ChatGPT-FC，并通过定量分析对比了人类记者与LLM进行事实核查的差异。研究发现ChatGPT可以增强新闻事实核查过程的客观性和可靠性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11870v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1187.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-19\u003C\u002Fspan> | **Text-Conditioned Resampler For Long Form Video Understanding**\u003Cbr>\u003Csub>机构: University of Oxford, Google, Google DeepMind\u003Cbr>本论文提出了一个名为TCR的新型架构及预训练方法，能够处理与文本条件相结合的长视频。它有效地桥接了预训练的视觉编码器和LLM，实现了长期视频理解的问题，并在多个评估任务上取得了最佳性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11897v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.11897.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-19\u003C\u002Fspan> | **Active Preference Inference using Language Models and Probabilistic Reasoning**\u003Cbr>\u003Csub>机构: Cornell University, Cornell Tech\u003Cbr>本研究提出了一个实时算法，通过生成信息丰富的问题来加快LLMs对用户偏好的推断，并在网购场景中验证了其减少用户交互并提高任务性能的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.12009v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.12009.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-19\u003C\u002Fspan> | **Curated LLM: Synergy of LLMs and Data Curation for tabular augmentation in ultra low-data regimes**\u003Cbr>\u003Csub>机构: University of Cambridge\u003Cbr>本文介绍了CLLM，这是一种结合了大型语言模型的先验知识和强大的数据中心方法来进行数据增强的新方法，旨在为资料匮乏的领域和地区的机器学习提供了新的途径。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.12112v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.12112.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **From Google Gemini to OpenAI Q-Star: A Survey of Reshaping the Generative Artificial Intelligence (AI) Research Landscape**\u003Cbr>\u003Csub>机构: Cyberstronomy Pty Ltd, Academies Australasia Polytechnic, Massey University\u003Cbr>这项综述详尽地分析了生成型AI领域的发展及其对研究景观的重塑效应，尤其关注了MoE多模态学习和AGI的前景。研究涵盖了从AI模型结构和培训技术到应用领域和伦理考虑的全面分类。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10868v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10868.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **G-LLaVA: Solving Geometric Problem with Multi-Modal Large Language Model**\u003Cbr>\u003Csub>机构: Huawei Noah's Ark Lab, The University of Hong Kong, The Hong Kong University of Science and Technology\u003Cbr>这篇论文通过构建 Geo170K 数据集和开发基于它的 G-LLaVA 模型，克服了多模态大型语言模型在解决几何问题上的限制，并实现了比现有最先端模型更好的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11370v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1137.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **Generalized Category Discovery with Large Language Models in the Loop**\u003Cbr>\u003Csub>本论文提出了一个端到端的主动学习框架，该框架通过引入大型语言模型进入训练循环，有效地提升了模型在泛化类别发现任务上的性能，并能自动生成类别名称。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10897v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10897.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **Social Learning: Towards Collaborative Learning with Large Language Models**\u003Cbr>\u003Csub>机构: Google, EPFL\u003Cbr>本文提出了在LLMs中实现知识传递的新框架—社交学习，并提供了保护隐私的解决方案。该框架通过自然语言在模型间交换知识，同时避免敏感信息泄露，并通过实验验证了其有效性和隐私保护能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11441v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.11441.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **MAC-SQL: Multi-Agent Collaboration for Text-to-SQL**\u003Cbr>\u003Csub>机构: Beihang University, Tencent Cloud AI\u003Cbr>总体而言，MAC-SQL 框架通过联合智能代理，解决了 Text-to-SQL 任务中的一些关键挑战，如处理大型数据库、复杂查询以及SQL验证和修正问题。还发布了一个开源模型SQL-Llama，该模型展示了鼓励性的结果，并具备与收费模型如GPT-4相媲美的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11242v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.11242.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fwbbeyourself\u002FMAC-SQL)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **\"Paraphrasing The Original Text\" Makes High Accuracy Long-Context QA**\u003Cbr>\u003Csub>机构: Tsinghua University  \u003Cbr>论文主要通过理论证明和实验验证，提出了一种低成本且高效的方法，通过原文释义任务和有效的指令微调数据扩展现有语言模型处理长文本的能力，显著提高了长文本问答的准确性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11193v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.11193.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **Retrieval-Augmented Generation for Large Language Models: A Survey**\u003Cbr>\u003Csub>机构: Shanghai Research Institute for Intelligent Autonomous Systems, Tongji University, Fudan University\u003Cbr>这篇论文为RAG领域提供了一个全面和系统的技术概览，强调了提升LLMs检索和生成能力的重要性，指出了现有挑战，展望了未来的研究方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10997v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10997.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **NoMIRACL: Knowing When You Don't Know for Robust Multilingual Retrieval-Augmented Generation**\u003Cbr>\u003Csub>机构: University of Waterloo, Huawei Noah’s Ark Lab, FEEC-Unicamp Brazil\u003Cbr>这项工作通过引入NoMIRACL数据集，为评估LLM在检索式增强生成中的稳健性提供了一个多语言的评估工具，并通过建立GPT-4基线模型展示了LLM在识别相关与非相关检索结果中存在的挑战，突出了未来研究提高LLM稳健性的必要性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11361v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.11361.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **Agent-based Learning of Materials Datasets from Scientific Literature**\u003Cbr>\u003Csub>机构: University of Toronto  \u003Cbr>本论文展示了一个以大型语言模型为基础的智能代理在自动学习和提取科学文献中材料相关数据集方面的能力。Eunomia展示了在没有任何微调的情况下在提取实体和关系方面的有效性，且可以增强其在处理复杂任务时避免错误的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11690v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1169.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FAI4ChemS\u002FEunomia)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **Designing LLM Chains by Adapting Techniques from Crowdsourcing Workflows**\u003Cbr>\u003Csub>机构: University of Washington, Stanford University, Allen Institute for AI\u003Cbr>本文提出了一个设计空间概念框架以及通过转换众包工作流到LLM链的三个案例研究，为未来LLM链的设计和开发提供了实践指导和理论见解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11681v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.11681.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **Towards Better Serialization of Tabular Data for Few-shot Classification with Large Language Models**\u003Cbr>\u003Csub>机构: Carnegie Mellon University\u003Cbr>论文成功地展示了在表格数据分类中应用LLMs的创新实践，并以LaTeX序列化框架为特点，提出了有效处理领域特定数据集的新型序列化方法。研究还对LLMs在解读复杂数据关系方面的能力进行了深入的探索。论文的LaTeX序列化方法不仅提升了LLMs在分类任务中的表现，还显著提高了内存的使用效率和计算效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.12464v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.12464.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-17\u003C\u002Fspan> | **Distinguishing Translations by Human, NMT, and ChatGPT: A Linguistic and Statistical Approach**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University\u003Cbr>本研究为ChatGPT作为NMT之外的另一种翻译工具的可能性提供了初步答案，并展示了ChatGPT与NMT和HT相比的独特特性。这些新认识有助于未来更人性化、更符合语境的翻译系统的开发，并为如何有效使用AI生成的翻译提供洞见。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10750v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1075.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-17\u003C\u002Fspan> | **Mixed Distillation Helps Smaller Language Model Better Reasoning**\u003Cbr>\u003Csub>机构: Zhejiang University, Dalian Medical University\u003Cbr>Mixed Distillation框架通过整合LLMs中的PoT和CoT能力到更小的模型中，显著改善了它们的高级推理能力，特别是在数学推理任务上的表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10730v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1073.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-16\u003C\u002Fspan> | **RIGHT: Retrieval-augmented Generation for Mainstream Hashtag Recommendation**\u003Cbr>\u003Csub>机构: CAS Key Lab of Network Data Science and Technology ICT CAS, University of Chinese Academy of Sciences Beijing China\u003Cbr>本文提出了一种新的检索增强型生成主流标签推荐系统（RIGHT），通过结合检索器、选择器和生成器的优势，克服了现有方法在理解新信息和识别主流标签方面的限制，并在实验中取得显著成效。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10466v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10466.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-16\u003C\u002Fspan> | **A Survey on Robotic Manipulation of Deformable Objects: Recent Advances, Open Challenges and New Frontiers**\u003Cbr>\u003Csub>机构: Tongji University, National Natural Science Foundation of China, Shanghai Municipal Science and Technology Major Project\u003Cbr>本综述归纳了机器人操作可变形对象（DOM）领域的近期进展、存在的挑战和新前沿。特别强调了大型语言模型（LLMs）在机器人操纵中的初始进展，并指出这一领域值得进一步研究的重要方向。尽管综述了大量的文献并指出了未来研究方向，但实际的部署示例和定量评估是有限的。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10419v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10419.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-16\u003C\u002Fspan> | **ProTIP: Progressive Tool Retrieval Improves Planning**\u003Cbr>\u003Csub>机构: Apple  \u003Cbr>这篇论文提出了 ProTIP，为大型语言模型在复杂规划任务中的工具检索和使用提供了一种进步的策略。ProTIP 的核心在于渐进式检索、有效利用执行历史和实现子任务与工具功能的对齐。实验结果展示出 ProTIP 明显超过传统方法，降低了工具虚构，并提高了规划效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10332v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10332.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-16\u003C\u002Fspan> | **CoAScore: Chain-of-Aspects Prompting for NLG Evaluation**\u003Cbr>\u003Csub>机构: GSAI Renmin University of China\u003Cbr>CoAScore 是一个新颖的评估指标，它通过“方面链”的方法提升了对于 NLG 任务的评估精度，并且该效果获得了实验的证实。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10355v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10355.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-16\u003C\u002Fspan> | **RecPrompt: A Prompt Tuning Framework for News Recommendation Using Large Language Models**\u003Cbr>\u003Csub>机构: Science Foundation Ireland (SFI), JSPS KAKENHI\u003Cbr>这篇论文提出了RecPrompt模型，利用LLM对新闻推荐进行优化。通过手动和LLM自动生成的提示模板的迭代优化过程，显著提高了新闻推荐性能，尤其是在使用GPT-4进行自动生成的提示模板下。然而，这种方法并非总是能超越传统的推荐方法，且推荐效果受到LLM选择的显著影响。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10463v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10463.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **ProCoT: Stimulating Critical Thinking and Writing of Students through Engagement with Large Language Models (LLMs)**\u003Cbr>\u003Csub>机构: Luleå University of Technology Sweden\u003Cbr>本文通过引入ProCoT方法，展示了如何利用LLM促进学生批判性思维与写作，同时防止作弊。这种方法有助于教育者更好地利用这些技术工具，并培养学生成为更好的批判性思维者。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09801v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09801.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **Challenges with unsupervised LLM knowledge discovery**\u003Cbr>\u003Csub>机构: Google DeepMind, Google Research\u003Cbr>本文通过理论证明和实验验证，挑战了现有无监督方法在探索LLMs中隐性知识的能力，并提出了未来评估知识启发方法时应考虑的理智检查。总体上，作者认为未来的无监督方法很可能会遇到类似的问题，即难以准确区分模型知识和其他特征。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10029v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10029.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **Faithful Persona-based Conversational Dataset Generation with Large Language Models**\u003Cbr>\u003Csub>机构: University of Southern California, Google, Information Sciences Institute\u003Cbr>本论文提出了一种基于LLMs的框架，用于生成、扩展和更新大型的个性化对话数据集，并且通过Generator-Critic架构和信实性标准来提高对话的质量，有效地建立了Synthetic-Persona-Chat数据集。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10007v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10007.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **ReST meets ReAct: Self-Improvement for Multi-Step Reasoning LLM Agent**\u003Cbr>\u003Csub>机构: Google\u003Cbr>本论文通过定义一个能够进行推理和外部知识互动的LLM代理，并采用自我改进算法，实现了在合成问答基准测试中小型模型与大型模型相媲美的表现。提出的方法不仅提高了模型的推理能力，也大大减小了模型所需的参数数量。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10003v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10003.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **The Art of Balancing: Revolutionizing Mixture of Experts for Maintaining World Knowledge in Language Model Alignment**\u003Cbr>\u003Csub>机构: NLP Group Fudan University, Hikvision Inc  \u003Cbr>本论文提出了一个名为LoRAMoE的模型，用于解决大规模微调数据导致的语言模型中的世界知识遗忘问题，并在多任务学习中表现出潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09979v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09979.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **Generative Context-aware Fine-tuning of Self-supervised Speech Models**\u003Cbr>\u003Csub>机构: ASAPP, Carnegie Mellon University, Toyota Technological Institute at Chicago\u003Cbr>论文介绍了一种新的自监督语音模型微调方法，它使用大型语言模型生成的文本信息作为上下文，以提高任务执行的表现力，同时在不牺牲性能的情况下减少对额外大型语言模型的依赖和减少推理时的资源消耗。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09895v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09895.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **WEAK-TO-STRONG GENERALIZATION: ELICITING STRONG CAPABILITIES WITH WEAK SUPERVISION**\u003Cbr>\u003Csub>机构: OpenAI\u003Cbr>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](https:\u002F\u002Fcdn.openai.com\u002Fpapers\u002Fweak-to-strong-generalization.pdf)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fopenai\u002Fweak-to-strong)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Blog](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FBlog-Posts-yellow?logo=rss)](https:\u002F\u002Fmp.weixin.qq.com\u002Fs\u002Ff6YW-CxnLhnfMWTLg4M4Cw)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **No-Skim: Towards Efficiency Robustness Evaluation on Skimming-based Language Models**\u003Cbr>\u003Csub>机构: Fudan University\u003Cbr>本论文首次系统地研究了从效率角度出发，基于\"错过\"的语言模型的脆弱性，并提出了一个有效和通用的效率鲁棒性评估框架No-Skim，以生成增加计算复杂度的对抗性输入。同时，该框架还通过不同的插件模块进行了模块化设计，这些模块在不同的实际情景下工作，评估可以在三种不同的知识水平下进行。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09494v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09494.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **GSVA: Generalized Segmentation via Multimodal Large Language Models**\u003Cbr>\u003Csub>机构: Tsinghua University\u003Cbr>论文提出的GSVA方法通过学习预测多个[SEG]标记和创新性地生成[REJ]标记以解决GRES任务中存在的多目标和空目标挑战，相较于现有技术，展现了显著优势。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10103v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10103.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **KGLens: A Parameterized Knowledge Graph Solution to Assess What an LLM Does and Doesn't Know**\u003Cbr>\u003Csub>机构: Apple\u003Cbr>本文提出了一种新的名为KGLens的框架，用于评估LLM中的事实知识。KGLens利用KG结构生成自然语言问题并进行评估，OD辅以参数化的KG和图指导的QG策略以提高自然问题的生成质量和评估过程的效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11539v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.11539.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Zebra: Extending Context Window with Layerwise Grouped Local-Global Attention**\u003Cbr>\u003Csub>机构: Tencent AI Lab Seattle\u003Cbr>本文提出的Zebra模型通过使用分组的局部-全局注意力层，有效地降低了计算和内存需求，并在长短序列处理上展示了卓越的性能。研究团队通过一系列实验验证了模型的效果，证明了Zebra架构的优势。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08618v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08618.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Towards Verifiable Text Generation with Evolving Memory and Self-Reflection**\u003Cbr>\u003Csub>机构: Peking University, Chinese Academy of Sciences, Baidu Inc\u003Cbr>VTG通过演化的长短期记忆和自我反思的方法来提升LLMs生成文本时的可靠性和验证性，对复杂的注意力转移问题和文档检索的挑战有着有效的应对策略，并且通过实验获得了验证。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09075v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09075.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **The Earth is Flat because...: Investigating LLMs' Belief towards Misinformation via Persuasive Conversation**\u003Cbr>\u003Csub>机构: Tsinghua University, Stanford University, Nanyang Technological University\u003Cbr>本论文为首次全面研究LLMs面对事实错误信息在劝说性对话设置中的鲁棒性，并揭示了LLMs对劝说性错误信息的易感性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09085v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09085.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Auto MC-Reward: Automated Dense Reward Design with Large Language Models for Minecraft**\u003Cbr>\u003Csub>机构: CUHK-SenseTime Joint Laboratory, Shanghai AI Laboratory, Tsinghua University\u003Cbr>Auto MC-Reward是一种先进的学习系统，利用LLMs以自动方式设计针对Minecraft任务的密集型奖励，通过LLMs的理解和经验总结能力，有效地提高了代理在复杂环境中学习新行为和完成长期任务的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09238v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09238.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Entity-Augmented Code Generation**\u003Cbr>\u003Csub>机构: JetBrains\u003Cbr>论文为解决利用外部实体进行代码生成的任务提出了一个新颖的架构。该架构能在不牺牲性能的前提下扩展，通过将实体检索器注入到解码器而非编码器中，模型可以一次性查看所有实体并直接使用它们。新架构不仅解决了现有模型的限制，还在多个实验场景中展示了其优越性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08976v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08976.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Math-Shepherd: A Label-Free Step-by-Step Verifier for LLMs in Mathematical Reasoning**\u003Cbr>\u003Csub>机构: Peking University, DeepSeek-AI, The University of Hong Kong\u003Cbr>MATH-SHEPHERD通过自动生成监督数据训练LLMs，来解决高成本人力标注的问题，并提高了LLMs在复杂数学问题上的准确性。这一成果为LLMs的进步和实际应用开辟了新的可能性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08935v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08935.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Modeling Complex Mathematical Reasoning via Large Language Model based MathAgent**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University\u003Cbr>论文建议通过MathAgent框架，即Planner-Reasoner-Executor-Reflector (PRER)，提升LLMs解决复杂数学问题的能力。通过将问题分解为多个阶段并模拟人类解题过程，MathAgent能显著提高对挑战性数学数据集的解决能力，尤其是在估算和综合能力要求较高的领域。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08926v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08926.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Boosting LLM Reasoning: Push the Limits of Few-shot Learning with Reinforced In-Context Pruning**\u003Cbr>\u003Csub>机构: Hong Kong University of Science and Technology, Microsoft Research\u003Cbr>这篇论文提出了CoT-Max，一个通过粗到细的剪枝技术来增强LLMs数学推理能力的方法，有效地提高了少样本学习在数学推理任务中的效果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08901v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08901.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Forbidden Facts: An Investigation of Competing Objectives in Llama-2**\u003Cbr>\u003Csub>机构: MIT\u003Cbr>这篇论文通过研究模型在禁止事实任务下的行为，解析了Llama-2-chat模型如何处理相互竞争的目标，并对它的分析提出了新的手法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08793v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08793.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **TAP4LLM: Table Provider on Sampling, Augmenting, and Packing Semi-structured Data for Large Language Model Reasoning**\u003Cbr>\u003Csub>机构: National University of Singapore, University of Illinois Urbana-Champaign, Microsoft  \u003Cbr>本文中提出的TAP4LLM框架通过采样、增强和打包半结构化数据，显著提升了大型语言模型在表格推理任务中的性能，并且可以作为插件提供给不同组件，用于增强LLMs对于结构化数据的理解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09039v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09039.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Self-Evaluation Improves Selective Generation in Large Language Models**\u003Cbr>\u003Csub>机构: Google DeepMind, Google Research\u003Cbr>论文提出了一种新的方法，通过指导LLM进行自我评估，以提高其在选择性生成场景中输出内容质量的校准。实验证明，该方法可以提高LLM生成内容的准确性和整体质量。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09300v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.093.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **StemGen: A music generation model that listens**\u003Cbr>\u003Csub>机构: SAMI, ByteDance Inc.\u003Cbr>该论文提出了一个新的非自回归的语言模型方法用于音乐生成，优化了多声道的处理和音乐与上下文信息的一致性，并通过客观和主观评估证明了模型生成的音乐质量和与上下文信息的契合程度。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08723v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08723.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **CogAgent: A Visual Language Model for GUI Agents**\u003Cbr>\u003Csub>机构: Tsinghua University, Zhipu AI\u003Cbr>CogAgent 打破了纯文本输入方式的局限性，通过结合高低分辨率的影像编码器和视觉语言模型，高效地解决了在图形用户界面（GUI）中理解和导航的挑战，同时在九个视觉问答基准测试中取得国际领先水平，推动了VLM在AI代理研究和应用方面的未来发展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08914v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08914.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FTHUDM\u002FCogVLM)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **TinyGSM: achieving >80% on GSM8k with small language models**\u003Cbr>\u003Csub>机构: Carnegie Mellon University, Microsoft Research  \u003Cbr>这篇论文通过创建一个合成的数学问题数据集TinyGSM及其对应的Python解决方案，成功使小型语言模型在GSM8K数学问题推理基准测试上的准确率超过了80%，展示了通过高质量数据集和验证器策略显著提高了小型模型性能的可行性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09241v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09241.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Weight subcloning: direct initialization of transformers using larger pretrained ones**\u003Cbr>\u003Csub>机构: Apple\u003Cbr>本论文提出了一种有效的权重子克隆（weight subcloning）技术，用以从较大的预训练模型初始化较小的变换器模型，显著提高了训练速度，并使得全新的模型即使在低计算资源条件下也能得到高效训练。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09299v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09299.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-13\u003C\u002Fspan> | **E&V: Prompting Large Language Models to Perform Static Analysis by Pseudo-code Execution and Verification**\u003Cbr>\u003Csub>机构: UC Riverside, Microsoft Research\u003Cbr>本论文通过提出E&V方法，展示了LLMs在执行伪代码静态分析和自我验证中的潜力。该方法不仅提高了静态分析的灵活性和精准度，还减少了编写静态分析工具需要的人力和专业知识。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08477v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08477.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-13\u003C\u002Fspan> | **LDM$^2$: A Large Decision Model Imitating Human Cognition with Dynamic Memory Enhancement**\u003Cbr>\u003Csub>机构: University of Chinese Academy of Sciences\u003Cbr>该论文提出了LDM2模型，它使用动态内存机制和树探索策略来增强LLMs的决策能力，使其能够适应更复杂和未知的环境，并实现动态学习能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08402v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08402.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-13\u003C\u002Fspan> | **SwitchHead: Accelerating Transformers with Mixture-of-Experts Attention**\u003Cbr>\u003Csub>机构: The Swiss AI Lab IDSIA USI & SUPSI, AI Initiative KAUST, Center for Brain Science Harvard University\u003Cbr>SwitchHead是一种新颖的方法，它通过优化多头自注意力结构中的资源使用，实现了资源消耗的降低同时保持了模型性能。该方法具有实际应用潜力，尤其对于资源有限的研究人员和机构而言。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.07987v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.07987.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-13\u003C\u002Fspan> | **Efficient Toxic Content Detection by Bootstrapping and Distilling Large Language Models**\u003Cbr>\u003Csub>机构: University of Southern California, Amazon.com Inc.\u003Cbr>文章针对现有的网络有害内容自动探测面临的问题，提出了一个称为BD-LLM的新方法，它通过一个新的方法DToT来提升LLMs在有害内容检测任务中的效能和转移性，并将优化模型压缩以便更有效地部署。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08303v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08303.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-13\u003C\u002Fspan> | **Knowledge-Aware Artifact Image Synthesis with LLM-Enhanced Prompting and Multi-Source Supervision**\u003Cbr>\u003Csub>机构: Peking University\u003Cbr>本文提出了一个结合LLMs增强提示和多源监督的知识感知古代文物图像合成方法，解决了现有文本到图像合成方法在考古领域应用时缺乏领域知识的问题，并在质量和历史知识对齐方面取得了显著进步。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08056v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08056.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fdanielwusg\u002Fartifact_diffusion)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-12\u003C\u002Fspan> | **Alignment for Honesty**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University, Shanghai Artificial Intelligence Laboratory, Fudan University\u003Cbr>论文提出了与人类的诚实性对齐的概念，并在此基础上提出了挑战和解决方法。通过正式定义问题、提出新方法和建立评估框架，论文为大型语言模型中的诚实性对齐提供了全面的解决方案。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.07000v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.07.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FGAIR-NLP\u002Falignment-for-honesty)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-12\u003C\u002Fspan> | **Efficient Few-Shot Clinical Task Adaptation with Large Language Models**\u003Cbr>\u003Csub>本文提出了一个在少样本的医学图像分类中通过冷冻一部分网络层进行高效的微调方法，并且引入了大型语言模型来上下文化标签，以提供有效的语义指导。方法在挑战赛中取得了优异的成绩，表明在处理少样本场景下自然图像模型到医学图像任务的适配问题时具有很高的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.07125v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.07125.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-12\u003C\u002Fspan> | **VILA: On Pre-training for Visual Language Models**\u003Cbr>\u003Csub>机构: NVIDIA, MIT  \u003Cbr>VILA利用改进的预训练策略，在多种视觉语言任务中显示出卓越的性能，为未来视觉语言模型的设计提供了实用指南。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.07533v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.07533.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-12\u003C\u002Fspan> | **Comparable Demonstrations are Important in In-Context Learning: A Novel Perspective on Demonstration Selection**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University\u003Cbr>本文从示例间关系的角度研究ICL，提出通过最小化编辑文本以构造Comparable Demonstrations（CDs）来减轻潜在的示例偏倚，实验证明了其在OOD情形下的性能增益，表明了CDs在简化任务中尤其必要，并展示了其相对于示例数的稳健性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.07476v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.07476.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-12\u003C\u002Fspan> | **LLMEval: A Preliminary Study on How to Evaluate Large Language Models**\u003Cbr>\u003Csub>机构: Fudan University, Shanghai Jiaotong University  \u003Cbr>论文针对如何评估大型语言模型（LLMs），对多种评估标准、不同类型的评估者、评分方法和排名系统进行了比较和分析，提出了新的评估数据集LLMEval，对20个LLMs进行了评估，生成了大量的手动和自动评估结果。该研究为未来的LLM评估提供了有益的洞见和结论。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.07398v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.07398.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-12\u003C\u002Fspan> | **diff History for Long-Context Language Agents**\u003Cbr>\u003Csub>机构: New York University\u003Cbr>论文提出并验证了使用diff历史来提高对长交互历史的模型处理能力。这一方法显著提升了模型在复杂决策任务中的表现，并能有效扩大模型可处理的历史长度，为长时间序列决策代理的设计提供了新思路。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.07540v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.0754.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-12\u003C\u002Fspan> | **Tell, don't show: Declarative facts influence how LLMs generalize**\u003Cbr>\u003Csub>机构: Apollo Research, University of Oxford\u003Cbr>本文研究了培训数据中声明性陈述与统计模式或“程序”示例相冲突时模型的泛化情况。所得结果对于AI风险（关于“背叛转折”）和公平性有重要影响。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.07779v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.07779.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-12\u003C\u002Fspan> | **LLM in a flash: Efficient Large Language Model Inference with Limited Memory**\u003Cbr>\u003Csub>机构: Apple\u003Cbr>这份研究提供了一个创新且实用的解决方案，不仅能有效降低在内存受限设备上运行大型语言模型时的数据负载，还能显著提升推理速度，在实际应用中具有重要意义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11514v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.11514.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-11\u003C\u002Fspan> | **Honeybee: Locality-enhanced Projector for Multimodal LLM**\u003Cbr>\u003Csub>机构: Kakao Brain\u003Cbr>论文提出了一种新型的局部性增强投影器设计，解决了现有方法在处理视觉特征局部性上的不足，并有效利用了多面向指令数据集，最终使得Honeybee模型在多个MLLM基准测试中取得了显著的性能提升。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.06742v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.06742.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fkakaobrain\u002Fhoneybee)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-11\u003C\u002Fspan> | **Dense X Retrieval: What Retrieval Granularity Should We Use?**\u003Cbr>\u003Csub>机构: University of Washington, Tencent AI Lab\u003Cbr>本文提出命题作为一种新型稠密检索单元，其在减少所检索文本中无关信息的同时，提高了下游问答任务的性能和跨任务泛化能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.06648v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.06648.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-11\u003C\u002Fspan> | **Federated Full-Parameter Tuning of Billion-Sized Language Models with Communication Cost under 18 Kilobytes**\u003Cbr>\u003Csub>机构: Zhejiang University, Alibaba Group\u003Cbr>论文提出了一种新颖的联邦全参数微调方法——FedKSeed，通过ZOO与有限组种子结合，显著降低了数十亿大小LLMs全参数微调所需的通信开销，同时实现了较高的模型精确度和计算效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.06353v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.06353.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-11\u003C\u002Fspan> | **Unlocking Anticipatory Text Generation: A Constrained Approach for Faithful Decoding with Large Language Models**\u003Cbr>\u003Csub>机构: Salesforce AI Research\u003Cbr>本文提出了一种通过考虑未来约束满足来改善大型语言模型解码方法的新途径。提出的正式方法和评分机制通过与LLMs的基准测试，可以显著提高文本生成的质量和控制。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.06149v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.06149.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-11\u003C\u002Fspan> | **\"What's important here?\": Opportunities and Challenges of Using LLMs in Retrieving Information from Web Interfaces**\u003Cbr>\u003Csub>机构: Carnegie Mellon University\u003Cbr>本文研究了LLMs在从Web界面检索信息中的应用潜力和面临的挑战。通过一系列实验，揭示了模型性能的关键因素及其限制，并为未来工作指明了方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.06147v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.06147.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-11\u003C\u002Fspan> | **MMICT: Boosting Multi-Modal Fine-Tuning with In-Context Examples**\u003Cbr>\u003Csub>机构: Xiamen University, Tencent YouTu Lab\u003Cbr>这项工作通过提出MMICT，展示了在大型多模态语言模型上运用上下文学习能力以增强微调性能的新范式。通过设计M-Hub这一多功能模块并通过各种上下文示范实验，研究揭示了上下文学习在改善多模态任务性能中的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.06363v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.06363.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-11\u003C\u002Fspan> | **Oracle-based Protocol Testing with Eywa**\u003Cbr>\u003Csub>机构: Microsoft Research\u003Cbr>本文介绍了基于神谕的测试方法，充分利用LLMs建立了丰富的协议行为模型，并通过符号执行和传统测试生成方法相结合，提升了网络协议测试用例的自动生成和覆盖面。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.06875v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.06875.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-11\u003C\u002Fspan> | **On Meta-Prompting**\u003Cbr>\u003Csub>机构: Microsoft  \u003Cbr>这篇论文提出了一个基于范畴论的理论框架来概括和描绘自动化提示方法，通过在构想力和创造力这两个领域的实验，展示了meta-prompting比传统固定提示方法更能生成用户偏好的输出。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.06562v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.06562.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-11\u003C\u002Fspan> | **Extracting Self-Consistent Causal Insights from Users Feedback with LLMs and In-context Learning**\u003Cbr>\u003Csub>机构: Microsoft, Microsoft Research\u003Cbr>该研究提出了一种新框架，使用LLMs和ICL从用户反馈中提取自洽的因果见解，以支持微软Feedback Hub的分析。该框架采用创新的自洽性和提示集合技术以抑制LLMs的幻觉和错误推理，并提出了两种启发式方法来评估反馈的信息丰富度。实验显示，该方法能有效地提取因果见解和新的bug，并有助于微软工程师优先处理信息量丰富的反馈。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.06820v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.0682.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-10\u003C\u002Fspan> | **Fine-Tuning or Retrieval? Comparing Knowledge Injection in LLMs**\u003Cbr>\u003Csub>机构: Microsoft Israel\u003Cbr>这项研究的核心贡献在于它对比了细化训练和RAG两种方法对于LLMs知识注入能力的影响，并发现RAG在注入新的和已有的知识方面表现更佳。研究使用了创新的数据集和评估方法，确保了理论发现的实用性和可行性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.05934v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.05934.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-09\u003C\u002Fspan> | **Context Tuning for Retrieval Augmented Generation**\u003Cbr>\u003Csub>机构: Apple  \u003Cbr>本论文通过引入上下文调优这一新颖组件，提高了基于检索的增强计划（RAG-based planning）的效果，使其能处理不完整或不明确的查询，同时还降低了幻觉性错误的产生。研究对比了不同的检索方法在轻量模型和LLMs中的应用，并展示了新方法在提高上下文理解上的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.05708v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.05708.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-09\u003C\u002Fspan> | **Can Large Language Models Serve as Rational Players in Game Theory? A Systematic Analysis**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University\u003Cbr>本研究系统地探索了LLMs在游戏理论背景下的能力边界，并从三个角度出发，提供了将LLMs在社会科学研究中使用的进一步指导。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.05488v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.05488.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-09\u003C\u002Fspan> | **NLLG Quarterly arXiv Report 09\u002F23: What are the most influential current AI Papers?**\u003Cbr>\u003Csub>机构: University of Mannheim, University of Bielefeld\u003Cbr>该论文通过分析在特定时间内arXiv上引用最多的论文，提供了AI研究领域的最新趋势和影响力分析，特别强调了大型语言模型在其中的重要性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.05688v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.05688.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-09\u003C\u002Fspan> | **Sim-GPT: Text Similarity via GPT Annotated Data**\u003Cbr>\u003Csub>机构: Shannon.AI, Zhejiang University, Bytedance\u003Cbr>Sim-GPT是一个利用GPT-4生成数据标签来训练STS模型的框架。它在生成数据时仅产生一次性成本，速度较快，模型在多个STS基准上性能优越。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.05603v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.05603.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FShuheWang1998\u002FSim-GPT)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-09\u003C\u002Fspan> | **Agile-Quant: Activation-Guided Quantization for Faster Inference of LLMs on the Edge**\u003Cbr>\u003Csub>机构: Northeastern University, Oracle\u003Cbr>本文提出了一个名为Agile-Quant的激活引导量化框架，以加速大型语言模型的边缘设备推理。Agile-Quant克服了激活值异常的挑战和边缘设备上的硬件实施问题，并实现了与仅权重量化方法相当的任务性能，同时在实际设备上获得了显著的推理速度提升。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.05693v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.05693.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-08\u003C\u002Fspan> | **PaperQA: Retrieval-Augmented Generative Agent for Scientific Research**\u003Cbr>\u003Csub>机构: RAND Corporation, Carnegie Mellon University, LangChain\u003Cbr>该论文提出了PaperQA，一个基于检索的生成型代理，用于科学研究。PaperQA可以准确回答基于最新科学文献的问题，并且与人类专家的回答相当，甚至在某些方面表现更好。论文展示了PaperQA的有效性，并通过与人类专家和其他商业工具的对比，证明了其优越性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.07559v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.07559.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-08\u003C\u002Fspan> | **Using Program Knowledge Graph to Uncover Software Vulnerabilities**\u003Cbr>\u003Csub>论文通过结合程序图和安全数据，提出了程序知识图谱，并利用大型语言模型的提示调整来自动生成检测软件代码中漏洞的查询。该方法旨在克服传统漏洞检测方法的局限性，提高漏洞检测的自动化程度和有效性，尤其是在静态分析中的应用。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.04818v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.04818.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-07\u003C\u002Fspan> | **Beyond Surface: Probing LLaMA Across Scales and Layers**\u003Cbr>\u003Csub>机构: Hong Kong University of Science and Technology\u003Cbr>本研究的核心贡献在于提出了一系列评估大型语言模型高阶能力的探针任务，这些任务围绕着计算能力、数学推理、逻辑推理和真实性检测。研究揭示了LLM的表现如何随着模型规模和层次结构的变化。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.04333v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.04333.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-07\u003C\u002Fspan> | **Fortify the Shortest Stave in Attention: Enhancing Context Awareness of Large Language Models for Effective Tool Use**\u003Cbr>\u003Csub>机构: Gaoling School of Artificial Intelligence, Renmin University of China, Alibaba Group\u003Cbr>该论文针对LLMs在工具使用时对上下文认知的不足提出了Attention Buckets方法，通过处理不同的RoPE角度基础来强化对上下文的关注，显著提升了LLMs在工具使用任务的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.04455v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.04455.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-07\u003C\u002Fspan> | **Generating Illustrated Instructions**\u003Cbr>\u003Csub>机构: GenAI Meta, Columbia University\u003Cbr>本论文介绍了一种名为StackedDiffusion的新方法，用于生成插图说明，这是一种将文本和图像结合起来描述如何实现某一目标的任务。该方法通过结合大型语言模型和文本到图像扩散模型，并引入一些新颖的建模技巧，解决了现有T2I模型无法直接从用户查询中生成视觉效果的问题，并在人类评估中超越了现有技术水平。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.04552v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.04552.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-07\u003C\u002Fspan> | **CLadder: A Benchmark to Assess Causal Reasoning Capabilities of Language Models**\u003Cbr>\u003Csub>机构: MPI for Intelligent Systems, University of Washington\u003Cbr>此研究为测试和分析大型语言模型（LLMs）在正规因果推理上的能力提出了CLADDER数据集和CAUSALCOT思维路径提示策略，通过实验突显了LLMs的局限并为未来研究提出了方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.04350v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.0435.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FcausalNLP\u002Fcladder)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-07\u003C\u002Fspan> | **A Study on the Calibration of In-context Learning**\u003Cbr>\u003Csub>机构: Harvard University\u003Cbr>该论文深入研究了上下文内学习(ICL)在语言模型(LMs)中的校准准确性问题，并提出了评估和分析方法。它揭示了校准误差与模型大小和微调过程中的变化关系，以及校准在推理任务生成中的降低。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.04021v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.04021.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-07\u003C\u002Fspan> | **Cost-Effective In-Context Learning for Entity Resolution: A Design Space Exploration**\u003Cbr>\u003Csub>机构: Renmin University of China, Beijing Institute of Technology, HKUST (GZ)\u003Cbr>这篇论文提供了一个全面的研究，旨在探索如何开发一种成本效益的批量提示方法来进行实体解析。主要贡献是介绍 BATCHER 框架并提出基于覆盖的演示选择策略。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03987v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03987.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-07\u003C\u002Fspan> | **Chain of Code: Reasoning with a Language Model-Augmented Code Emulator**\u003Cbr>\u003Csub>机构: Google DeepMind, Stanford University, University of California Berkeley  \u003Cbr>Chain of Code (CoC)为语言模型增加了通过编写代码和模拟代码执行来改善推理能力的新维度。它在数字和语义推理任务中均实现了突破性的性能，对LLMs的应用范围进行了扩展，并有潜力应用于更广泛的问题。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.04474v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.04474.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-07\u003C\u002Fspan> | **An LLM Compiler for Parallel Function Calling**\u003Cbr>\u003Csub>机构: UC Berkeley, ICSI, LBNL\u003Cbr>论文提出了一个名为LLMCompiler的系统，解决了大型语言模型在执行多功能调用时的高延迟成本和效率低下的问题，通过并行化函数调用和优化协调来提高速度，节省成本并提升准确率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.04511v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.04511.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-06\u003C\u002Fspan> | **OneLLM: One Framework to Align All Modalities with Language**\u003Cbr>\u003Csub>机构: MMLab The Chinese University of Hong Kong, Shanghai Artificial Intelligence Laboratory\u003Cbr>OneLLM通过其统一的多模态编码框架和渐进式对齐管道，在推理和利用方面展示了强大的多模态理解和处理能力，并成功地处理了扩展多模态LLMs的挑战。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03700v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.037.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fcsuhan\u002FOneLLM)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-06\u003C\u002Fspan> | **Generative agent-based modeling with actions grounded in physical, social, or digital space using Concordia**\u003Cbr>\u003Csub>机构: Google DeepMind, Google Research\u003Cbr>本论文提出了利用生成式大型语言模型增强基于代理的模型的方法，通过Concordia库实现了在社会、物理和数字空间中模拟代理的交互。该模型旨在提供逼真的社会模拟，并探索模型的有效性验证。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03664v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03664.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-06\u003C\u002Fspan> | **Holmes: Towards Distributed Training Across Clusters with Heterogeneous NIC Environment**\u003Cbr>\u003Csub>机构: Zhejiang Lab\u003Cbr>文章成功介绍了一个能在网络接口卡异构环境中进行大型语言模型训练的框架——Holmes。通过实证研究其性能，Holmes被证明可在异构环境中实现与同构RDMA NICs相当的性能水平，从而使LLM训练更加普及并扩大了有效扩展的可能性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03549v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03549.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-06\u003C\u002Fspan> | **AnimateZero: Video Diffusion Models are Zero-Shot Image Animators**\u003Cbr>\u003Csub>机构: Peking University, Tencent AI Lab, HKUST\u003Cbr>AnimateZero为T2V生成提供解耦和精确的外观和动作控制，通过空间外观控制和时间一致性控制，实现了从T2I到I2V的步骤式视频生成，同时维护良好的域一致性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03793v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03793.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-06\u003C\u002Fspan> | **Efficient Large Language Models: A Survey**\u003Cbr>\u003Csub>机构: The Ohio State University, Google Research, Amazon AWS AI\u003Cbr>论文综述了大型语言模型中对于稀疏激活方法的最新进展，特别是混合专家系统（MoE）及其在长文本处理方面的应用。它总结了MoE模型优化的各种方法，包括算法级别的改进和系统级别的加速框架。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03863v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03863.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FAIoT-MLSys-Lab\u002FEfficientLLMs)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-06\u003C\u002Fspan> | **Controllable Human-Object Interaction Synthesis**\u003Cbr>\u003Csub>机构: Stanford University, FAIR Meta\u003Cbr>本文提出了一种新的交互合成方法CHOIS，它能在受语言描述指导的条件下，生成符合三维场景几何约束的人与物体的同步运动。该方法通过集成到一个系统中，展示了其在合成连续、逼真和环境感知的人物互动方面的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03913v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03913.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **Rank-without-GPT: Building GPT-Independent Listwise Rerankers on Open-Source Large Language Models**\u003Cbr>\u003Csub>机构: University of Waterloo, 2Cohere, Comcast Applied AI\u003Cbr>本文的核心成果是演示了如何构建一种不依赖GPT模型的有效列表重排序器，能显著超越现有基于GPT的重排序器，并呼吁研究社区开发更高质量的列表排序训练数据，以提升模型的表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02969v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.02969.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **A Comparative Study of AI-Generated (GPT-4) and Human-crafted MCQs in Programming Education**\u003Cbr>\u003Csub>机构: Carnegie Mellon University  \u003Cbr>本文的主要贡献是开发了一个基于GPT-4的自动化MCQ生成系统，通过专门的弹性构架和精确的LO对齐机制，成功生成与高等教育Python课程LO一致的MCQs。研究结果表明，自动生成的MCQ在大多数情况下与LO保持良好的一致性，质量接近人工设计的MCQ，但在拥有单一正确答案和高质量干扰项方面略显欠缺，未来工作应该集中在减轻这些问题上。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03173v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03173.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **Beyond Isolation: Multi-Agent Synergy for Improving Knowledge Graph Construction**\u003Cbr>\u003Csub>机构: Zhejiang Lab, Ant Group\u003Cbr>通过在KGC中引入多智能体合作的方法，cooperKGC框架提升了智能体解决实体、关系和事件提取任务中的精确度，并有望为AI的协作意识化未来奠定了基础。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03022v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03022.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **Let's Think Outside the Box: Exploring Leap-of-Thought in Large Language Models with Creative Humor Generation**\u003Cbr>\u003Csub>机构: Sea AI Lab, Sun Yat-sen University, Harvard University  \u003Cbr>本论文提出了一种旨在提升大型语言模型创造性思维能力的Creative Leap-of-Thought (CLoT)范式，并验证了其在多种任务中的有效性和概括能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02439v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.02439.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fsail-sg\u002FCLoT)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **RankZephyr: Effective and Robust Zero-Shot Listwise Reranking is a Breeze!**\u003Cbr>\u003Csub>机构: University of Waterloo\u003Cbr>RankZephyr是一款新型开源LLM，特别优化了零样本列表重新排序任务。它提供了与大型专有模型相当或更优的重新排序效果，同时强调了数据增强对于提升模型鲁棒性的重要性，并通过实验证明了其有效性和在现实场景中的应用潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02724v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.02724.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fcastorini\u002Frank_llm)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **Large Knowledge Model: Perspectives and Challenges**\u003Cbr>\u003Csub>机构: Zhejiang University\u003Cbr>本文提出了一种大型知识模型（LKM）的概念，旨在更有效地管理和解读知识表示的多样性。研究指出了从现有的大型语言模型到LKM转变的挑战，强调了结构化知识在预训练中的重要性，并提出了一套LKM的设计原则。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02706v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.02706.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **A Hardware Evaluation Framework for Large Language Model Inference**\u003Cbr>\u003Csub>机构: Princeton University\u003Cbr>LLMCompass 作为一种硬件评估框架，成功地应对了设计LLM推理硬件时面临的挑战。它不仅快速精准，而且具有架构描述性和成本意识，已经在商业硬件上进行了验证且显示出优异的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03134v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03134.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **Prompt Optimization via Adversarial In-Context Learning**\u003Cbr>\u003Csub>机构: National University of Singapore, Hong Kong University of Science and Technology, Institute for Infocomm Research (I2R) A*STAR\u003Cbr>论文介绍了一个新颖的Adversarial In-Context Learning（adv-ICL）方法，用于优化大型模型中prompt的选择，以此提高模型性能。它可以实现对抗训练目标，克服数据和计算资源限制，通过优化prompt而不是模型参数来提升性能，且实验结果在多个任务上显著优于现有技术。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02614v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.02614.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **Inherent limitations of LLMs regarding spatial information**\u003Cbr>\u003Csub>机构: ProtagoLabs, International Monetary Fund, NetMind.ai  \u003Cbr>论文为GPT-4等大型语言模型在处理空间信息方面的能力提供了新的评估框架和专门设计的数据集，并分析了GPT-4在处理空间信息方面的能力和局限性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03042v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03042.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **How should the advent of large language models affect the practice of science?**\u003Cbr>\u003Csub>机构: Max Planck Institute for Biological Cybernetics, University of Tübingen, University of Washington  \u003Cbr>本文讨论了LLMs对科学实践的影响，并建议对其使用持审慎态度，同时强调了保护科学的规范和认识论方面的重要性。虽然LLMs可能提升某些科研任务的效率，但作为工具，其使用应该谨慎并确保符合科学规范。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03759v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03759.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-04\u003C\u002Fspan> | **Exchange-of-Thought: Enhancing Large Language Model Capabilities through Cross-Model Communication**\u003Cbr>\u003Csub>机构: Fudan University, National University of Singapore, Shanghai AI Laboratory  \u003Cbr>本文提出的Exchange-of-Thought（EoT）框架通过模型间交流提升LLMs的推理能力，凭借四种通信范例和信心评估机制，在多个推理任务上取得了显著成效，并证明了外部思维在增强模型性能中的作用。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01823v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01823.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-04\u003C\u002Fspan> | **Competition-Level Problems are Effective LLM Evaluators**\u003Cbr>\u003Csub>机构: Microsoft Research Asia, Xiamen University, Microsoft Azure AI\u003Cbr>本研究通过评估大型语言模型在处理竞赛级编程问题上的表现，揭示了GPT-4等模型在真实推理能力上的不足，并提出了一些提升表现的方法。这些发现突显了这类问题作为评估LLMs的有效工具的重要性，并促进了对于提高LLMs复杂推理能力的进一步研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02143v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.02143.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-04\u003C\u002Fspan> | **The Unlocking Spell on Base LLMs: Rethinking Alignment via In-Context Learning**\u003Cbr>\u003Csub>机构: Allen Institute for Artificial Intelligence, University of Washington\u003Cbr>本论文提出了一个通过上下文学习实现LLMs对齐的简单无须调整方法（URIAL），表现出与传统调整对齐方法相匹配甚至更好的效果。这一发现对未来LLMs研究具有重要的启示，说明了在LLMs对齐上更深入的分析和理论理解的重要性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01552v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01552.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-04\u003C\u002Fspan> | **On the Effectiveness of Large Language Models in Domain-Specific Code Generation**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University, Chongqing University, East China Normal University\u003Cbr>这项研究表明，通过有效地整合领域知识到代码生成过程中，可以增强LLMs在特定领域内的代码生成能力。DomCoder作为一个新的代码生成方法，利用了不同策略以整合领域知识，并在特定设置下提升了代码生成的实际效果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01639v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01639.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-04\u003C\u002Fspan> | **ChatGPT as a Math Questioner? Evaluating ChatGPT on Generating Pre-university Math Questions**\u003Cbr>\u003Csub>机构: Nanyang Technological University, National University of Singapore\u003Cbr>该研究提出了第一个系统的评估ChatGPT在生成前大学数学问题潜力的研究。通过两种主要场景：给定上下文和未给定上下文的生成问题，并为教育工作者提供实用的洞察。研究的结果有可能促进现代AI技术在教育领域的应用，并提高自动化数学问题生成的实用性和效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01661v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01661.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-04\u003C\u002Fspan> | **Data Management For Large Language Models: A Survey**\u003Cbr>\u003Csub>机构: Peking University, Huawei Noah’s Ark Lab\u003Cbr>这篇综述研究了在LLMs的预训练和监督式微调阶段，数据管理的研究现状以及数据管理策略的设计。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01700v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.017.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FZigeW\u002Fdata_management_LLM)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-04\u003C\u002Fspan> | **Retrieval-augmented Multi-modal Chain-of-Thoughts Reasoning for Large Language Models**\u003Cbr>\u003Csub>机构: Xiamen University, MBZUAI, Tencent AI Lab\u003Cbr>文章通过引入动态自动检索机制和分层抽样方法，成功提升了多模态任务中LLMs的CoT推理能力。提出的方法不仅提高了模型性能，而且通过多样化示例选择进一步细化了推理过程，为多模态推理领域树立了新的性能标杆。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01714v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01714.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-04\u003C\u002Fspan> | **A Survey on Large Language Model (LLM) Security and Privacy: The Good, the Bad, and the Ugly**\u003Cbr>\u003Csub>机构: Elsevier\u003Cbr>这篇论文总结了大型语言模型（LLMs）在安全性和隐私保护中的应用及相关挑战，指出LLMs在这些领域的好处、坏处和丑陋之处，同时强调了其在数据保护方面的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02003v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.02003.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-04\u003C\u002Fspan> | **LLMs Accelerate Annotation for Medical Information Extraction**\u003Cbr>\u003Csub>机构: Google Research\u003Cbr>本论文展示了一个利用大型语言模型，特别是Google的PaLM 2，来提升医学信息抽取任务中注释速度的方法。这个基于LLM的注释流程提高了效率且不需要对模型进行复杂的调参，使其成为一个有潜力的工具来加速医疗领域的数据注释工作。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02296v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.02296.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-03\u003C\u002Fspan> | **Running cognitive evaluations on large language models: The do's and the don'ts**\u003Cbr>\u003Csub>机构: Massachusetts Institute of Technology\u003Cbr>这篇论文为大型语言模型的认知评估研究方法提供了指导性的建议，探讨了在方法论上如何避免在运行认知评估时可能出现的问题。论文的目标是贡献于AI心理学领域最佳实践的更广泛讨论。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01276v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01276.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-03\u003C\u002Fspan> | **TextGenSHAP: Scalable Post-hoc Explanations in Text Generation with Long Documents**\u003Cbr>\u003Csub>机构: University of Southern California, Google Cloud AI\u003Cbr>TextGenSHAP是一个为大型语言模型设计的高效后验解释性方法，通过改进解释生成的速度，并展示了如何利用这些解释改进长文档问答和文档检索系统。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01279v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01279.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-03\u003C\u002Fspan> | **D-Bot: Database Diagnosis System using Large Language Models**\u003Cbr>\u003Csub>机构: Tsinghua University, Pigsty, ModelBest\u003Cbr>D-Bot是一个基于大型语言模型的数据库诊断系统，它通过文档中的知识提取和生成有效的诊断报告来提高数据库诊断的效率和准确性，解决了区域专家在数据库诊断中遇到的挑战。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01454v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01454.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-02\u003C\u002Fspan> | **Large Language Models Are Zero-Shot Text Classifiers**\u003Cbr>\u003Csub>机构: Florida Atlantic University\u003Cbr>论文展示了LLMs可以有效作为零样本文本分类器的能力，这对于需要快速部署文本分类器的小团队或小企业来说特别有益。研究结果表明，在所有四个数据集中，GPT-4一致超过了传统ML算法。文章还建议未来的研究方向包括优化提示以获得更高的精度或引入评论代理以评估和提升LLM的结果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01044v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01044.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-02\u003C\u002Fspan> | **Exploring and Improving the Spatial Reasoning Abilities of Large Language Models**\u003Cbr>\u003Csub>机构: Stanford University  \u003Cbr>论文提高了对LLMs在空间推理和序列标注方面能力的理解，提出了一种改进LLMs处理3D轨迹识别任务的方法，具有显著的性能提升。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01054v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01054.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-02\u003C\u002Fspan> | **Just-in-Time Security Patch Detection -- LLM At the Rescue for Data Augmentation**\u003Cbr>\u003Csub>机构: University of Luxembourg, Windows Copilot Microsoft, Singapore Management University\u003Cbr>论文提出了一种新颖的安全补丁检测框架 LLMDA，使用大型语言模型进行补丁分析和数据增强，并对多模态输入进行对齐。这使系统能够从补丁和代码的联合上下文中提取更丰富的信息，提升检测准确性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01241v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01241.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-02\u003C\u002Fspan> | **Axiomatic Preference Modeling for Longform Question Answering**\u003Cbr>\u003Csub>本文提出的基于公理的框架为长篇问答偏好模型提供了一种新方法，通过细致审视人类偏好，并优化了偏好打分的准确性与效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02206v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.02206.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **On Exploring the Reasoning Capability of Large Language Models with Knowledge Graphs**\u003Cbr>\u003Csub>机构: Singapore Management University, National Sun Yat-sen University\u003Cbr>研究结果显示，LLMs能够通过其内部知识图成功处理知识图推理任务，并能从上下文中推断出知识图关系，展示了LLMs在知识图推理中的潜力及应用价值。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00353v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.00353.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **Learning from One Continuous Video Stream**\u003Cbr>\u003Csub>该论文介绍了一个框架，用于从单一连续视频流中进行在线学习，这一框架侧重于适应性与泛化的评估，并提出了一系列未来预测任务进行预训练。研究显示，在这种学习环境下，优化策略需要调整，通过减少动量和调整权重更新频率可以改善模型的适应性和泛化能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00598v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.00598.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **Leveraging Large Language Models to Improve REST API Testing**\u003Cbr>\u003Csub>机构: Georgia Institute of Technology, IBM Research\u003Cbr>RESTGPT通过利用LLMs，特别是GPT-3.5 Turbo的高效准确性和少量示例学习的精准性，解决了现有方法在提取自然语言描述中规则和生成有效值时的限制，显著提升了REST API测试的质量和准确度。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00894v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.00894.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **The Cost of Compression: Investigating the Impact of Compression on Parametric Knowledge in Language Models**\u003Cbr>\u003Csub>机构: University of Wisconsin - Madison\u003Cbr>这项研究首次大规模考察了LLMs的压缩技术对模型参数知识的影响，并为实际应用提供了重要见解，特别是在关于修剪和量化技术相关的决策方面。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00960v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.0096.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **The Cost of Compression: Investigating the Impact of Compression on Parametric Knowledge in Language Models**\u003Cbr>\u003Csub>机构: University of Wisconsin - Madison\u003Cbr>本论文通过对大型语言模型（LLMs）进行压缩技术（剪枝和量化）的全面研究，揭示了这些技术对模型参数知识保留的影响，为实践者提供了关于模型压缩的有价值见解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00960v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.0096.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **Improve Supervised Representation Learning with Masked Image Modeling**\u003Cbr>\u003Csub>机构: Google Research, OpenAI  \u003Cbr>这篇论文提出了一种融合监督表示学习和MIM的新训练设置，该设置在不增加显著的训练或推理开销的前提下，显著提高了下游任务如分类、图像检索和语义分割的表示学习质量。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00950v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.0095.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **Nash Learning from Human Feedback**\u003Cbr>\u003Csub>机构: Google DeepMind\u003Cbr>这篇文章提出了一种全新的调节大型语言模型以通过纳什均衡与人类偏好对齐的方法，展示了其在复杂任务中的潜能，并通过实验证明了其效果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00886v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.00886.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **RLHF-V: Towards Trustworthy MLLMs via Behavior Alignment from Fine-grained Correctional Human Feedback**\u003Cbr>\u003Csub>RLHF-V是一个通过细粒度校正型人类反馈校正MLLM行为的新框架，通过收集高质量的人类偏好数据为MLLMs提供人类对齐的学习信号，并通过全面的实验验证了该框架的有效性。该研究可能在提高大型多模态语言模型在各种任务中的可靠性和实用性方面取得重要进展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00849v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.00849.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FRLHF-V\u002FRLHF-V)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **Beyond ChatBots: ExploreLLM for Structured Thoughts and Personalized Model Responses**\u003Cbr>\u003Csub>机构: Google\u003Cbr>本文介绍了探索LLM系统ExploreLLM，它通过结合基于提示的任务分解方法和全新的类似图式的图形用户界面（UI），在用户和LLM助手之间提供了一种全新的交互模式。该系统通过在结构化和交互式界面中表示生成子任务，旨在减轻用户完成复杂任务时的认知负担，同时提高个性化响应的水平。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00763v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.00763.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **Deciphering Digital Detectives: Understanding LLM Behaviors and Capabilities in Multi-Agent Mystery Games**\u003Cbr>\u003Csub>机构: Quebec AI Institute\u003Cbr>这篇论文贡献了适应JuBensha游戏复杂性和新挑战的评估方法，并创建了一个能够评估交互式环境中LLM智能体能力的新框架ThinkThrice，推动了AI在多玩家角色扮演游戏中的应用。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00746v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.00746.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **Instruction-tuning Aligns LLMs to the Human Brain**\u003Cbr>\u003Csub>机构: EPFL\u003Cbr>本研究表明，通过指令调整训练的大型语言模型在世界知识表示方面以及与人脑活动的对齐程度上表现更佳。这为未来LLMs的发展提供了将世界知识集成到模型中的重要视角。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00575v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.00575.md)  |\n\n---\n\n### 11月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-30\u003C\u002Fspan> | **TaskBench: Benchmarking Large Language Models for Task Automation**\u003Cbr>\u003Csub>机构: Zhejiang University\u003Cbr>该文献提出了TaskBench基准测试和TASKEVAL评估系统，通过数据生成和量化评估系统，有效地解决了在任务自动化领域对LLMs的评估问题。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18760v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.1876.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-30\u003C\u002Fspan> | **Unnatural Error Correction: GPT-4 Can Almost Perfectly Handle Unnatural Scrambled Text**\u003Cbr>\u003Csub>机构: The University of Tokyo\u003Cbr>研究展示了GPT-4处理混淆文本的强大能力，设置了两项新指标RR和RPG，并通过它们验证了GPT-4在不同混淆场景和比率下的稳定表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18805v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.18805.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-30\u003C\u002Fspan> | **IAG: Induction-Augmented Generation Framework for Answering Reasoning Questions**\u003Cbr>\u003Csub>机构: Huawei Poisson Lab\u003Cbr>IAG框架通过归纳提示法加强知识陈述的真实性，并且优化了知识融合机制和学生归纳模型，以解决现有基于检索的方法在隐性推理问答任务上的不足。研究成果表明，IAG在回答涉及隐性推理的问答任务上表现更优。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18397v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.18397.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-30\u003C\u002Fspan> | **Autonomous Agents in Software Development: A Vision Paper**\u003Cbr>\u003Csub>机构: Tampere University\u003Cbr>本论文提出了一个关于利用多个 GPT 代理来自动执行软件工程任务的愿景，并演示了在简单软件任务上所取得的初步成功。这项工作有可能彻底改变软件开发的方式，并缩短开发时间。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18440v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.1844.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-30\u003C\u002Fspan> | **Applying Large Language Models and Chain-of-Thought for Automatic Scoring**\u003Cbr>\u003Csub>机构: University of Georgia\u003Cbr>本文展示了LLMs在促进自动评分方面的潜力，并强调CoT在配合项茎和评分标准使用时能显著增强评分的准确度。通过结合LLMs和CoT的方法，可以降低自动评分模型构建的复杂性和人力成本，并可能提供更接近人类评分结果的评分。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03748v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2312.03748.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-30\u003C\u002Fspan> | **MicroCinema: A Divide-and-Conquer Approach for Text-to-Video Generation**\u003Cbr>\u003Csub>机构: University of Science and Technology of China, Microsoft Research Asia\u003Cbr>MicroCinema以其创新的文本到视频生成两阶段流程和有效的Appearance Injection Network及Appearance Noise Prior机制，在视频生成质量上实现了新的突破，为后续工作提供了可借鉴的范例。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18829v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.18829.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-30\u003C\u002Fspan> | **CoDi-2: In-Context, Interleaved, and Interactive Any-to-Any Generation**\u003Cbr>\u003Csub>机构: UC Berkeley, Microsoft Azure AI, ZOOM\u003Cbr>CoDi-2是一种具有前沿能力的多模态生成模型，可以处理复杂的多模态输入、在上下文中指导生成、通过多轮交互与用户互动，并实现了优秀的零样本和少样本性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18775v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.18775.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-30\u003C\u002Fspan> | **PoseGPT: Chatting about 3D Human Pose**\u003Cbr>\u003Csub>机构: Max Planck Institute for Intelligent Systems, Meshcapade\u003Cbr>PoseGPT是一个新型框架，它通过在LLM中嵌入SMPL姿态标记，使模型可以直接从文本和视觉输入生成三维人体姿态，并在解释三维人体姿态方面实现了一定程度的创新。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18836v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.18836.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-30\u003C\u002Fspan> | **What Do Llamas Really Think? Revealing Preference Biases in Language Model Representations**\u003Cbr>\u003Csub>机构: Comcast Applied AI, University of Waterloo\u003Cbr>作者们提出了一个新型探针来检测LLMs表示中的内隐关联偏见，并通过实验在偏好检测中达到了最新水平。研究还发现了多个指令遵循型和“传统”的LLMs中的显著偏见，这些偏见存在于国籍、政治、宗教和性别等方面，尽管LLMs已经经过明确的安全指导调整。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18812v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.18812.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fcastorini\u002Fbiasprobe)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-29\u003C\u002Fspan> | **TimeBench: A Comprehensive Evaluation of Temporal Reasoning Abilities in Large Language Models**\u003Cbr>\u003Csub>机构: Harbin Institute of Technology\u003Cbr>TIMEBENCH基准的提出是对大型语言模型时间推理能力综合评估的重要步骤，它展示了当前模型与人类在这方面的差距，并为未来的研究提供了指引。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.17667v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.17667.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fzchuz\u002FTimeBench)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-29\u003C\u002Fspan> | **Large Language Models for Networking: Applications, Enabling Techniques, and Challenges**\u003Cbr>\u003Csub>机构: BUPT\u003Cbr>该论文提出了一个整合大型语言模型与网络技术的新框架ChatNet，并探究了它在网络规划中的应用。研究表明，ChatNet可以有效提升网络任务的自动化和智能化水平，尽管在部署前仍需解决多模态数据整合和插件开发等挑战。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.17474v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.17474.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-29\u003C\u002Fspan> | **Are Large Language Models Good Fact Checkers: A Preliminary Study**\u003Cbr>\u003Csub>机构: Chinese Academy of Sciences\u003Cbr>这篇文章通过系统评估LLMs在整个事实核查流程中的潜力，发现尽管LLMs在某些方面表现出潜力，但依然需要更多研究和尝试来提升它们在事实核查任务上的表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.17355v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.17355.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-29\u003C\u002Fspan> | **Zero-shot Conversational Summarization Evaluations with small Large Language Models**\u003Cbr>\u003Csub>机构: Intel labs\u003Cbr>文章以大型语言模型在会话摘要任务中的应用作为焦点，深入探讨了不同指令对模型执行效果的影响，并研究了在有限硬件下使用压缩模型的优化方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18041v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.18041.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-29\u003C\u002Fspan> | **Understanding and Improving In-Context Learning on Vision-language Models**\u003Cbr>\u003Csub>机构: LMU Munich, University of Oxford\u003Cbr>本文提出了一个用于视觉-语言模型在背景学习中选择示范的新方法MMICES，并通过一系列实验展示了其在不同模型和数据集上的良好性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18021v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.18021.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-29\u003C\u002Fspan> | **Towards Top-Down Reasoning: An Explainable Multi-Agent Approach for Visual Question Answering**\u003Cbr>\u003Csub>机构: Sun Yat-Sen University\u003Cbr>这项工作通过创新性地结合三个代理来模拟人类认知中的自顶向下推理过程，并引入了多视角知识库的概念，显著提升了VQA模型的表现力和解释能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.17331v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.17331.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-29\u003C\u002Fspan> | **How to Build an AI Tutor that Can Adapt to Any Course and Provide Accurate Answers Using Large Language Model and Retrieval-Augmented Generation**\u003Cbr>\u003Csub>机构: The Education University of Hong Kong\u003Cbr>这篇论文代表了一次开创性的尝试，构建了一个可以适应任何学科并提供高质量的定制化教育支持的AI导师系统。这不仅能促进AI教育技术的应用，而且为AI教学系统的发展开辟了新路径。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.17696v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.17696.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-29\u003C\u002Fspan> | **TaskWeaver: A Code-First Agent Framework**\u003Cbr>\u003Csub>机构: Microsoft\u003Cbr>TaskWeaver是为构建基于LLM的自治代理而设计的代码优先框架，实现了对复杂数据的高效处理以及插件的灵活使用，并将特定域知识成功整合入系统中。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.17541v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.17541.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fmicrosoft\u002FTaskWeaver)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **Can Generalist Foundation Models Outcompete Special-Purpose Tuning? Case Study in Medicine**\u003Cbr>\u003Csub>机构: Microsoft\u003Cbr>本文通过系统的提示工程方法探讨了在无需专家监督的情况下，如何指导通用的基础模型在专业任务上发挥专家级别的能力，具体以医学领域为案例研究。所提出的Medprompt策略证明了其在增强基础模型专业能力方面的显著优势，并展示了广泛适用于多个学科的可能性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.16452v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.16452.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **Beyond Hallucinations: Enhancing LVLMs through Hallucination-Aware Direct Preference Optimization**\u003Cbr>\u003Csub>机构: Shanghai AI Laboratory\u003Cbr>文章提出了一个新颖的策略来优化LVLMs并减少幻觉现象，同时介绍了一种新的评估方法来更全面地衡量幻觉现象，并通过实验验证了所提方法的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.16839v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.16839.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **Graph Prompt Learning: A Comprehensive Survey and Beyond**\u003Cbr>\u003Csub>机构: The Chinese University of Hong Kong, Hong Kong University of Science and Technology, Fudan University  \u003Cbr>论文是关于图提示学习的综合性调研，涵盖了AGI在图数据处理方面面临的挑战以及如何通过图提示学习来实现AGI技术的跨模态、跨域和跨任务适用性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.16534v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.16534.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FWxxShirley\u002FAwesome-Graph-Prompt)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **ChatGPT's One-year Anniversary: Are Open-Source Large Language Models Catching up?**\u003Cbr>\u003Csub>机构: Nanyang Technological University\u003Cbr>这篇综述文章提供了对开源LLMs在多任务领域相较ChatGPT的性能评估的考察，突出了目前开源LLMs的强项和潜在问题，并为未来的研究和开发提供了启示。此外，文章还总结了众多的最佳实践和挑战，显示出开源领域在一定程度上有望缩小与商业模型之间的差距。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.16989v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.16989.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **Animate Anyone: Consistent and Controllable Image-to-Video Synthesis for Character Animation**\u003Cbr>\u003Csub>机构: Alibaba Group\u003Cbr>本文提出了一个利用扩散模型进行角色动画的新框架“Animate Anyone”。该框架通过ReferenceNet保持外观一致性，并通过姿态引导器与时间层确保动画的可控性与连续性，取得了先进的角色动画生成结果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.17117v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.17117.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FHumanAIGC\u002FAnimateAnyone)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Blog](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FBlog-Posts-yellow?logo=rss)](https:\u002F\u002Fhumanaigc.github.io\u002Fanimate-anyone\u002F)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **LLaFS: When Large-Language Models Meet Few-Shot Segmentation**\u003Cbr>\u003Csub>机构: Singapore University of Technology and Design, Zhejiang University \u003Cbr>本文提出了一个基于大型语言模型（LLM）的小样本图像分割框架，并解决了让LLMs理解和执行视觉任务的核心挑战。通过定制指导和细粒度上下文指导相结合的方法，实现了高质量的小样本分割。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.16926v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.16926.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Flanyunzhu99\u002FLLaFS)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **Prompting in Autoregressive Large Language Models**\u003Cbr>\u003Csub>机构: George Mason University\u003Cbr>本论文为自回归大型语言模型的提示技术领域提供了一个紧凑的文献综述，并指出了一些尚未解决的挑战和开放性问题，为未来研究提供了方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03740v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2312.0374.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **Training Chain-of-Thought via Latent-Variable Inference**\u003Cbr>\u003Csub>机构: Google\u003Cbr>本论文开发了一种基于MCMC-EM的微调策略，通过平均理由帮助LLMs生成正确的答案，具有潜在的推广应用的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02179v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2312.02179.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **RELIC: Investigating Large Language Model Responses using Self-Consistency**\u003Cbr>\u003Csub>机构: ETH Zurich\u003Cbr>RELIC是一个交互式系统，它通过多样本的事实一致性检验，帮助用户验证和指导LLMs生成的文本。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.16842v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.16842.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **RankingGPT: Empowering Large Language Models in Text Ranking with Progressive Enhancement**\u003Cbr>\u003Csub>机构: Alibaba Group\u003Cbr>本研究提出了一种用于文本排序的二阶段训练模型，结合了弱监督预训练和监督细化训练，通过在不损害预训练益处的基础上增强模型细化训练性能，完成了从预训练到细化训练的平滑过渡，并在实验中显著优于现有技术。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.16720v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.1672.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **AvatarGPT: All-in-One Framework for Motion Understanding, Planning, Generation and Beyond**\u003Cbr>\u003Csub>研究提出了一个创新的，一体化的框架AvatarGPT，用于处理理解、规划以及生成人类动作相关的高级和低级任务，展现出长时间运动合成的能力和减少手动干预的可能性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.16468v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.16468.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-27\u003C\u002Fspan> | **RoboGPT: an intelligent agent of making embodied long-term decisions for daily instruction tasks**\u003Cbr>\u003Csub>机构: Chinese Academy of Sciences, Peking University\u003Cbr>文章提出了一个名为RoboGPT的智能体，该智能体用于制定执行日常指令任务的长期决策。该智能体通过一项新的机器人数据集，结合了LLMs的通用知识和机器人领域的专业知识，并引入了Re-Plan模块和RoboSkill模块以增强任务规划的逻辑性和适应性。在ALFRED基准测试和泛化任务上，RoboGPT优于现有的先进方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.15649v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.15649.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-25\u003C\u002Fspan> | **Faster Minimum Bayes Risk Decoding with Confidence-based Pruning**\u003Cbr>\u003Csub>机构: University of Cambridge\u003Cbr>论文提出了一个用于MBR解码的算法，该算法通过在样本估计中逐渐增加样本数量并使用置信度剪枝来减少用户函数调用。在保持准确度的同时，该算法显著降低了计算成本，并通过三种语言对的NMT实验得到了验证。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.14919v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.14919.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-24\u003C\u002Fspan> | **Calibrated Language Models Must Hallucinate**\u003Cbr>\u003Csub>机构: Microsoft Research\u003Cbr>该文章展示了预训练语言模型在充分校准的条件下，必然产生幻觉的统计根源，并介绍了预测性能良好的模型固有的幻觉产生机制。同时，文章还提供了幻觉产生率的下界估算，并探讨了不同类型事实产生幻觉的可能性，指出了未来减轻特定类型幻觉的可能方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.14648v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.14648.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-24\u003C\u002Fspan> | **Data-Efficient Alignment of Large Language Models with Human Feedback Through Natural Language**\u003Cbr>\u003Csub>机构: Amazon\u003Cbr>文章提出了一个有效的CnR方法，它能够通过使用自然语言的精细反馈和响应修正，高效地校准LLMs以符合人类预期。通过相对较少的人类反馈数据，此方法可以显著改善即使是顶尖LLMs的响应质量，如ChatGPT。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.14543v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.14543.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-23\u003C\u002Fspan> | **Controlling Large Language Model-based Agents for Large-Scale Decision-Making: An Actor-Critic Approach**\u003Cbr>\u003Csub>机构: Chinese Academy of Sciences\u003Cbr>LLaMAC框架展示了基于LLM的多智能体系统在长期规划、数学推理、优化问题和空间推理方面的卓越表现，并且减少了大规模多智能体协作的访问成本。随着LLM的进一步提升和更多协作框架的出现，多智能体协作领域将迎来新的发展机遇。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13884v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13884.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-23\u003C\u002Fspan> | **ZipLoRA: Any Subject in Any Style by Effectively Merging LoRAs**\u003Cbr>\u003Csub>机构: Google Research\u003Cbr>文章提出了一种名为ZipLoRA的新策略，旨在通过一个优化过程有效地合并独立训练的主题和风格LoRAs，从而能够生成任何用户提供的主题风格的组合。ZipLoRA对生成任何特定主题和风格的图像这一开放性研究问题提供了创新的解决方案，且由于其无需手动超参数调整，使用起来更加简便高效。实验证明该方法在保持主题和风格真实性的同时，相比于现有方法和其他基本方法而言，具有更好的生成质量和鲁棒性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13600v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.136.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-23\u003C\u002Fspan> | **Diffusion Model Alignment Using Direct Preference Optimization**\u003Cbr>\u003Csub>机构: Nikhil Naik, Stanford University\u003Cbr>本文提出了一个名为Diffusion-DPO的方法，其通过直接优化基于人类比较数据的模型来实现对扩散模型与人类偏好的对齐。此外，文章也探索了基于AI反馈的训练，取得了与基于人类偏好训练相媲美的成绩。这明显提升了模型在视觉吸引力和文本对齐方面的性能，为利用AI反馈扩展扩散模型对齐方法提供了新的途径。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12908v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12908.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-23\u003C\u002Fspan> | **LucidDreamer: Domain-free Generation of 3D Gaussian Splatting Scenes**\u003Cbr>\u003Csub>机构: ASRI\u003Cbr>LucidDreamer是一个能够用于生成逼真而且分辨率更高的3D场景的模型。它优于现有的场景生成模型，因为它不依赖特定的训练数据集，并能够适应多种输入样式。LucidDreamer通过约束点云的移动和使用插值算法，克服了形状扭曲和点云与图像错位的问题，从而在操纵3D空间中的点云时保持了场景的真实感和一致性。在实验中明显展示了其优越性和高泛化能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13384v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13384.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-23\u003C\u002Fspan> | **FusionFrames: Efficient Architectural Aspects for Text-to-Video Generation Pipeline**\u003Cbr>\u003Csub>机构: Sber AI\u003Cbr>总体而言，该论文提出了一个新型两阶段潜在扩散的文本到视频生成架构，解决了关键帧合成和插值帧生成中存在的问题，通过使用独立的时域块和有效的插值架构，减少了计算成本，并在多个质量指标上取得了优于现有技术的表现。此外，论文还针对视频解码器设计了不同的架构选项，进一步优化了视频的一致性和整体质量。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13073v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13073.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-23\u003C\u002Fspan> | **GAIA: a benchmark for General AI Assistants**\u003Cbr>\u003Csub>机构: FAIR, Meta\u003Cbr>GAIA 是一项针对通用人工智能助理的基准测试，其目的在于提出真实世界的挑战性问题，并避开传统 LLMs 评价中的许多陷阱。该基准测试强调任务对人类简单而对AI难度较大，以此来评估AI的执行复杂行动序列的准确能力，这些任务在设计上无法简单地通过暴力方法得以解决。GAIA 还考虑了如何扩展基准测试，并探讨了一些最先进的助理的成功与短板，展示了增强 LLMs 的潜力。最终，文章旨在设立一个开发者问题集，为人工智能研究提供一个可扩展的基准测试平台。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12983v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12983.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-23\u003C\u002Fspan> | **Probabilistic Tree-of-thought Reasoning for Answering Knowledge-intensive Complex Questions**\u003Cbr>\u003Csub>机构: Tsinghua University\u003Cbr>文章提出了一种新颖的概率树状推理（ProbTree）方法，通过探索LLM在回答知识密集型复杂问题时的能力，并将不确定性引入推理过程，在统一框架中整合了外部和参数知识。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13982v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13982.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-22\u003C\u002Fspan> | **Visual In-Context Prompting**\u003Cbr>\u003Csub>机构: HKUST, Microsoft Research\u003Cbr>本论文提出了DINOv，一个新的视觉上下文内提示框架，能够有效处理多样化的视觉提示，使用无标签数据，并在多个任务中达到很好的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13601v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13601.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FUX-Decoder\u002FDINOv)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-22\u003C\u002Fspan> | **AlignedCoT: Prompting Large Language Models via Native-Speaking Demonstrations**\u003Cbr>\u003Csub>机构: The Hong Kong University of Science and Technology (Guangzhou), The Hong Kong University of Science and Technology, University of California, Los Angeles\u003Cbr>本文提出的AlignedCoT技术，旨在通过对齐LLMs的CoT文本风格与其“本土风格”，来提高LLMs的推理能力，并通过实验证明了其有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13538v4)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13538.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-22\u003C\u002Fspan> | **Enhancing Summarization Performance through Transformer-Based Prompt Engineering in Automated Medical Reporting**\u003Cbr>\u003Csub>机构: Utrecht University\u003Cbr>这项研究验证了在自动化医疗报告中应用基于转换器的提示工程可以提高摘要性能。尽管存在一些局限性，但研究提出的方法证明了在提示制定时加入示例和上下文信息的效用，并且指出了未来工作的方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13274v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13274.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-22\u003C\u002Fspan> | **LIMIT: Less Is More for Instruction Tuning Across Evaluation Paradigms**\u003Cbr>\u003Csub>机构: Princeton University\u003Cbr>本论文的主要贡献包括：在开源模型上微调不同大小和风格的指令数据集，评估微调模型在不同的评估范式下的表现，并且发现较少的样本（特别是当这些样本结合了不同来源和风格时）足以在不同类型的评估中获得良好的性能。这表明在培养LLMs的指令遵从能力时，“少即是多”，且通过精心选择微调样本，可以使模型在执行指令能力上得到显著提升。这一发现对于如何有效地微调LLMs以及如何评估它们的实用性具有重要意义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13133v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13133.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-22\u003C\u002Fspan> | **XAGen: 3D Expressive Human Avatars Generation**\u003Cbr>\u003Csub>机构: National University of Singapore, ByteDance\u003Cbr>研究提出了XAGen模型，它是首个能够生成全面可控3D人类化身的GAN模型。XAGen在细粒度属性控制上具有独立的能力，并通过多尺度和多部分的3D表示与渲染技术提升了面部和手部的生成质量。实验结果证明XAGen在外观质量、控制能力和数据利用率方面都超过了现有最先进的方法，推进了3D虚拟化身生成技术的发展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13574v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13574.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-21\u003C\u002Fspan> | **AcademicGPT: Empowering Academic Research**\u003Cbr>\u003Csub>机构: International Digital Economy Academy\u003Cbr>AcademicGPT针对学术研究的特定需求进行了优化，通过结合针对性强的训练数据和多方面的应用开发，为学术领域提供了实质性的支持和工具。它标志着大型语言模型个性化与专业化发展的一个重要步骤，并有望对学术社区产生深远的影响。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12315v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12315.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-21\u003C\u002Fspan> | **Do Smaller Language Models Answer Contextualised Questions Through Memorisation Or Generalisation?**\u003Cbr>\u003Csub>机构: University of Auckland\u003Cbr>本论文提出了一种新方法以评价小型语言模型在问答任务中答案的生成是否为记忆或概括能力的结果。通过语义相似度分析，确定了不太可能被模型记住答案的评估样本，并用增加额外训练数据集的方式，针对特定评估子集进行了模型性能的优化。最终，研究结果显示增加了数据集的模型在特定评估数据集上有了显著提升，并推断这种改善与模型的泛化能力有关。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12337v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12337.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-21\u003C\u002Fspan> | **A Survey on Multimodal Large Language Models for Autonomous Driving**\u003Cbr>\u003Csub>机构: Purdue University\u003Cbr>该论文全面回顾了MLLMs在自动驾驶领域的应用，表明MLLMs具备解析非文本数据和融合多种模态（如视觉、语言）的能力，这些能力对于行为预测和动作规划尤为重要。通过在不同的自动驾驶环节中部署MLLMs（如理解交通场景、规划控制、模式生成），可以改善决策流程，并实现类似人类的驾驶直觉和决策模式，同时提高车辆导航和规划的效率和安全性。此外，模型通过为多个任务的预训练提供了一种新的可能性，这可能会推动把智能系统推向人工普遍智能（AGI）的发展路径。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12320v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.1232.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-21\u003C\u002Fspan> | **Oasis: Data Curation and Assessment System for Pretraining of Large Language Models**\u003Cbr>\u003Csub>机构: Chinese Academy of Sciences\u003Cbr>本文提出的Oasis系统是针对大型语言模型预训练的数据整理和评估问题的解决方案。Oasis通过其交互式的自定义数据整理模块、针对偏差的模型过滤器和全面的数据评估系统，旨在提高数据集的质量和多样性，同时降低内存需求和资源消耗。系统的实现立足于提升数据处理的灵活性和评估的准确性，填补了现有工作在全面性和多维度评估方面的空白。通过综合使用人类评估、启发式度量和最新的大型语言模型如GPT-4进行质量评估，Oasis展现了对预训练数据集进行全方位优化的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12537v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12537.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-21\u003C\u002Fspan> | **Mechanistically analyzing the effects of fine-tuning on procedurally defined tasks**\u003Cbr>\u003Csub>机构: University of Cambridge\u003Cbr>本文针对微调对预定义能力的影响开展了一项全面的分析和评估。通过Tracr编译式的能力设计和基于PCFG的学习式能力设计，文章详细探讨了微调过程中嵌入特征的相关性，提出了reFT来强化分析微调影响的深度。本研究的发现改进了对微调影响机理的理解，并为后续的模型设计和微调策略提供了实证支持。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12786v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12786.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-21\u003C\u002Fspan> | **How Capable Can a Transformer Become? A Study on Synthetic, Interpretable Tasks**\u003Cbr>\u003Csub>机构: University of Pennsylvania, MIT\u003Cbr>本文通过设计合成数据生成过程和系统性实验，以评估和理解自回归Transformer模型在组合其原始能力方面的潜力。研究结果突显了模型学习组合结构的能力，揭示了训练数据对此能力的影响以及模型内部注意力层在组合学习过程中的重要性。这或许为评估和提高现代神经网络对真实世界数据的理解和应用，特别是在其可能面临前所未见的任务时，提供了新的见解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12997v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12997.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-21\u003C\u002Fspan> | **Latent Lab: Large Language Models for Knowledge Exploration**\u003Cbr>\u003Csub>机构: Department of Electrical Engineering and Computer Science, MIT\u003Cbr>Latent Lab作为一种探索大型数据集中相互联系关系的创新和强大工具，通过利用LLMs和视觉引人注目的接口，它超越了常规搜索的局限性，提供了一个语义上有意义和情境感知的体验。强调探索的价值和迭代设计，在直观地访问大量相互连接的信息方面实现了信息技术专家的长期追求，并通过AI辅助探索将这一愿景变为现实，为未来人工智能共创系统的发展奠定了基础，并促进了更直观和高效的合作，有能力产生新颖和有影响力的创造物。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13051v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13051.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-21\u003C\u002Fspan> | **Prompting Frameworks for Large Language Models: A Survey**\u003Cbr>\u003Csub>机构: Zhejiang University\u003Cbr>这项研究提供了一个框架，它通过实现新的技术手段来增强与LLMs的交互，包括改善与编程语言的兼容性，使能LLMs使用外部工具，并维护历史交互信息，并以此指导未来的研究方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12785v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12785.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Flxx0628\u002FPrompting-Framework-Survey)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-21\u003C\u002Fspan> | **Advancing Transformer Architecture in Long-Context Large Language Models: A Comprehensive Survey**\u003Cbr>\u003Csub>机构: Nanjing University\u003Cbr>文章为了解决LLMs在应对长上下文时的挑战，提出了一系列方法和综合分类体系，提高了LLMs在注意力机制、记忆效率和最大长度处理上的性能。通过综合回顾和分类学界最近的进展，本文为未来的LLMs架构设计和优化提供了清晰的指导方向。。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12351v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12351.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FStrivin0311\u002Flong-llms-learning)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-20\u003C\u002Fspan> | **GPQA: A Graduate-Level Google-Proof Q&A Benchmark**\u003Cbr>\u003Csub>机构: New York University\u003Cbr>GPQA 数据集提供了一个用于测试 AI 系统在处理需深度理解和推理能力的复杂问题上的能力的基准。通过严格的问题质量控制和专家级别的难度，它可能促进人类专家与 AI 系统合作的方法发展，并推动 AI 系统设计的进步。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12022v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12022.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-20\u003C\u002Fspan> | **Igniting Language Intelligence: The Hitchhiker's Guide From Chain-of-Thought Reasoning to Language Agents**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University\u003Cbr>本文作为首篇系统性探讨CoT基步机制、范式转变，以及CoT与代理间复杂交互的工作，提供了一些关键见解。文章揭示了CoT在特定条件下显示出的有效性，指出了使CoT工作的多个条件，以及理论和实证研究为其成功提供了何种解释。文章还对CoT理论进行了深入分析，提出了CoT对于LLMs在多个领域的优化和革新可能具有重要的贡献，并指出尽管LLMs、CoT推理和语言代理快速发展，但仍存在未解决的挑战，如对未见领域的泛化、提高交互效率、代理定制化、代理扩展及代理安全性等【10†源】。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.11797v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.11797.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FZoeyyao27\u002FCoT-Igniting-Agent)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-20\u003C\u002Fspan> | **Continual Learning: Applications and the Road Forward**\u003Cbr>\u003Csub>机构: KU Leuven\u003Cbr>论文综述了当前的持续学习研究现状，指出了其在记忆限制条件下研究较多而忽视计算成本的问题，并提出了四个有前途的研究方向。这些方向包括：1) 真实世界数据处理的挑战，2) 计算成本的考虑，以及其他如何获取数据和理论理解方面的关注点。论文主张未来的CL算法应在减少对完全标记和封闭世界假设的依赖上做出实质性的进展，以使CL成为解决实际机器学习问题的一个有效工具。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.11908v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.11908.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-20\u003C\u002Fspan> | **Assessing Prompt Injection Risks in 200+ Custom GPTs**\u003Cbr>\u003Csub>机构: Northwestern University\u003Cbr>该论文着重研究了自定义GPT模型中的安全风险，尤其是提示注入攻击。研究者们提出了一个包含扫描、注入敌意提示和提取目标信息三个步骤的攻击方法，并通过实施评估发现自定义GPT模型存在严重的系统提示提取和文件泄露漏洞。这些发现突出了自定义GPT模型中的关键安全缺陷，并指出了提升这些模型安全性结构的必要性。此外，红队评估清楚地显示出，现有防护措施并不足够强大，甚至有时候明确指出不应该分享的信息也能被提取出来，这表明亟需进一步加强对抗提示注入攻击的防御机制。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.11538v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.11538.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-19\u003C\u002Fspan> | **TPTU-v2: Boosting Task Planning and Tool Usage of Large Language Model-based Agents in Real-world Systems**\u003Cbr>\u003Csub>机构: SenseTime Researc\u003Cbr>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.11315v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.11315.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-18\u003C\u002Fspan> | **An Embodied Generalist Agent in 3D World**\u003Cbr>\u003Csub>机构: Beijing Institute for General Artificial Intelligence \u003Cbr>LEO是一个新型的身体化、多模态、多任务的通用型智能体，专注于在3D世界中的感知、基础、推理、规划和行动。通过对3D视觉-语言对齐和视觉-语言-动作指令调优的训练，LEO能在3D世界中执行一系列任务。文章通过一系列严格实验和消融实验的结果，证实了LEO在一系列任务上的高效性能，并为未来身体化通用型智能体的发展提供了宝贵洞见。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12871v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12871.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-18\u003C\u002Fspan> | **Adapters: A Unified Library for Parameter-Efficient and Modular Transfer Learning**\u003Cbr>\u003Csub>机构: Technical University of Darmstadt, University of Cambridge\u003Cbr>论文提出了一个统一的库——Adapters，它整合并扩展了参数高效和模块化迁移学习方法，实现了与Transformers库的紧密整合，通过多个NLP任务的对比实验，展示了其有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.11077v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.11077.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-18\u003C\u002Fspan> | **Orca 2: Teaching Small Language Models How to Reason**\u003Cbr>\u003Csub>机构: Microsoft Research\u003Cbr>文章通过介绍一个新的小型语言模型Orca 2，并展示其在多种推理任务上能够与更大的模型相匹敌或超越它们的性能，对当前小型语言模型在复杂推理任务中表现不佳的问题提出了有效的解决方案。Orca 2的开发依赖于对训练数据和训练策略的精心设计，证明了即使是小型模型，也可以通过改进训练方法来增强其理解和推理能力。文章还提供了Orca 2在各种标准测试中的卓越性能结果，验证了其方法论在实际应用中的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.11045v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.11045.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-18\u003C\u002Fspan> | **RecExplainer: Aligning Large Language Models for Recommendation Model Interpretability**\u003Cbr>\u003Csub>机构: University of Science and Technology of China\u003Cbr>文章针对推荐模型解释性的研究提出了一种新型的方法，即通过大型语言模型进行对齐，以提高解释的质量和准确性。文章介绍了三种不同的对齐方法，并通过一系列任务训练LLM以模仿推荐模型的逻辑。论文采用了多种评估策略和评分体系，包括使用最新的GPT-4模型和人类评分来验证所提出方法的有效性，并在三个不同的数据集上进行了测试，显示出其在提高推荐模型解释性方面的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.10947v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.10947.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-17\u003C\u002Fspan> | **Camels in a Changing Climate: Enhancing LM Adaptation with Tulu 2**\u003Cbr>\u003Csub>机构: Allen Institute for AI \u003Cbr>TÜLU 2通过采用新的基础模型和调整策略，在多个性能指标上实现了突破，对进一步理解和改进预训练语言模型的适配具有重要意义。通过引入新的数据混合物和先进的训练方法（如DPO），TÜLU 2提高了模型在各种推理和知识探测任务上的性能，并在开放式生成指标上取得了显著的提升。此外，研究者们通过公开相关模型、数据和代码，推动了语言模型适配方法的开放研究和发展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.10702v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.10702.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-17\u003C\u002Fspan> | **Exploring the Relationship between In-Context Learning and Instruction Tuning**\u003Cbr>\u003Csub>机构: HKUST\u003Cbr>论文提供了ICL与IT之间密切相关的实证证据，即使ICL中不更改模型参数，二者所使用的指令和示例都驱动模型朝着收敛的隐藏状态前进。这一发现对于如何设计高效的数据集和任务以推进基础模型在下游应用的发展和对齐具有启示作用。研究结果还可以帮助理解示例在ICL和IT中的作用，以及如何利用这些见解来设计有效的示例任务和数据集，从而提升LLM的性能。论文中申明将会提供实验代码以供复现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.10367v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.10367.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-16\u003C\u002Fspan> | **MacGyver: Are Large Language Models Creative Problem Solvers?**\u003Cbr>\u003Csub>机构: University of California, Princeton University\u003Cbr>本研究通过创造MACGYVER数据集，探索了LLMs在解决非传统问题上的能力，并通过人类评估员对GPT-4的表现进行了评价。研究结果展示了LLMs在这类任务上的局限性，同时提出了提高其表现的新方法。研究强调了创造性问题解决能力在日常生活中的重要性，并尝试通过LLMs补充人类的创造性思维，以期提高解决问题的能力和效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.09682v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.09682.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-16\u003C\u002Fspan> | **Crafting In-context Examples according to LMs' Parametric Knowledge**\u003Cbr>\u003Csub>机构: The University of Texas at Austin\u003Cbr>本文的重点研究是如何根据LM的参数知识有效地创建上下文示例：选择最优的示例（已知与未知的比较）以及在上下文示例中如何排序答案。实验结果支持了半已知示例的有效性以及基于参数知识的答案排序方法，这些发现为提高大型语言模型在多答案生成任务中的性能提供了可行的技术途径。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.09579v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.09579.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-16\u003C\u002Fspan> | **Predictive Minds: LLMs As Atypical Active Inference Agents**\u003Cbr>\u003Csub>机构: Charles University\u003Cbr>本论文将活动推断的概念应用于大型语言模型（LLMs），从一个新的视角分析了LLMs的行为和学习机制。论文提出，尽管LLMs在物理上无法直接与环境互动，但它们通过生成文本在虚拟环境中的“行动”间接影响世界，并有可能将这些影响反馈到模型的训练中。研究指出，增强LLMs与用户交互的反馈循环，将有助于提升模型的自我意识，让其更好地适应和响应环境变化，这将带来重大的社会影响和潜在的风险。论文为理解和改进LLMs在实际部署时的行为提供了重要的理论基础，预测了这些系统未来可能的发展方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.10215v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.10215.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-16\u003C\u002Fspan> | **Automatic Engineering of Long Prompts**\u003Cbr>\u003Csub>机构: Google\u003Cbr>本文针对语言模型长指令工程中存在的问题，提出了一种新的算法框架，并解决了贪婪算法易陷入局部最优和遗传算法初期收敛慢的问题。通过对指令的每个句子进行语义保持重述，并利用波束搜索来维护和优化候选指令集合，使算法在有限训练数据上表现出良好的性能和较快的收敛速度。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.10117v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.10117.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-15\u003C\u002Fspan> | **Contrastive Chain-of-Thought Prompting**\u003Cbr>\u003Csub>机构: DAMO Academy, Alibaba Group\u003Cbr>本论文提出了对比式链式思维方法，以解决传统链式思维中存在的问题，即缺乏对错误避免的指导以及实现推理效果的不确定性。通过提供有效和无效的推理示例，新方法旨在引导模型减少推理错误并一步步推理，同时该方法提供了自动化构建对比示例的技术以便泛化到各种任务。实验结果证实，该方法能够作为一种通用增强手段，显著提升链式思维的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.09277v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.09277.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-15\u003C\u002Fspan> | **Chain-of-Note: Enhancing Robustness in Retrieval-Augmented Language Models**\u003Cbr>\u003Csub>机构: Tecent AI Lab\u003Cbr>论文提出的CHAIN-OF-NOTE（CON）框架旨在提高RALMs的鲁棒性，主要通过引入结构化的阅读笔记过程来批判性地评估检索到的文档。实验结果表明，该框架提高了模型在噪声数据和未知情况下的健壮性，改善了整体QA性能，并在检索文档失败还是成功时均提高了模型的性能。CON框架通过生成读取笔记和最终回答，提高了模型对噪声的鲁棒性，并在缺乏信息时能够给出“未知”的回答，增强了模型的适应性和可靠性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.09210v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.0921.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-15\u003C\u002Fspan> | **Exponentially Faster Language Modelling**\u003Cbr>\u003Csub>机构: ETH Zurich\u003Cbr>本文介绍了UltraFastBERT，这是一个大规模语言模型的变种，它显著减少了在推理时需要使用的神经元数量，并通过使用快速前馈网络来提高计算效率。尽管不具备原生的高效实现，但该模型提供了一个能够显著加速推理过程的CPU代码实现，并在标准下游任务中表现良好。这一工作展示了条件神经执行在语言建模领域巨大的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.10770v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.1077.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-15\u003C\u002Fspan> | **ToolTalk: Evaluating Tool-Usage in a Conversational Setting**\u003Cbr>\u003Csub>机构: Microsoft Corporation\u003Cbr>ToolTalk 是一个致力于评估和提高 LLM 在对话环境中使用多步骤外部工具性能的基准。它通过创新的评估方法和真实场景模拟，挑战和扩展了现有 LLMs 的能力边界，并为未来的研究指出了方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.10775v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.10775.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fmicrosoft\u002FToolTalk)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-15\u003C\u002Fspan> | **Memory Augmented Language Models through Mixture of Word Experts**\u003Cbr>\u003Csub>机构: Google Research\u003Cbr>本论文提出了一个称为MoWE的新型架构，它通过融合稀疏模型的效率和大型语言模型的性能，出色地处理了性能与计算成本之间的平衡。通过采取创新的设计原则，并且在NLP多种任务中验证了其超越传统模型如T5和MoE的性能，MoWE展示了在学术和实际应用领域的潜力，尤其是在处理知识密集型任务时。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.10768v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.10768.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-14\u003C\u002Fspan> | **Instruction-Following Evaluation for Large Language Models**\u003Cbr>\u003Csub>机构: Google, Yale University\u003Cbr>本文提出了一种评估大型语言模型的指令遵循能力的新方法——IFEval，它通过合成逻辑一致的指令和计算指令遵循准确性的新准则来解决评估过程中的挑战。此方法为自动化且无偏见，它通过多步骤过程避免指令间的潜在冲突，并引入了严格和宽松的准确性评价标准来减少误判，同时认为未来可以通过增加多样化和使用多模态指令来改进该方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.07911v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.07911.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fgoogle-research\u002Fgoogle-research\u002Ftree\u002Fmaster\u002Finstruction_following_eval)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-14\u003C\u002Fspan> | **Learning to Filter Context for Retrieval-Augmented Generation**\u003Cbr>\u003Csub>机构: Carnegie Mellon University\u003Cbr>本文提出的FILCO方法针对开放领域问答和事实验证等知识密集型任务，通过改善提供给生成模型的上下文质量来解决生成输出时面临的问题。通过结合词汇和信息论方法来识别有用上下文，并训练模型以在测试时过滤检索上下文，很好地解决了以前方法的局限性。实验结果显示，相比传统方法，FILCO在多个知识密集型任务上都取得了显著的性能改进，并且在上下文过滤训练上显示出其有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.08377v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.08377.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-14\u003C\u002Fspan> | **KTRL+F: Knowledge-Augmented In-Document Search**\u003Cbr>\u003Csub>机构: KAIST AI, Samsung Research\u003Cbr>文章提出了一个新的问题——KTRL+F，以解决文献搜索中的实时、准确性、引入外部知识的需求。通过分析现有基线，文章发现它们存在局限性，在此基础上提出了Knowledge-Augmented Phrase Retrieval模型。该模型有效地在短语检索中整合了外部知识，通过简单的扩展保持了快速响应，无需额外训练。通过用户研究，证明了该模型能够提升用户搜索体验，减少搜索时间和外部信息检索量。作者鼓励研究社区关注KTRL+F这一独特挑战，提高文献信息访问的效率和效果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.08329v3)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.08329.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-13\u003C\u002Fspan> | **Can LLMs Patch Security Issues?**\u003Cbr>\u003Csub>机构: School of Computer Science Atlanta\u003Cbr>本文介绍了一种新型的代码修正方法FDSS，通过与静态代码分析工具Bandit集成，能显著提高LLMs解决代码中安全问题的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00024v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2312.00024.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FKamel773\u002FLLM-code-refine)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-13\u003C\u002Fspan> | **In-context Learning Generalizes, But Not Always Robustly: The Case of Syntax**\u003Cbr>\u003Csub>机构: NYU, Microsoft\u003Cbr>本论文揭示了大型语言模型在理解和泛化句法结构时可能存在的局限性，这对于改进语言模型处理复杂语法任务的方式具有重要意义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.07811v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.07811.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-11\u003C\u002Fspan> | **In-context Vectors: Making In Context Learning More Effective and Controllable Through Latent Space Steering**\u003Cbr>\u003Csub>机构: Stanford University\u003Cbr>本论文提出的ICV方法为大型语言模型的上下文学习提供了一种新颖且更加有效的替代方案。通过将演示示例的关键信息集成到一个可以控制的向量中，ICV方法提高了任务指导的精确度和效果，并显著优于现有的方法。实验结果表明，ICV在多项任务中展现了较高的性能，包括在不同的LLMs上进行语言模型解毒、风格转换和角色扮演。ICV方法的计算开销低，并且易于控制，有助于提升语言模型在实际应用中的适用性和弹性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.06668v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.06668.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-10\u003C\u002Fspan> | **Making LLMs Worth Every Penny: Resource-Limited Text Classification in Banking**\u003Cbr>\u003Csub>机构: Helvia.ai\u003Cbr>论文首次将多种在资源受限环境下的方法进行了全面评估，包括成本分析、RAG方法和利用GPT-4的数据增强，为金融行业提供了新的方法用以应对数据和预算限制的挑战。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.06102v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.06102.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-05\u003C\u002Fspan> | **ChaTA: Towards an Intelligent Question-Answer Teaching Assistant using Open-Source LLMs**\u003Cbr>\u003Csub>机构: Cornell University, Microsoft Research\u003Cbr>本文提供了一个使用开源LLMs增强在线教育QA平台的新方案，并对其进行了广泛的评估和测试。通过将RAG、SFT和DPO等技术结合应用，确保了回答质量的显著提升和数据隐私的保护，对于开发智能QA助手具有重要的意义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.02775v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.02775.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-01\u003C\u002Fspan> | **LLMRec: Large Language Models with Graph Augmentation for Recommendation**\u003Cbr>\u003Csub>机构: University of Hong Kong, Baidu\u003Cbr>LLMRec作为开创性的工作，它引入LLMs来增强图推荐系统，成功地解决了交互数据的稀疏性和低质量侧信息的问题，并通过强化用户-项目交互边、项目节点属性以及用户画像等手段提升了推荐系统的性能，确保了推荐质量的同时降低了数据噪声的影响。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.00423v5)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.00423.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FHKUDS\u002FLLMRec.git)\u003C\u002Fdiv> |\n\n---\n\n### 10月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>10-20\u003C\u002Fspan> | **The History and Risks of Reinforcement Learning and Human Feedback**\u003Cbr>\u003Csub>机构: Berkeley\u003Cbr>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2310.13595v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-10\u002F2310.13595.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>10-17\u003C\u002Fspan> | **Self-RAG: Learning to Retrieve, Generate, and Critique through Self-Reflection**\u003Cbr>\u003Csub>机构: University of Washington\u003Cbr>论文推出了SELF-RAG，这是一种新的框架，通过按需检索和自我反思来增加LLMs的质量和事实性。它通过生成反思标记让LM在推理阶段变得可控，可以满足多样化的任务要求。SELF-RAG在多个任务上显著超越了现有LLMs和RAG模型，并通过定制的解码算法和反思标记，为模型自我评估和定制提供了新的方案。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2310.11511v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-10\u002F2310.11511.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>10-11\u003C\u002Fspan> | **OpsEval: A Comprehensive Task-Oriented AIOps Benchmark for Large Language Models**\u003Cbr>\u003Csub>机构: Tsinghua University, Chinese Academy of Sciences\u003Cbr>OpsEval 作为一个全面的 AIOps 任务导向型基准测试，不仅评估了大型语言模型的综合性能、推理和实际应用能力，还可能改变未来大规模质量评估中使用的评价指标。它提供了一个用于持续研究和优化AIOps领域大型语言模型的坚实基础。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2310.07637v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-10\u002F2310.07637.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>10-10\u003C\u002Fspan> | **GPT-4 as an Agronomist Assistant? Answering Agriculture Exams Using Large Language Models**\u003Cbr>\u003Csub>机构: Microsoft Research\u003Cbr>本研究展示了在农业领域使用LLMs进行问题回答的新方法，特别是通过Ensemble Refinement策略，大幅提升了LLMs在多选题目上的表现，并显示出在处理专业领域问题时的广泛潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2310.06225v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-10\u002F2310.06225.md)  |\n\n---\n\n### 09月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>09-04\u003C\u002Fspan> | **Benchmarking Large Language Models in Retrieval-Augmented Generation**\u003Cbr>\u003Csub>机构: Chinese Information Processing Laboratory \u003Cbr>本论文提出了一种新的基于实际新闻文章的检索增强生成基准测试，用以彻底评估大型语言模型在复杂信息环境中的多项能力，并通过实验结果展现了现有LLMs在这些方面的局限性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2309.01431v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-09\u002F2309.01431.md)  |\n\n---\n\n### 08月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>08-18\u003C\u002Fspan> | **Learning Representations on Logs for AIOps**\u003Cbr>\u003Csub>机构: IBM Research\u003Cbr>本文提出的BERTOps模型通过使用LLMs中的通用表示，并结合专门针对AIOps日志数据的预训练，有效地提高了自动化日志分析任务的性能，并展示了显著的改进。BERTOps不仅优于现有模型，在多个下游任务中也表现出卓越的性能，有助于加速AIOps的实践应用。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2308.11526v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-08\u002F2308.11526.md)  |\n\n---\n\n### 07月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-11\u003C\u002Fspan> | **Towards Understanding In-Context Learning with Contrastive Demonstrations and Saliency Maps**\u003Cbr>\u003Csub>机构: UNIVERSITY OF MARYLAND\u003Cbr>本研究使用对比示例和显著图分析法来探究大型语言模型中上下文学习的内在机制，揭示了标签翻转、输入变化、和补充性解释对预测的不同影响，并为实践者提供了如何策划示例的洞见。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2307.05052v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-07\u002F2307.05052.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fpaihengxu\u002FXICL)\u003C\u002Fdiv> |\n\n---\n\n### 06月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-07\u003C\u002Fspan> | **PromptRobust: Towards Evaluating the Robustness of Large Language Models on Adversarial Prompts**\u003Cbr>\u003Csub>机构: Microsoft Research\u003Cbr>PromptRobust是一个全新的、开放性的基准测试，旨在评估LLMs如何对待可能在现实世界中自然发生的输入错误，如错别字和同义词替换。这一工具的开源将有助于未来的稳健性研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2306.04528v5)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-06\u002F2306.04528.md)  |\n\n---\n\n### 05月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-24\u003C\u002Fspan> | **In-Context Demonstration Selection with Cross Entropy Difference**\u003Cbr>\u003Csub>机构: Microsoft Cognitive Service Research\u003Cbr>文章提出了一种新的基于交叉熵差异（CED）的上下文示例选择方法，并提供了理论上的解释，实现了对不同大小和类型的大型语言模型性能的提升。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2305.14726v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-05\u002F2305.14726.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-23\u003C\u002Fspan> | **Label Words are Anchors: An Information Flow Perspective for Understanding In-Context Learning**\u003Cbr>\u003Csub>机构: Lean Wang, Lei Li, Damai Dai, Deli Chen, Hao Zhou, Fandong Meng, Jie Zhou, Xu Sun\u003Cbr>本论文通过信息流视角研究了大型语言模型进行上下文学习（ICL）的内部机制，发现了标签词在信息流中作为锚点的现象，提出了新假设，并通过实验验证了其有效性。此外，使用所得洞见提出了提高ICL性能的方法，为未来相关研究提供了理论基础和实践指导。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2305.14160v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-05\u002F2305.1416.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-19\u003C\u002Fspan> | **How to Prompt LLMs for Text-to-SQL: A Study in Zero-shot, Single-domain, and Cross-domain Settings**\u003Cbr>\u003Csub>机构: The Ohio State University\u003Cbr>本研究揭示出有效提示构造的关键数据库知识和最优表述，为LLMs在text-to-SQL任务中的应用提供指导，并指出在跨域设置中对于提示长度存在一个“甜蜜点”。本研究的发现可能对于特定数据库不总是适用，特别是如果该数据库与Spider数据库显著不同。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2305.11853v3)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-05\u002F2305.11853.md)  |\n\n---\n\n### 03月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-31\u003C\u002Fspan> | **A Survey of Large Language Models**\u003Cbr>\u003Csub>机构: Renmin University of China\u003Cbr>总的来说，这篇综述文章介绍了LLMs领域的最新进展，特别是OpenAI推出的ChatGPT和GPT-4模型，并强调了这些产品对人工智能研究的重大影响，特别指出了它们在人机交流、多模态理解和生成、以及人工智能对齐和安全性方面的突破。同时，文章认识到尽管取得了巨大的技术进展，但在安全性、生成质量和多模态性功能方面仍面临挑战，并提出了一系列的技术和策略来缓解这些问题。通过这篇文章，我们可以更好地理解LLMs的发展方向以及对未来人工智能应用和研究的潜在影响。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2303.18223v13)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-03\u002F2303.18223.md)  |\n\n---\n\n### 02月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-08\u003C\u002Fspan> | **A Multitask, Multilingual, Multimodal Evaluation of ChatGPT on Reasoning, Hallucination, and Interactivity**\u003Cbr>\u003Csub>机构: Centre for Artificial Intelligence Research\u003Cbr>文章通过更细粒度的方式评估了ChatGPT的推理能力，并且找到了LLMs中的一个关键问题，即在非文本语义理解方面的不足。这一发现对于未来LLMs的改进和推理能力的研究提供了重要的方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2302.04023v4)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-02\u002F2302.04023.md)  |\n\n---\n\n\n## Star History\n\u003Cpicture>\n\u003Csource\n    media=\"(prefers-color-scheme: dark)\"\n    srcset=\"\n    https:\u002F\u002Foss.gittoolsai.com\u002Fimages\u002Fxianshang33_llm-paper-daily_readme_ecea10038452.png&theme=dark\n    \"\n\u002F>\n\u003Csource\n    media=\"(prefers-color-scheme: light)\"\n    srcset=\"\n    https:\u002F\u002Foss.gittoolsai.com\u002Fimages\u002Fxianshang33_llm-paper-daily_readme_ecea10038452.png\n    \"\n\u002F>\n\u003Cimg\n    alt=\"Star History Chart\"\n    src=\"https:\u002F\u002Foss.gittoolsai.com\u002Fimages\u002Fxianshang33_llm-paper-daily_readme_ecea10038452.png\"\n\u002F>\n\u003C\u002Fpicture>\n            ","\u003Ch2 align='center'>llm-paper-daily 每日论文精选\u003C\u002Fh2>\n\u003Cdiv align='center'>\n\n[![状态](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002F%E7%8A%B6%E6%80%81-Update_07.31_10:00-success.svg)]() [![简体中文徽章](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002F%E7%AE%80%E4%BD%93%E4%B8%AD%E6%96%87-Simplified%20Chinese-blue)](.\u002FREADME.md) [![英语徽章](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002F%E8%8B%B1%E6%96%87-English-blue)](.\u002FREADME_en.md) \n\n\u003C\u002Fdiv>\n\n欢迎来到 **llm-paper-daily**! 这是一个获取最新研究论文的每日更新和分类的平台。希望为爱好者提供 LLM 研究的前沿资讯，让您更轻松地了解该领域的最新发展。\n\n📚 **每日更新:** 仓库每天会带来最新的 LLM 研究，并附有arxiv地址、相关 git 仓库和基于 GPT-4 的简单总结\n\n💐 **分类摘要:** 将每篇论文分类到如推理、代理、检索、应用、预训练与指令微调等不同部分，帮助您能轻松导航并发现相关的研究\n\n🌈 **交流学习:** 最近准备拉一个讨论小组方便大家交流和互相学习。\n欢迎对大模型落地、论文等等方面有兴趣的小伙伴加入🙌 \n\n\u003Cimg src='https:\u002F\u002Foss.gittoolsai.com\u002Fimages\u002Fxianshang33_llm-paper-daily_readme_67211746ff99.jpg' width=15%  alt=\u002F>\n\n## 目录\n- [最新论文(含总结)](#最新论文)\n- [分类](#分类)\n  - [💡 Reasoning](CATEGORIES.md#Reasoning)\n  - [🤖 Agent](CATEGORIES.md#Agent)\n  - [🦉 Knowledge and Retrieval](CATEGORIES.md#Knowledge-and-Retrieval)\n  - [👩‍🏫 Alignment and Hallucination](CATEGORIES.md#Alignment-and-Hallucination)\n  - [🎨 Application](CATEGORIES.md#Application)\n  - [📐 Pre-training and Instruction Fine-tuning](CATEGORIES.md#Pre-training-and-Instruction-Fine-tuning)\n  - [📄 Survey](CATEGORIES.md#Survey)\n\u003Cdetails>\n  \u003Csummary>查看更新文章   \u003Csub>更新时间: 07月31日 10:00\u003C\u002Fsub>\u003C\u002Fsummary>\n\u003Cbr>\n\n- Self-Training with Direct Preference Optimization Improves Chain-of-Thought Reasoning \n\u003C\u002Fdetails>\n\n## 最新论文\n### 07月\n\n|  日期   | 论文 | 链接与摘要 |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-29\u003C\u002Fspan> | **SeaLLMs 3: 面向东南亚语言的开源基础与对话多语言大模型**\u003Cbr>\u003Csub>机构: 达摩院，阿里巴巴集团\u003Cbr>SeaLLMs 3 是专为东南亚多语言环境设计的大型语言模型，重点在于克服现有模型的局限性，通过高效的语言增强技术和安全可靠的机制，使之能够提供文化适宜的回应，同时减少幻觉现象。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.19672v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.19672.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-29\u003C\u002Fspan> | **QAEA-DR: 面向密集检索的统一文本增强框架**\u003Cbr>\u003Csub>机构: 清华大学\u003Cbr>QAEA-DR 框架提出了一个针对密集检索的创新文本增强技术，通过集成事件提取和问题答案生成来提高文本生成的质量和健壮性，同时还可以与多种嵌入模型兼容，证明了其在实验中的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.20207v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.20207.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-28\u003C\u002Fspan> | **元奖励语言模型：基于 LLM 作为元裁判的自我改进对齐**\u003Cbr>\u003Csub>机构: Meta FAIR、加州大学伯克利分校、纽约大学\u003Cbr>Meta-Rewarding 机制通过引入一个 meta-judge 角色来评估模型自身的判断，改进了 LLMs 的自改进流程。该方法不仅提高了模型跟随指令的能力，而且打破了依赖人工数据的局限，表现出了自改进模型在无人监督下的巨大潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.19594v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.19594.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-25\u003C\u002Fspan> | **直接偏好优化的自训练提升思维链推理能力**\u003Cbr>\u003Csub>机构: StatNLP 研究组\u003Cbr>本论文提出了一种创新的自我训练框架，通过整合直接偏好优化（DPO）来提升小规模语言模型在解决数学推理问题上的能力。这种方法减少了对大模型的依赖，同时降低了计算成本，并在多个数学推理任务上取得了积极的结果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.18248v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.18248.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-23\u003C\u002Fspan> | **RedAgent: 基于上下文感知的自主语言代理对大型语言模型进行红队测试**\u003Cbr>\u003Csub>机构: 浙江大学、Palo Alto Networks、北德克萨斯大学\u003Cbr>RedAgent 系统成功地通过模拟特定上下文的 jailbreak 策略，有效地发现并利用大型语言模型的安全漏洞，它不仅提高了红队方法的效率和自动化，也为理解和强化 LLM 应用程序的安全性提供了新的视角。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.16667v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.16667.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-23\u003C\u002Fspan> | **检索增强生成还是长上下文 LLM？全面研究与混合方法**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.16833v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.16833.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-23\u003C\u002Fspan> | **OpenDevin: 面向 AI 软件开发者的通用代理开放平台**\u003Cbr>\u003Csub>机构: UIUC、CMU、耶鲁大学\u003Cbr>OpenDevin 是一个用于开发与世界通过软件交互的通用和专业 AI 代理的社区驱动平台，具有强大灵活的交互机制、沙箱操作系统和网页浏览器环境、以及全面的评估框架。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.16741v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.16741.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-22\u003C\u002Fspan> | **大型语言模型中的知识机制：综述与展望**\u003Cbr>\u003Csub>机构: 浙江大学、新加坡国立大学、加州大学洛杉矶分校\u003Cbr>本论文认为深入了解 LLMs 的知识机制对于培养强大且可靠的 AI 至关重要。论文提出了一个评估此类系统的新框架，集中在知识的利用和演化，并为未来的研究方向提供了愿景和工具。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.15017v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.15017.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-19\u003C\u002Fspan> | **ChatQA 2: 在长上下文和 RAG 能力上缩小与专有 LLM 的差距**\u003Cbr>\u003Csub>机构: NVIDIA\u003Cbr>论文提出了一个名为 Llama3-ChatQA-2-70B 的模型，用于桥接开源 LLMs 与专有模型之间的差距，具备处理最长 128K token 上下文的能力，并在多个基准测试上达到了与 GPT-4-Turbo 相当的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.14482v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.14482.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-19\u003C\u002Fspan> | **大型语言模型中的内部一致性与自我反馈：综述**\u003Cbr>\u003Csub>机构: 中国人民大学、先进算法研究院（上海）、北京理工大学\u003Cbr>本文针对大型语言模型在保持一致性和避免产生幻觉方面的问题，提出了内部一致性和自我反馈的概念。这为我们理解和改进这些模型提供了新的视角，并展望了未来的发展方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.14507v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.14507.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FIAAR-Shanghai\u002FICSFSurvey)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-18\u003C\u002Fspan> | **CoD，迈向基于诊断链的可解释医疗代理**\u003Cbr>\u003Csub>机构: 深圳大数据研究院、香港中文大学（深圳）\u003Cbr>这项工作提出了 Chain-of-Diagnosis (CoD)，它是一种旨在增强疾病诊断中 LLM 的可解释性的方法，该方法通过合成病例结合疾病百科全书数据，有效地生成了培训数据并开发了 DiagnosisGPT 模型。实验表明，DiagnosisGPT 在多个诊断数据集上的性能优于其他 LLM。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.13301v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.13301.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-16\u003C\u002Fspan> | **别相信机器人：探索真实场景中人机对话中的个人信息披露**\u003Cbr>\u003Csub>机构: 华盛顿大学、艾伦人工智能研究所、麦吉尔大学\u003Cbr>本项研究强调了在与聊天机器人的互动中，用户个人信息泄露的问题。它呈现了在这些互动中共享的敏感信息的类型，并呼吁对聊天机器人设计采取措施，以保护用户隐私并保持交流内容的适当透明度。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.11438v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.11438.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-16\u003C\u002Fspan> | **NeedleBench: LLM 能否在 100 万上下文窗口中完成检索和推理？**\u003Cbr>\u003Csub>机构: 上海人工智能实验室、清华大学\u003Cbr>NeedleBench 框架和提出的 ATC 测试为评估和提升 LLMs 在处理长文本数据时的检索和推理能力提供了新方法。这对现实世界中的长上下文任务至关重要，也揭示了当前 LLMs 面临的机遇和挑战。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.11963v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.11963.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fopen-compass\u002Fopencompass)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-16\u003C\u002Fspan> | **LOTUS：利用 LLM 对非结构化和结构化数据表进行语义查询**\u003Cbr>\u003Csub>机构: 斯坦福大学、UC Berkeley\u003Cbr>本文提出了 LOTUS 系统，该系统通过定义语义操作符来启用基于自然语言的查询，并通过高效的算法和优化实现了快速准确的查询执行。LOTUS 在多个真实世界的应用案例中展示了其应用的广泛性和高性能，对改进基于 LMs 的大规模语义分析和查询系统具有重要意义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.11418v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.11418.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fstanford-futuredata\u002Flotus)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-15\u003C\u002Fspan> | **Qwen2 技术报告**\u003Cbr>\u003Csub>机构: 阿里巴巴集团\u003Cbr>Qwen2 系列模型作为最新的大型语言模型，不仅在语言理解、生成、多语言能力、编码、数学和推理等多任务环境中性能出色，还在开源社区中公开了权重和资源，促进了社区的创新和可访问性。模型在多个基准测试中与现有模型相比展现出竞争力，尤其在多语言方面显示出广泛的适用性和全球覆盖范围。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.10671v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.10671.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-15\u003C\u002Fspan> | **图上思考 2.0：基于知识图谱检索的深度且可解释的大语言模型推理**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.10805v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.10805.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-14\u003C\u002Fspan> | **学会拒绝：迈向缓解 LLM 中的隐私风险**\u003Cbr>\u003Csub>机构: 中国苏州大学人工智能研究所\u003Cbr>论文提出了一种新的机器学习框架 NAUF 和配套的真实世界个人数据遗忘数据集 RETURN，用于评估和改善 LLMs 在隐私保护方面的表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.10058v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.10058.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-12\u003C\u002Fspan> | **面向无限上下文 LLM 的类人情景记忆**\u003Cbr>\u003Csub>机构: 华为诺亚方舟实验室、伦敦大学学院\u003Cbr>文章通过整合人类情节记忆和事件认知到大型语言模型中，创造了一种新型结构 EM-LLM，使 LLMs 能够处理实际无限上下文长度，同时保持计算效率。这项研究不仅改进了大型语言模型处理广泛上下文的能力，还有助于揭示人类记忆机制。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.09450v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.0945.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-10\u003C\u002Fspan> | **Toto：面向可观测性的时间序列优化 Transformer**\u003Cbr>\u003Csub>机构: Datadog\u003Cbr>Toto 模型是 Datadog 开发的一种用于时序预测的基础模型，专为处理观测数据而设计。它通过创新的注意力机制和预训练策略，有效地提高了处理观测数据的性能和效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.07874v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.07874.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-10\u003C\u002Fspan> | **迈向稳健的语言模型对齐：分布鲁棒化的直接偏好优化**\u003Cbr>\u003Csub>机构: 中国科学技术大学、Alibaba Stripe、浙江大学\u003Cbr>研究人员开发了 Dr. DPO 框架，它通过单一额外代码行来增强 DPO 的鲁棒性。实证评估表明，Dr. DPO 在各种设置中显著提高了性能，无论是在有噪声还是无噪声的条件下。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.07880v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.0788.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fjunkangwu\u002FDr_DPO)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-09\u003C\u002Fspan> | **代理人互联网：编织异构代理网络以实现协同智能**\u003Cbr>\u003Csub>这篇论文提出了一个灵活且可扩展的多代理协作平台——代理人互联网（IoA），它克服了现有多代理框架的局限性，并展示了在多种任务和应用场景中的出色性能。此外，论文还发布了相关的代码库，以推动自主代理系统的发展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.07061v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.07061.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FOpenBMB\u002FIoA)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-05\u003C\u002Fspan> | **AriGraph：为 LLM 代理构建带有情景记忆的知识图世界模型**\u003Cbr>\u003Csub>机构: AIRI，莫斯科，俄罗斯；Skoltech，莫斯科，俄罗斯\u003Cbr>AriGraph 是一种新颖的记忆架构，用于构建集成了语义和情景记忆的知识图世界模型，以提升 LLM 代理的探索和规划能力。通过在 TextWorld 环境中的实验，证明了它在处理复杂任务方面比其他现有方法更有效。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.04363v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.04363.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-02\u003C\u002Fspan> | **让专家坚守本职：面向稀疏架构大型语言模型的专家专用微调**\u003Cbr>\u003Csub>机构: DeepSeek AI、西北大学\u003Cbr>本文提出了针对稀疏架构 LLM 的参数高效微调方法 ESFT，该方法通过只微调与下游任务最相关的专家，既保持了专家的特化性，又显著节省了计算资源。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.01906v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.01906.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fdeepseek-ai\u002FESFT)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-02\u003C\u002Fspan> | **RankRAG：在 LLM 中统一上下文排名与检索增强生成**\u003Cbr>\u003Csub>机构: 佐治亚理工学院、NVIDIA\u003Cbr>RankRAG 是一个新颖的框架，通过指令微调 LLM 以增强其在 RAG 中的上下文排名和答案生成能力，在多个基准测试中提升了生成性能，并显示出良好的泛化能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.02485v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.02485.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-01\u003C\u002Fspan> | **干草堆摘要：对长上下文 LLM 和 RAG 系统的挑战**\u003Cbr>\u003Csub>本文提出了一种新的评价大型语言模型和 RAG 系统处理长文本能力的方法，即 SummHay 任务，并通过合成数据生成和自动评估系统两个角度，解决了长文本评估的挑战。实验结果表明，目前的系统在此任务上表现不佳，为未来系统的提升指明了方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.01370v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.0137.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-01\u003C\u002Fspan> | **We-Math：你的大型多模态模型能否实现类人数学推理？**\u003Cbr>\u003Csub>机构: 北京邮电大学、腾讯公司、华中科技大学\u003Cbr>这篇论文创建了一个名为 WE-MATH 的视觉数学推理基准测试，旨在超越传统的端到端性能评估，深入探讨和评价 LMMs 的问题解决原理及它们的知识获取和泛化能力。通过新的多维度评估方法揭示出多模态模型在内在推理过程中的挑战，并通过实验验证了知识增强策略的有效性，推动了 LMMs 在视觉数学推理方面的进步。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.01284v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.01284.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FWe-Math\u002FWe-Math)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-01\u003C\u002Fspan> | **有意义的 AI 代理**\u003Cbr>\u003Csub>机构: 普林斯顿大学\u003Cbr>这篇论文批评了当前 AI 代理的基准评测方式，并且提出了一系列改进措施，目标是发展出真正有实际应用价值的智能代理，而不仅仅是在基准测试中取得高分的代理。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.01502v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-07\u002F2407.01502.md)  |\n\n---\n\n\n\n### 六月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-30\u003C\u002Fspan> | **Step-Controlled DPO: Leveraging Stepwise Error for Enhanced Mathematical Reasoning**\u003Cbr>\u003Csub>机构: Multimedia Laboratory (MMLab), The Chinese University of Hong Kong\u003Cbr>本论文提出了一种新的数学推理优化方法——SCDPO，通过在特定步骤监督错误的方式，自动化地生成训练样本，显著提升了LLMs在数学问题求解方面的性能，证明了该方法的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.00782v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2407.00782.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-29\u003C\u002Fspan> | **LiteSearch: Efficacious Tree Search for LLM**\u003Cbr>\u003Csub>机构: Xiamen University, Tencent AI Lab\u003Cbr>该论文通过提出一种效率更高的树搜索算法来降低在辅助大型语言模型解决复杂数学推理任务时的资源消耗，同时确保保持高性能水平。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.00320v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2407.0032.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-28\u003C\u002Fspan> | **Scaling Synthetic Data Creation with 1,000,000,000 Personas**\u003Cbr>\u003Csub>机构: Tencent AI Lab Seattle\u003Cbr>本论文提出了一个名为“Persona Hub”的合成数据平台，在保证生成数据多样化和丰富性的同时，重点关注合成数据的安全和负责任使用。通过一系列用例证明了该方法在多元化、可扩展性、灵活性和易用性方面的优势。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.20094v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.20094.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-27\u003C\u002Fspan> | **From Artificial Needles to Real Haystacks: Improving Retrieval Capabilities in LLMs by Finetuning on Synthetic Data**\u003Cbr>\u003Csub>机构: University of Wisconsin-Madison\u003Cbr>该论文提出了一个通过在合成数据集上微调LLMs来提高其在长文本任务上检索和推理能力的方法。实验结果表明，这种方法可以在不显著影响模型整体能力的同时，显著提高模型在长文本任务中的表现，并降低幻觉的生成。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.19292v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.19292.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-27\u003C\u002Fspan> | **SeaKR: Self-aware Knowledge Retrieval for Adaptive Retrieval Augmented Generation**\u003Cbr>\u003Csub>本论文提出了一个名为SEAKR的新型自适应检索增强生成模型，通过利用LLMs的内部状态自我意识来动态决定何时进行检索，并有效整合检索到的知识，从而提高了在问答任务中的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.19215v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.19215.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FTHU-KEG\u002FSeaKR)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-26\u003C\u002Fspan> | **Step-DPO: Step-wise Preference Optimization for Long-chain Reasoning of LLMs**\u003Cbr>\u003Csub>机构: The Chinese University of Hong Kong, Harbin Institute of Technology (Shenzhen), SmartMore\u003Cbr>这份论文提出了一种新的优化方法Step-DPO，它通过对单个推理步骤进行优化而非整体评估答案，提升了LLMs在长链数学推理上的准确性和鲁棒性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.18629v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.18629.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fdvlab-research\u002FStep-DPO)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-25\u003C\u002Fspan> | **The FineWeb Datasets: Decanting the Web for the Finest Text Data at Scale**\u003Cbr>\u003Csub>机构: Hugging Face\u003Cbr>本论文通过介绍FineWeb数据集，突出了如何策划出一个有效的基于Common Crawl的预训练数据集的重要性，并通过实验证明了其对于提升大型语言模型的性能的贡献。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.17557v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.17557.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-24\u003C\u002Fspan> | **WARP: On the Benefits of Weight Averaged Rewarded Policies**\u003Cbr>\u003Csub>机构: Google DeepMind\u003Cbr>本文提出了WARP，一种新的LLM对齐策略，通过权重平均合并模型以解决RLHF过程中的挑战，改善KL与奖励之间的权衡。实验证明，WARP能够提升模型性能和与人类价值的对齐度。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.16768v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.16768.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-22\u003C\u002Fspan> | **Semantic Entropy Probes: Robust and Cheap Hallucination Detection in LLMs**\u003Cbr>\u003Csub>机构: OATML, Department of Computer Science, University of Oxford  \u003Cbr>论文提出SEPs为成本高效和可靠的幻觉检测方法，能够在无需生成多样本的条件下，直接从LLMs单次生成的隐藏状态中捕捉到语义不确定性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.15927v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.15927.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-21\u003C\u002Fspan> | **LongRAG: Enhancing Retrieval-Augmented Generation with Long-context LLMs**\u003Cbr>\u003Csub>机构: University of Waterloo\u003Cbr>LongRAG是一个针对开放领域问答任务的新框架，它通过增大检索单元和利用长文本语言模型来解冤传统RAG框架的限制。通过减少检索单元和提升检索器效能，以及使用长文本LLMs进行零次学习的答案提取，LongRAG在性能上取得了显着的改善。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.15319v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.15319.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-19\u003C\u002Fspan> | **Can Long-Context Language Models Subsume Retrieval, RAG, SQL, and More?**\u003Cbr>\u003Csub>本论文通过引入LOFT基准，探索了长上下文语言模型在替代现有范式和处理新颖任务方面的潜力。发现LCLMs在未经明确训练的情况下，能够在特定任务上与现有的检索和RAG系统相媲美，并指出了未来在提高问题表现上需要继续研究的领域。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.13121v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.13121.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-18\u003C\u002Fspan> | **Nash CoT: Multi-Path Inference with Preference Equilibrium**\u003Cbr>\u003Csub>机构: Westlake University, University of Cambridge\u003Cbr>本文提出了一种新颖的方法Nash CoT，利用偏好均衡概念通过减少推理路径的数量在保持性能的同时降低了LLMs的部署成本。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2407.07099v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2407.07099.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-18\u003C\u002Fspan> | **Judging the Judges: Evaluating Alignment and Vulnerabilities in LLMs-as-Judges**\u003Cbr>\u003Csub>本研究通过评估LLMs作为评判在对齐和评判弱点方面的表现，为使用LLMs作为未来评判提供了有用的洞察。重要的发现包括适合作为评判的仅有部分顶尖模型，以及Cohen's Kappa是一个更好的对齐度量标准，能在区分评判者方面做得比百分比对齐更好。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.12624v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.12624.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-17\u003C\u002Fspan> | **A Survey of AIOps for Failure Management in the Era of Large Language Models**\u003Cbr>\u003Csub>机构: Peking University, Tsinghua University, The Hong Kong University of Science and Technology (Guangzhou), University of Illinois Chicago\u003Cbr>本文是关于LLMs时代用于故障管理的AIOps技术的全面综述。文章讨论了LLMs对于解决现有AIOps方法所面临挑战的潜力，并勾勒了未来的研究方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.11213v4)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.11213.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-13\u003C\u002Fspan> | **Test of Time: A Benchmark for Evaluating LLMs on Temporal Reasoning**\u003Cbr>\u003Csub>机构: Google Research, Google DeepMind, Google\u003Cbr>本文引入了一个新的基准测试 ToT，通过合成数据集和众包任务，全面评估了LLMs在各种情境中对时间推理能力的表现，同时揭示了这些模型在时间推理方面的优势和不足。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.09170v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.0917.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-12\u003C\u002Fspan> | **Magpie: Alignment Data Synthesis from Scratch by Prompting Aligned LLMs with Nothing**\u003Cbr>\u003Csub>机构: University of Washington, Allen Institute for AI\u003Cbr>本文提出了MAGPIE，一个自合成方法生成大规模的高质量对齐数据，该方法不依赖于人的参与或提示工程。实验证明，使用MAGPIE微调的模型在多个基准上均显示出优异的性能，展示了LLMs在自动数据生成和对齐方面的潜能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.08464v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.08464.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-12\u003C\u002Fspan> | **Designing a Dashboard for Transparency and Control of Conversational AI**\u003Cbr>\u003Csub>机构: Harvard University, Google Research\u003Cbr>这篇论文致力于增加LLMs在对话AI系统中的透明度，并通过设计一个可视化的用户界面—一个与聊天机器人接口相配套的看板—实现了这一点。用户能够实时看到系统的内部用户模型，并可以通过界面更改这些模型。基于用户反馈，看板还有助于揭露并且对抗模型的偏见行为。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.07882v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.07882.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-12\u003C\u002Fspan> | **TasTe: Teaching Large Language Models to Translate through Self-Reflection**\u003Cbr>\u003Csub>机构: Harbin Institute of Technology, Tencent Inc\u003Cbr>本文提出的TASTE框架通过自我反思过程提升了LLMs的机器翻译能力，它代表了利用LLMs翻译潜力的一种新方法，为理解和利用LLMs的复杂推理和语言建模能力树立了新的典范。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.08434v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.08434.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FYutongWang1216\u002FReflectionLLMMT)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-11\u003C\u002Fspan> | **Delving into ChatGPT usage in academic writing through excess vocabulary**\u003Cbr>\u003Csub>机构: Hertie Institute for AI in Brain Health, University of Tübingen, Germany, Tübingen AI Center, Northwestern University\u003Cbr>此论文针对学术文本中广泛使用 LLMs 的现象，提出了一种新的无偏差的大规模方法来研究 LLM 的使用情况，并对 LLM 导致的科学写作变化进行了前所未有的量化比较。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.07016v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.07016.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-11\u003C\u002Fspan> | **Needle In A Multimodal Haystack**\u003Cbr>\u003Csub>机构: OpenGVLab, Shanghai AI Laboratory, Fudan University\u003Cbr>该论文提出了MM-NIAH，首个长篇多模态文件理解的评估基准，旨在考验和提升MLLMs的性能。通过不同的评估任务，论文指出了现有MLLMs在长篇多模态文档理解方面的局限和挑战。进一步的，该基准为MLLMs的长篇多模态文档理解研究提供了有效的平台。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.07230v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.0723.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FOpenGVLab\u002FMM-NIAH)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-10\u003C\u002Fspan> | **Self-Tuning: Instructing LLMs to Effectively Acquire New Knowledge through Self-Teaching**\u003Cbr>\u003Csub>机构: The Chinese University of Hong Kong, Tencent AI Lab, Centre for Perceptual and Interactive Intelligence\u003Cbr>论文通过引入SELF-TUNING，提出了一种改进LLM通过自我教学获取知识能力的框架，并通过Wiki-Newpages-QA数据集在多个关键知识获取任务上验证了其有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.06326v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.06326.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-10\u003C\u002Fspan> | **Transforming Wearable Data into Health Insights using Large Language Model Agents**\u003Cbr>\u003Csub>机构: Google LLC\u003Cbr>本论文通过介绀名为PHIA的大型语言模型代理系统，成功地将可穿戴设备数据转化为个人健康洞察。PHIA结合了代码生成和信息检索工具，有效解决了从大量健康数据中派生个性化健康指导的挑战。通过广泛的人工和自动化评估，证明了这种方法在处理实际健康问题上的准确性和应用可能性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.06464v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.06464.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-10\u003C\u002Fspan> | **Husky: A Unified, Open-Source Language Agent for Multi-Step Reasoning**\u003Cbr>\u003Csub>机构: University of Washington, MetaAI, Allen Institute for AI\u003Cbr>HUSKY是首个统一、开源的多步推理语言代理，解决了成本高和扩展困难的问题，且在多任务环境中取得优异表现，展现了开源语言代理的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.06469v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.06469.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fagent-husky\u002FHusky-v1)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-10\u003C\u002Fspan> | **Reasoning in Token Economies: Budget-Aware Evaluation of LLM Reasoning Strategies**\u003Cbr>\u003Csub>机构: Duke University, AWS AI Labs\u003Cbr>论文提出了一个考虑计算预算的LLM推理策略评估框架，并展示了简单策略在同等计算资源下可超越复杂策略的能力。通过揭示自我评估的重要性，为更加高效的预算利用和更有效策略的开发奠定了基础。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.06461v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.06461.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-09\u003C\u002Fspan> | **Do LLMs Exhibit Human-Like Reasoning? Evaluating Theory of Mind in LLMs for Open-Ended Responses**\u003Cbr>\u003Csub>机构: University of Washington, University of Washington - Bothell\u003Cbr>本研究强调了 LLM 在社交推理方面的不足，并展示了如何通过整合人类的意图和情绪来增强其有效性。研究结果凸显了 LLM 理解人类心理状态并在开放式问题中进行社交推理的需求，标明了未来发展的关键领域。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.05659v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.05659.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-07\u003C\u002Fspan> | **WildBench: Benchmarking LLMs with Challenging Tasks from Real Users in the Wild**\u003Cbr>\u003Csub>WILDBENCH 作为一个评价基准，提供了一个结合了真实用户任务挑战、自动化指标和解释性清单的评价框架，能够更准确地评估和区别大型语言模型在复杂任务中的表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.04770v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.0477.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-07\u003C\u002Fspan> | **Mixture-of-Agents Enhances Large Language Model Capabilities**\u003Cbr>\u003Csub>机构: Duke University, Together AI, University of Chicago\u003Cbr>这篇论文通过提出Mixture-of-Agents (MoA) 方法，展示了如何通过结合多个大型语言模型的集体专长来增强它们在理解和生成自然语言方面的能力。作者通过实验验证了这种方法可以显著提高模型的表现，并在多个竞争力很强的基准测试中取得了最新的最佳成绩。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.04692v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.04692.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-06\u003C\u002Fspan> | **The Prompt Report: A Systematic Survey of Prompting Techniques**\u003Cbr>\u003Csub>该论文提供了对提示技术的全面调研，系统分析了提示的概念、类型和应用，并对此进行了详细的元分析。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.06608v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.06608.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-06\u003C\u002Fspan> | **FastGAS: Fast Graph-based Annotation Selection for In-Context Learning**\u003Cbr>\u003Csub>机构: Department of ECE, University of Virginia\u003Cbr>论文提出的FastGAS方法在选择ICL实例时，不仅能提高多样性和代表性，同时还显著减少了所需的时间和计算资源。实验结果验证了其在多个数据集上的效能和效率，证明了其作为一种有效的实例选择方法的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.03730v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.0373.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-06\u003C\u002Fspan> | **Buffer of Thoughts: Thought-Augmented Reasoning with Large Language Models**\u003Cbr>\u003Csub>机构: Peking University, UC Berkeley, Stanford University\u003Cbr>BoT通过为LLMs提供一个存储高层次思维模板的meta-buffer，增强了推理的准确性、效率和鲁棒性，克服了现有方法的限制，并实现了显著的性能提升。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.04271v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.04271.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FYangLing0818\u002Fbuffer-of-thought-llm)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-04\u003C\u002Fspan> | **Synergetic Event Understanding: A Collaborative Approach to Cross-Document Event Coreference Resolution with Large Language Models**\u003Cbr>\u003Csub>机构: Zhejiang University, School of Engineering (Westlake University), Shanghai AI Laboratory\u003Cbr>文章提出了一种新颖的协作方法以解决跨文档事件共指消解任务。通过将LLMs的普遍能力与任务特定的SLMs结合，显著提高了模型性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.02148v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.02148.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-04\u003C\u002Fspan> | **To Believe or Not to Believe Your LLM**\u003Cbr>\u003Csub>机构: Google DeepMind\u003Cbr>本论文重点研穴并提出了一个新的信息论度量方法以在大型语言模型中量化不确定性，特别是针对LLMs生成响应时的幻觉现象。这项研究为如何识别和处理LLMs中的幻觉提供了新的理解和解决方案。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.02543v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.02543.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-03\u003C\u002Fspan> | **Self-Improving Robust Preference Optimization**\u003Cbr>\u003Csub>机构: Cohere\u003Cbr>SRPO通过在理论上合理的离线RLHF框架内表现出对任务变化的强大鲁棒性，成功地解决了依赖特定任务的问题，并通过非对抗性离线损失的优化提供了更简单的训练和部署过程。实验结果显示SRPO在包括OOD设置在内的各种环境下优于现有方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.01660v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.0166.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-03\u003C\u002Fspan> | **Mobile-Agent-v2: Mobile Device Operation Assistant with Effective Navigation via Multi-Agent Collaboration**\u003Cbr>\u003Csub>机构: Beijing Jiaotong University, Alibaba Group\u003Cbr>Mobile-Agent-v2是一个多代理架构，能有效解决移动设备操作任务中的导航挑战，特别是任务进展和焦点内容的导航问题。通过引入三个专门的代理角色，相较于传统的单代理架构，显著提高了任务完成率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2406.01014v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-06\u002F2406.01014.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FX-PLUG\u002FMobileAgent)\u003C\u002Fdiv> |\n\n---\n\n\n\n### 五月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-31\u003C\u002Fspan> | **Preemptive Answer \"Attacks\" on Chain-of-Thought Reasoning**\u003Cbr>\u003Csub>机构: Tsinghua University\u003Cbr>论文研究了预先答案对LLMs推理能力的负面影响，并提出了减轻其影响的策略。实验结果表明，这些策略不能完全抵消预先答案的影响，提示需要进一步增强CoT的鲁棒性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.20902v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.20902.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-31\u003C\u002Fspan> | **Transformers are SSMs: Generalized Models and Efficient Algorithms Through Structured State Space Duality**\u003Cbr>\u003Csub>机构: Princeton University, Carnegie Mellon University\u003Cbr>本论文展示了一个全新的状态空间对偶性（SSD）框架，连接了结构化的状态空间模型（SSMs）和注意力机制变体。论文的主要贡献包括将原本针对Transformers的算法和系统优化应用到SSMs上，以及开发了一种新的SSD算法，有效提高了模型训练和推理的效率。Mamba-2架构作为最终产品，实现了理想的性能表现，为未来的深度学习模型设计和优化提供了新的方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.21060v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.2106.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-30\u003C\u002Fspan> | **Jina CLIP: Your CLIP Model Is Also Your Text Retriever**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.20204v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.20204.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-30\u003C\u002Fspan> | **Similarity is Not All You Need: Endowing Retrieval Augmented Generation with Multi Layered Thoughts**\u003Cbr>\u003Csub>机构: Ant Group\u003Cbr>METRAG提出了一个新颖的检索增强生成框架，该框架通过实用性和紧凑性思维来解决现有模型的局限性，并在知识密集型任务中显示出更好的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.19893v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.19893.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-29\u003C\u002Fspan> | **MAP-Neo: Highly Capable and Transparent Bilingual Large Language Model Series**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.19327v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.19327.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-29\u003C\u002Fspan> | **LLMs achieve adult human performance on higher-order theory of mind tasks**\u003Cbr>\u003Csub>机构: Google Research, Google DeepMind, Johns Hopkins University Applied Physics Lab\u003Cbr>本论文展示了LLMs在高阶理论心智（ToM）任务上的性能，特别是证明了某些模型如GPT-4能够在某些任务上达到成人水平的表现。通过引入基于真实人类成人基准的新评测指标，本研究有助于揭示和理解LLMs在复杂社交互动中的潜力与限制。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.18870v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.1887.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-28\u003C\u002Fspan> | **RealitySummary: On-Demand Mixed Reality Document Enhancement using Large Language Models**\u003Cbr>\u003Csub>机构: University of Calgary\u003Cbr>此论文介绍了RealitySummary系统，它结合了大型语言模型和混合现实技术，提供了一个即时的阅读辅助工具，并且展现了这种技术在实际应用中的潜力和确立了未来研究的方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.18620v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.1862.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-23\u003C\u002Fspan> | **Towards Efficient LLM Grounding for Embodied Multi-Agent Collaboration**\u003Cbr>\u003Csub>机构: Tsinghua University, Northwestern Polytechnical University, Shanghai AI Laboratory\u003Cbr>本文针对多代理合作任务中LLMs的有效规划提出了ReAd框架，证明了其降低交互次数并提高成功率的能力，为LLMs在多代理系统中的应用奠定了基础。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.14314v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.14314.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-23\u003C\u002Fspan> | **PerLLM: Personalized Inference Scheduling with Edge-Cloud Collaboration for Diverse LLM Services**\u003Cbr>\u003Csub>机构: Institute of Computing Technology, Chinese Academy of Sciences, University of Chinese Academy of Sciences\u003Cbr>本论文提出了PerLLM框架，通过边缘-云协作来处理大量推理服务，不仅优化了服务调度和资源分配，还显著提高了吞吐量并降低了能源成本，具有突出的应用价值。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.14636v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.14636.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-23\u003C\u002Fspan> | **RefChecker: Reference-based Fine-grained Hallucination Checker and Benchmark for Large Language Models**\u003Cbr>\u003Csub>机构: Amazon AWS AI, Shanghai AI Lab, Shanghai Jiaotong University\u003Cbr>REFCHECKER是一个用于检测LLMs中细粒度幻觉并进行基准测试的框架。其通过使用claim-triplets，能在细粒度上检测并验证回应中的事实一致性，显著提高了检测的精度和与人类判断的一致性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.14486v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.14486.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Famazon-science\u002FRefChecker)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-23\u003C\u002Fspan> | **RaFe: Ranking Feedback Improves Query Rewriting for RAG**\u003Cbr>\u003Csub>机构: Zhejiang University, Alibaba Group, Nanjing University\u003Cbr>RaFe是一个新颖的查询重写框架，利用重排序器反馈来训练模型，无需注释，支持离线和在线反馈训练，具有良好的普适性和有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.14431v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.14431.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-23\u003C\u002Fspan> | **AGILE: A Novel Framework of LLM Agents**\u003Cbr>\u003Csub>机构: ByteDance Research, University of Science and Technology of China, Shanghai Jiao Tong University\u003Cbr>该论文提出了一个新型的LLM代理框架AGILE，它通过整合不同的组件，并采用强化学习来实现端到端的训练。该框架在复杂的问答任务中展现出较传统LLM独立使用更优的性能，并证明了组件整合和端到端优化的有效性。数据集和代码已公开发布，以促进相关领域的进一步研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.14751v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.14751.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-23\u003C\u002Fspan> | **Agent Planning with World Knowledge Model**\u003Cbr>\u003Csub>机构: Zhejiang University, Zhejiang University - Ant Group Joint Laboratory of Knowledge Graph, National University of Singapore, Alibaba Group\u003Cbr>本论文通过创建一个参数化的世界知识模型 (WKM)，来提升大型语言模型在执行交互式规划任务中的性能。这个模型使用了来自专家和探索性轨迹的知识，并通过在仿真环境中与多种强基准进行比较，验证了其有效性，并处理了生成幻视动作和盲目试错的问题。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.14205v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.14205.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fzjunlp\u002FWKM)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-23\u003C\u002Fspan> | **HippoRAG: Neurobiologically Inspired Long-Term Memory for Large Language Models**\u003Cbr>\u003Csub>机构: The Ohio State University, Stanford University\u003Cbr>HippoRAG是一个受人类记忆系统启发的新型检索框架，解决了传统LLMs在长期记忆和知识整合方面的不足。通过模拟人脑结构和运作机制，HippoRAG有效地提升了LLMs处理复杂知识整合任务的能力，并且在效率和性能上均超越现有方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.14831v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.14831.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FOSU-NLP-Group\u002FHippoRAG)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-21\u003C\u002Fspan> | **SmartFlow: Robotic Process Automation using LLMs**\u003Cbr>\u003Csub>机构: TCS Research\u003Cbr>SmartFlow是一个基于AI的RPA系统，它整合了深度学习的视觉理解与LLMs，能够自动生成导航工作流并自主执行用户指派的任务，展示了其在适应GUI变化和处理复杂任务上的高效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.12842v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.12842.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-21\u003C\u002Fspan> | **G-DIG: Towards Gradient-based DIverse and hiGh-quality Instruction Data Selection for Machine Translation**\u003Cbr>\u003Csub>机构: ByteDance Research\u003Cbr>该论文为解决LLMs在机器翻译中指令微调数据的多样性和质量问题，提出了基于梯度的数据选择方法G-DIG，通过实验验证了方法的有效性和泛化性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.12915v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.12915.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-20\u003C\u002Fspan> | **Multiple-Choice Questions are Efficient and Robust LLM Evaluators**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University\u003Cbr>该研究成功将常规的开放式生成问题转换为多项选择格式，以提高LLMs的评估效率和准确度。这一方法在防止无效答案的影响、提高评估效率方面取得了突破。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.11966v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.11966.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FGeralt-Targaryen\u002FMC-Evaluation)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-20\u003C\u002Fspan> | **xFinder: Robust and Pinpoint Answer Extraction for Large Language Models**\u003Cbr>\u003Csub>机构: Institute for Advanced Algorithms Research, Shanghai,Renmin University of China\u003Cbr>这篇文章的重点是提出一个名为xFinder的方法，旨在提高从LLMs输出中提取关键答案的准确度，解决了现有方法无法满足的领域需求，为LLMs评估提供了更可靠的方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.11874v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.11874.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FIAAR-Shanghai\u002FxFinder)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-20\u003C\u002Fspan> | **Octo: An Open-Source Generalist Robot Policy**\u003Cbr>\u003Csub>机构: UC Berkeley, Stanford\u003Cbr>论文介绍了Octo，这是一种基于变换器的策略，对多样化的机器人任务提供开源的解决方案，能通过微调适应新的观测和动作空间。它在多个机器人平台上表现出色，并通过完全开放的源码鼓励广泛应用和进一步发展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.12213v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.12213.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-20\u003C\u002Fspan> | **OpenRLHF: An Easy-to-use, Scalable and High-performance RLHF Framework**\u003Cbr>\u003Csub>机构: OpenLLMAI Team, ByteDance Inc., Netease Fuxi AI Lab\u003Cbr>OpenRLHF是一个开源框架，它使得在70亿以上参数模型上实现全尺度RLHF训练成为可能。它通过Ray分布式计算模型，并利用vLLM优化效率，同时实现了多种对齐算法，并与HuggingFace库无缝整合，从而提供即开即用的用户体验。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.11143v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.11143.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FOpenLLMAI\u002FOpenRLHF)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-19\u003C\u002Fspan> | **Your Transformer is Secretly Linear**\u003Cbr>\u003Csub>机构: AIRI, Skoltech, SberAI\u003Cbr>这项研究展示了变压器编码层之间可能存在高度的线性动态，这一发现推翻了变压器中线性和非线性操作的传统理解，并发现可以在不牺牲性能的情况下进行模型修改以提高效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.12250v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.1225.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-17\u003C\u002Fspan> | **Prompt Exploration with Prompt Regression**\u003Cbr>\u003Csub>机构: Carnegie Mellon University, Massachusetts Institute of Technology, University of Michigan\u003Cbr>本文提出了一种新的框架PEPR，用于预测LLMs中提示元素组合的影响，并选择最适用于特定任务的提示。该框架不仅提出了创新性的解决方案，还通过在多个数据集和任务上进行评估，展示了其有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.11083v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.11083.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-16\u003C\u002Fspan> | **SynthesizRR: Generating Diverse Datasets with Retrieval Augmentation**\u003Cbr>\u003Csub>机构: Amazon, The University of Texas at Austin\u003Cbr>SYNTHESIZRR是一种新方法，通过检索增强为教师-学生蒸馏的示例合成集成了获取信息。研究表明，与现有方法相比，SYNTHESIZRR生成的数据在内在数据多样性和下游任务准确性方面表现更佳。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.10040v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.1004.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-16\u003C\u002Fspan> | **MarkLLM: An Open-Source Toolkit for LLM Watermarking**\u003Cbr>\u003Csub>机构: Tsinghua University, Shanghai Jiao Tong University, The University of Sydney\u003Cbr>MARKLLM为研究人员和公众提供一个易于访问和使用的实验平台，旨在提高LLM水印技术的普及度和参与度，推动研究和应用进一步发展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.10051v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.10051.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FTHU-BPM\u002FMarkLLM)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-16\u003C\u002Fspan> | **SynthesizRR: Generating Diverse Datasets with Retrieval Augmentation**\u003Cbr>\u003Csub>机构: Amazon, The University of Texas at Austin\u003Cbr>SYNTHESIZRR通过检索增强解决了过去合成数据的多样性不足和与人类文本相异的问题，通过检索不同文档和内容，生成的样本具有更高的多样性和更接近人类文本的风格，这改善了蒸馏模型的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.10040v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.1004.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-16\u003C\u002Fspan> | **Listen Again and Choose the Right Answer: A New Paradigm for Automatic Speech Recognition with Large Language Models**\u003Cbr>\u003Csub>机构: Nanyang Technological University, University of Science and Technology of China, University of Aberdeen\u003Cbr>本论文成功提出并验证了结合多模态LLM的新ASR错误修正范式，不仅解决了源语音忽视和输入冗余的问题，还在实际应用中取得了显著效果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.10025v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.10025.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-16\u003C\u002Fspan> | **Thinking Fair and Slow: On the Efficacy of Structured Prompts for Debiasing Language Models**\u003Cbr>\u003Csub>机构: BITS Pilani, MDSR Labs, Adobe, IIT Guhawati, National University of Singapore\u003Cbr>这项研究开发并评估了一个针对端到端用户的迭代消偏框架，该框架提供了一种非训练型的消除LLMs偏见的方法。这种方法使用复杂的prompting策略在不减少下游任务性能的前提下显著降低了输出的平均偏见度，并为未来研究LLMs的prompt-based消偏方法铺平了道路。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.10431v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.10431.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-15\u003C\u002Fspan> | **ALPINE: Unveiling the Planning Capability of Autoregressive Learning in Language Models**\u003Cbr>\u003Csub>机构: Microsoft Research Asia, Harvard University, Peking University\u003Cbr>ALPINE项目考察了自回归学习如何使Transformer具备网络中的规划能力，并揭示了在执行路径寻找任务中Transformer的表现能力及其局限性，为我们理解大型语言模型在其他相关领域的一般规划能力提供了新见解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.09220v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.0922.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-15\u003C\u002Fspan> | **LoRA Learns Less and Forgets Less**\u003Cbr>\u003Csub>机构: Columbia University, Databricks\u003Cbr>LoRA虽然在目标任务的学习效率和精确度方面通常不如全参数微调，但在保持源任务性能方面展现了更好的表现和更强的正则化能力。根据本文研究，对使用LoRA做微调时的最佳实践做出了建议，尤其注意到学习率、目标模块选择和扰动的秩。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.09673v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.09673.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-14\u003C\u002Fspan> | **Is the Pope Catholic? Yes, the Pope is Catholic. Generative Evaluation of Intent Resolution in LLMs**\u003Cbr>\u003Csub>机构: Carnegie Mellon University, Allen Institute for AI  \u003Cbr>本研究通过引入一个全新的生成性评估框架，探索了LLMs在理解和生成与意图对齐的回应方面的潜力和挑战，揭示了当前模型在语用理解方面的不足，并指出了未来提升方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.08760v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.0876.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-13\u003C\u002Fspan> | **RLHF Workflow: From Reward Modeling to Online RLHF**\u003Cbr>\u003Csub>机构: Salesforce AI Research, University of Illinois Urbana-Champaign  \u003Cbr>本文提出了一个完整的在线迭代 RLHF 工作流程，不仅理论上创新，还通过详细的实践实现指南提供了实际应用的框架。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.07863v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.07863.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FRLHFlow\u002FRLHF-Reward-Modeling)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-13\u003C\u002Fspan> | **DoLLM: How Large Language Models Understanding Network Flow Data to Detect Carpet Bombing DDoS**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.07638v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.07638.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-10\u003C\u002Fspan> | **Mitigating Hallucinations in Large Language Models via Self-Refinement-Enhanced Knowledge Retrieval**\u003Cbr>\u003Csub>机构: Imperial College London, Huawei\u003Cbr>这项工作通过一个新的自我完善增强的知识图谱检索方法有效地减少了大型语言模型中的幻觉现象，尤其提高了在医疗领域中的应用实效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.06545v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.06545.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-10\u003C\u002Fspan> | **UniDM: A Unified Framework for Data Manipulation with Large Language Models**\u003Cbr>\u003Csub>机构: Alibaba Group, University of Science and Technology of China\u003Cbr>UniDM是一个创新的统一数据操作框架，通过有效的提示设计与步骤分解，显著提高了处理多种数据任务的效率和质量。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.06510v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.0651.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-10\u003C\u002Fspan> | **Automatic Generation of Model and Data Cards: A Step Towards Responsible AI**\u003Cbr>\u003Csub>机构: CMU, MPI, ETH Zürich\u003Cbr>论文成功开发了一种使用大型语言模型自动化生成机器学习模型卡片和数据卡片的方法，并通过创建相应的数据集和评估机制，显著提升了生成文档的质量和标准化。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.06258v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.06258.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-10\u003C\u002Fspan> | **A Survey on RAG Meets LLMs: Towards Retrieval-Augmented Large Language Models**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.06211v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.06211.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-10\u003C\u002Fspan> | **Value Augmented Sampling for Language Model Alignment and Personalization**\u003Cbr>\u003Csub>VAS为LLM的适配和个性化提供了一个高效且强大的方法。它克服了现有RL算法的不稳定性，实现了高性能和计算效率的双重优势，同时支持黑盒模型的适应，为未来的LLM个性化和对齐开辟了新的可能性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.06639v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.06639.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-09\u003C\u002Fspan> | **LLMPot: Automated LLM-based Industrial Protocol and Physical Process Emulation for ICS Honeypots**\u003Cbr>\u003Csub>机构: New York University Abu Dhabi  \u003Cbr>LLMPot是一种创新的ICS网络安全防御工具，其利用LLM的能力，通过自动化生成与协议和物理过程紧密相关的响应，显著提高了蜜罐的实用性和效果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.05999v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.05999.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-09\u003C\u002Fspan> | **Exploring the Potential of Human-LLM Synergy in Advancing Qualitative Analysis: A Case Study on Mental-Illness Stigma**\u003Cbr>\u003Csub>CHALET方法框架展示了人类-LLM 协作在定性研究中的巨大潜力，特别是在深化理解和洞见生成方面，为未来的HCI和定性分析研究提供了新方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.05758v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.05758.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-09\u003C\u002Fspan> | **An Automatic Prompt Generation System for Tabular Data Tasks**\u003Cbr>\u003Csub>本论文成功开发了一个既适应多种LLMs又无需广泛训练的自动提示生成系统，通过两种创新方法显著提高了处理表格数据任务的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.05618v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.05618.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-09\u003C\u002Fspan> | **Can large language models understand uncommon meanings of common words?**\u003Cbr>\u003Csub>机构: Tsinghua University, Chinese Academy of Science\u003Cbr>本研究通过建立新的评估体系和数据集，揭示了大型语言模型在理解常见词汇的罕见含义方面存在的重大不足，为提高模型的NLU能力提供了新的研究方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.05741v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.05741.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-08\u003C\u002Fspan> | **\"They are uncultured\": Unveiling Covert Harms and Social Threats in LLM Generated Conversations**\u003Cbr>\u003Csub>机构: University of Washington, MBZUAI\u003Cbr>这项研究通过创新的CHAST评估体系，揭示了LLMs在处理涵盖广泛文化和身份的复杂社会互动中可能导致的潜在伤害，强调了在部署这些模型之前进行彻底的偏见审计的必要性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.05378v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.05378.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-08\u003C\u002Fspan> | **Air Gap: Protecting Privacy-Conscious Conversational Agents**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.05175v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.05175.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-08\u003C\u002Fspan> | **ADELIE: Aligning Large Language Models on Information Extraction**\u003Cbr>\u003Csub>机构: Tsinghua University\u003Cbr>本文提出的ADELIE模型有效地解决了LLM在信息提取任务中的对齐问题，并通过创新的数据集和训练方法提升了模型在这些任务上的性能，同时维护了良好的通用能力，为未来相关研究提供了有价值的见解和基础。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.05008v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.05008.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-07\u003C\u002Fspan> | **QServe: W4A8KV4 Quantization and System Co-design for Efficient LLM Serving**\u003Cbr>\u003Csub>机构: MIT, NVIDIA\u003Cbr>通过新的量化算法和系统设计，QServe显著提升了LLM在GPU上的服务效率，实现了成本的大幅度降低，为大规模语言模型的部署提供了新的解决方案。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.04532v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.04532.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fmit-han-lab\u002Fqserve)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-07\u003C\u002Fspan> | **Deception in Reinforced Autonomous Agents: The Unconventional Rabbit Hat Trick in Legislation**\u003Cbr>\u003Csub>机构: Center for Responsible AI, IIT Madras, Princeton University  \u003Cbr>论文有效地展示了使用大型语言模型的自治代理在目标导向环境中执行复杂任务（如立法游说）时的欺骗能力，并提出了检测这种欺骗行为的有效方法。这些发现为AI在法律和道德方面的应用提供了重要的见解，同时也为AI安全提供了新的研究方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.04325v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.04325.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-07\u003C\u002Fspan> | **Knowledge Adaptation from Large Language Model to Recommendation for Practical Industrial Application**\u003Cbr>\u003Csub>机构: Kuaishou Technology, Southeast University\u003Cbr>本论文成功地将大型语言模型的开放世界知识应用于推荐系统，通过一个创新的双塔结构解决了实际应用中的核心挑战，为提升推荐系统的性能提供了新的思路。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.03988v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.03988.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-07\u003C\u002Fspan> | **Toward In-Context Teaching: Adapting Examples to Students' Misconceptions**\u003Cbr>\u003Csub>机构: MIT CSAIL  \u003Cbr>本论文成功展示了利用大型语言模型进行适应性教学的潜力，并通过ATOM模型实现了对学生误解的有效识别和教学反馈的优化。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.04495v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.04495.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-06\u003C\u002Fspan> | **Lifelong Knowledge Editing for LLMs with Retrieval-Augmented Continuous Prompt Learning**\u003Cbr>\u003Csub>机构: East China Normal University\u003Cbr>RECIPE方法通过转换知识陈述为连续提示符并结合知识哨兵来动态管理检索过程，有效提高了LLMs在生命周期学习场景中的编辑效率和推断速度，同时保持了模型整体性能。这种方法克服了以前方法的缺点，并在多个评估指标中表现出色。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.03279v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.03279.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-06\u003C\u002Fspan> | **MARE: Multi-Agents Collaboration Framework for Requirements Engineering**\u003Cbr>\u003Csub>机构: Peking University\u003Cbr>这项研究提出了一个创新的多代理合作框架，MARE，用于在整个需求工程过程中利用大型语言模型（LLMs）之间的合作。它针对RE中自动化任务的局限性进行了改进，并通过大规模实验的评估显示，MARE在需求建模和规格生成方面优于现有的先进方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.03256v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.03256.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-03\u003C\u002Fspan> | **What matters when building vision-language models?**\u003Cbr>\u003Csub>机构: Hugging Face, Sorbonne Université  \u003Cbr>本文通过广泛的实验探讨了影响VLMs性能的关键设计选择，提出了Idefics2这一高效的基础视觉语言模型，并在多个标准测试中证明了其优越性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.02246v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.02246.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-02\u003C\u002Fspan> | **Prometheus 2: An Open Source Language Model Specialized in Evaluating Other Language Models**\u003Cbr>\u003Csub>机构: KAIST AI, LG AI Research, Carnegie Mellon University\u003Cbr>PROMETHEUS 2是一个新型的开源评估LM，能在直接评估和成对排名两种格式下工作，并且在自定义评价标准上与人类评分和专有LMs的判断密切相关。该模型采用权重合并的方式训练，性能显著超过其他开源模型和某些专有模型。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.01535v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.01535.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fprometheus-eval\u002Fprometheus-eval)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-02\u003C\u002Fspan> | **How Can I Get It Right? Using GPT to Rephrase Incorrect Trainee Responses**\u003Cbr>\u003Csub>机构: Carnegie Mellon University\u003Cbr>该论文研究了利用GPT-4构建一个自动化反馈系统来帮助一对一节课中导师的训练，旨在减轻传统提供个性化教学反馈的资源负担，同时提供高质量和具体性的反馈，是知识检索与评估类的研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.00970v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.0097.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-01\u003C\u002Fspan> | **Is Bigger Edit Batch Size Always Better? -- An Empirical Study on Model Editing with Llama-3**\u003Cbr>\u003Csub>本研究对于大型语言模型编辑技术进行了实证分析，揭示了以往方法的潜在不足，并为未来的模型编辑方法提出了新方向和思路。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.00664v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.00664.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-01\u003C\u002Fspan> | **\"I'm Not Sure, But...\": Examining the Impact of Large Language Models' Uncertainty Expression on User Reliance and Trust**\u003Cbr>\u003Csub>机构: Princeton University, Microsoft\u003Cbr>该论文通过大规模实验研究表明，LLMs通过自然语言来表达不确定性，可以减少用户的过度依赖，并提高任务处理的准确度。尤其是第一人称表达形式对提高用户的准确性效果显著。此外，这项研究还强调在实际应用LLMs之前，进行用户测试以调整不确定性的表达方式的重要性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.00623v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.00623.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-01\u003C\u002Fspan> | **The Real, the Better: Aligning Large Language Models with Online Human Behaviors**\u003Cbr>\u003Csub>机构: Baidu Inc.\u003Cbr>本文提出了一种新型的大型语言模型对齐框架RLHB，它通过利用真实线上人类行为创新性地对LLMs进行调整和优化，克服了现有方法中的局限性，并通过实验有效地验证了其方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.00578v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.00578.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-01\u003C\u002Fspan> | **A Careful Examination of Large Language Model Performance on Grade School Arithmetic**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.00332v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.00332.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-01\u003C\u002Fspan> | **Can a Hallucinating Model help in Reducing Human \"Hallucination\"?**\u003Cbr>\u003Csub>机构: Stanford University, UC Berkeley\u003Cbr>本文探讨了如何使用大型语言模型（LLMs）来检测和对抗无根据信念，以及利用LLMs作为个性化的错误信息驳斥代理。研究者提出了评估并利用LLMs在识别逻辑陷阱方面的能力，并挑战人类无根据信念的新方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.00843v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-05\u002F2405.00843.md)  |\n\n---\n\n\n\n### 四月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-30\u003C\u002Fspan> | **Better & Faster Large Language Models via Multi-token Prediction**\u003Cbr>\u003Csub>机构: FAIR at Meta\u003Cbr>论文提出了一种新的训练大型语言模型的方法，通过预测多个标记而不是单个来提高样本效率，并展示了如何提升生成任务中的性能并加快推理速度。实验证明了这种方法在提升大型模型性能和推理效率方面的显著优势。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.19737v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.19737.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-30\u003C\u002Fspan> | **Multi-hop Question Answering over Knowledge Graphs using Large Language Models**\u003Cbr>\u003Csub>机构: Microsoft\u003Cbr>论文在多跳问答任务中提出针对不同的知识图谱数据集采用不同策略，展示了利用大型预训练语言模型在这些复杂问答任务中的强大能力。通过实验，验证了所提方法相比现有技术的优势。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.19234v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.19234.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-30\u003C\u002Fspan> | **Do Large Language Models Understand Conversational Implicature -- A case study with a chinese sitcom**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University\u003Cbr>该研究通过创建一个新的中文多轮对话数据集SwordsmanImp评估LLMs理解言外之意的能力，特别是在涉及大量上下文和轮换的对话中，并揭示了LLMs在理解和解释非字面含义时的挑战和局限。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.19509v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.19509.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fsjtu-compling\u002Fllm-pragmatics)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-30\u003C\u002Fspan> | **Iterative Reasoning Preference Optimization**\u003Cbr>\u003Csub>机构: FAIR at Meta, New York University\u003Cbr>本文提出了一种迭代推理偏好优化方法，通过在推理任务上应用偏好优化，特别是针对CoT推理，并通过在迭代训练中引入NLL损失项来提升模型性能。实验证明，该方法在数次迭代后能够有效提升推理性能，最终达到性能饱和。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.19733v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.19733.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-29\u003C\u002Fspan> | **Replacing Judges with Juries: Evaluating LLM Generations with a Panel of Diverse Models**\u003Cbr>\u003Csub>机构: Cohere\u003Cbr>该论文发展了一种以成员来自不同模型家族的小型模型组织成的“评审团”来评估LLM生成物的新方法，称为PoLL，显示出在不同任务中的适用性以及成本效率，减少了LLMs作为评判时存在的偏见问题。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.18796v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.18796.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-29\u003C\u002Fspan> | **LoRA Land: 310 Fine-tuned LLMs that Rival GPT-4, A Technical Report**\u003Cbr>\u003Csub>机构: Predibase\u003Cbr>本文提出通过LoRA对大型语言模型进行细化，可以明显提升模型的整体表现，降低在分类任务中出现的误差，且与开箱即用的GPT-4和GPT-3.5相比，有显著提高。同时，论文还考虑了成本限制，通过限制评估样本的数量来降低使用LLM API的财务负担。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2405.00732v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2405.00732.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-26\u003C\u002Fspan> | **When to Trust LLMs: Aligning Confidence with Response Quality**\u003Cbr>\u003Csub>机构: Alibaba Group\u003Cbr>本文提出了一个通过强化学习对齐信心和回答质量的方法（CONQORD）。该方法在没有客观实际标准的情况下通过自我评估来优化信心水平，并能够减少偏见，提升了模型预测的准确性和对齐性，但仍需对比绩效更高的方法进行改进。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.17287v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.17287.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-26\u003C\u002Fspan> | **A Comprehensive Evaluation on Event Reasoning of Large Language Models**\u003Cbr>\u003Csub>机构: Peking University, Advanced Institute of Big Data, Beihang University\u003Cbr>本文通过引入一个名为EV2的新基准测试来全面评估大型语言模型（LLMs）的事件推理能力。实验结果表明，虽然LLMs拥有事件推理能力，但与人类在运用事件模式知识方面并不一致，通过提供明确的指导，可以帮助模型更好地理解和执行事件推理任务。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.17513v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.17513.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-25\u003C\u002Fspan> | **Continual Learning of Large Language Models: A Comprehensive Survey**\u003Cbr>\u003Csub>机构: Rutgers University, Wuhan University, Huazhong University of Science and Technology\u003Cbr>本综述为LLMs的持续学习提供了一个全面的视角，特别强调了连续预训练（CPT）和领域自适应预训练（DAP）的研究领域。强调社区需更多关注，特别是开发实用、易于获取且广泛认可的评估基准方面，以及需要针对新兴LLMs学习范式特别设计的方法论。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.16789v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.16789.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FWang-ML-Lab\u002Fllm-continual-learning-survey)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-25\u003C\u002Fspan> | **How Far Are We to GPT-4V? Closing the Gap to Commercial Multimodal Models with Open-Source Suites**\u003Cbr>\u003Csub>机构: Shanghai AI Laboratory, SenseTime Research, Tsinghua University\u003Cbr>InternVL 1.5是一个强大的开源多模态语言模型，致力于弥补开源和商业模型在多模态理解方面的性能差距。该模型的优势包括改善视觉理解、处理动态高分辨率图像以及高质量的双语数据集的使用，这些它在多项任务中表现出色。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.16821v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.16821.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FOpenGVLab\u002FInternVL)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-25\u003C\u002Fspan> | **Hippocrates: An Open-Source Framework for Advancing Large Language Models in Healthcare**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.16621v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.16621.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-25\u003C\u002Fspan> | **Layer Skip: Enabling Early Exit Inference and Self-Speculative Decoding**\u003Cbr>\u003Csub>机构: Meta, University of Toronto, Carnegie Mellon University\u003Cbr>LayerSkip是一个新颖的端到端解决方案，能够在不牺牲准确率的情况下显著加速大型语言模型的推理过程，具有实际应用价值和潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.16710v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.1671.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-24\u003C\u002Fspan> | **From Local to Global: A Graph RAG Approach to Query-Focused Summarization**\u003Cbr>\u003Csub>机构: Microsoft Research, Microsoft Strategic Missions and Technologies, Microsoft Office of the CTO\u003Cbr>这篇论文提出了Graph RAG方法，这是一种以图谱索引和LLM生成摘要为基础的查询聚焦摘要技术，旨在处理因语料量过大而超出大型语言模型处理能力的问题。通过社区检测算法的帮助，该方法能在处理全局性问题并实现大规模文本分析方面取得显著成效。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.16130v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.1613.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-24\u003C\u002Fspan> | **Beyond Chain-of-Thought: A Survey of Chain-of-X Paradigms for LLMs**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University, UC San Diego, Duke University\u003Cbr>本文章是对大型语言模型（LLMs）中Chain-of-X (CoX) 方法的详尽调研，着重于将Chain-of-Thought (CoT) 的概念扩展至更广泛的应用，并为未来的研究提供了潜在的发展方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.15676v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.15676.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-23\u003C\u002Fspan> | **A Survey of Large Language Models on Generative Graph Analytics: Query, Learning, and Applications**\u003Cbr>\u003Csub>机构: Hong Kong Baptist University\u003Cbr>本文是一个综述性研究，主要调查了在图数据上使用的LLMs研究，探讨了LLMs在图任务泛化方面的优势，并提出了在该领域进行研究的未来方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.14809v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.14809.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-23\u003C\u002Fspan> | **CultureBank: An Online Community-Driven Knowledge Base Towards Culturally Aware Language Technologies**\u003Cbr>\u003Csub>机构: Stanford University, IBM Research\u003Cbr>该论文提出了一个用于构建文化知识库的通用流水线，并使用该流水线创建了CultureBank，这是一个包含TikTok和Reddit上文化描述符的知识库。论文还通过这个知识库评估了LLMs在文化意识方面的表现，并用于训练更具文化意识的语言模型，以此促进未来语言技术的文化意识发展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.15238v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.15238.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FSALT-NLP\u002FCultureBank)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-22\u003C\u002Fspan> | **Beyond Scaling: Predicting Patent Approval with Domain-specific Fine-grained Claim Dependency Graph**\u003Cbr>\u003Csub>机构: University of California San Diego, Carnegie Mellon University, University of Pennsylvania\u003Cbr>研究者提出了一种新颖的用于构建细粒度主张依赖图(FLAN图)的算法，该算法在大规模上显著改善了现状，并对现代LLMs在专利批准预测上的应用进行了广泛实验和分析，发现了LLMs的局限性，并为未来LLM方案的开发提供了有价值的参考。源代码和数据集已公开发布以促进未来的研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.14372v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.14372.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-22\u003C\u002Fspan> | **A Survey on Efficient Inference for Large Language Models**\u003Cbr>\u003Csub>机构: Tsinghua University\u003Cbr>本文提供了一个全面的综述关于提高大型语言模型推理效率的文献，并提出了一个包含数据层、模型层和系统层优化的分类法。同时，通过实验对关键技术进行了量化比较，指出了研究的未来方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.14294v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.14294.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-22\u003C\u002Fspan> | **A Survey on Self-Evolution of Large Language Models**\u003Cbr>\u003Csub>机构: Peking University, Alibaba Group, Nanyang Technological University\u003Cbr>这篇综述文章提出并总结了LLMs的自我进化方法，为推动自我进化的研究提供了概念框架和未来方向的见解，旨在推动下一代自我进化LLMs的发展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.14387v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.14387.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-22\u003C\u002Fspan> | **SnapKV: LLM Knows What You are Looking for Before Generation**\u003Cbr>\u003Csub>机构: University of Illinois Urbana-Champaign, Cohere, Princeton University\u003Cbr>该文章介绍了SnapKV，一种针对大型语言模型中关键值缓存问题的新方法。SnapKV通过智能压缩和选取重要的KV位置，有效地提升了长文本处理时的解码速度和内存效率，并在保持准确性的同时显著降低了计算成本。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.14469v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.14469.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-22\u003C\u002Fspan> | **Tree of Reviews: A Tree-based Dynamic Iterative Retrieval Framework for Multi-hop Question Answering**\u003Cbr>\u003Csub>机构: Tencent Inc., Harbin Institute of Technology\u003Cbr>论文提出了一种新的迭代检索框架TOR，它采用树形结构减少错误累积，并引入优化策略提高检索效率和质量。在实验中，TOR框架在多个数据集上达到了最先进的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.14464v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.14464.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-22\u003C\u002Fspan> | **LLMs Know What They Need: Leveraging a Missing Information Guided Framework to Empower Retrieval-Augmented Generation**\u003Cbr>\u003Csub>机构: Meituan\u003Cbr>本文提出的MIGRES框架是通过Exploiting LLMs识别缺失信息的能力来增强RAG的能力。研究结果证明了MIGRES在多个公共数据集上具有优越性，应对了RAG在理解复杂查询和检索相关文档方面的挑战。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.14043v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.14043.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-22\u003C\u002Fspan> | **Information Re-Organization Improves Reasoning in Large Language Models**\u003Cbr>\u003Csub>机构: Zhejiang University\u003Cbr>本论文提出了一个新颖的信息重组方法（InfoRE），通过重组上下文内容来揭示逻辑关系，从而增强LLMs的推理能力。方法在零次射击设置下对LLMs进行上下文理解的多跳推理任务测试，取得了显著效果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.13985v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.13985.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fhustcxx\u002FInfoRE)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-21\u003C\u002Fspan> | **AdvPrompter: Fast Adaptive Adversarial Prompting for LLMs**\u003Cbr>\u003Csub>机构: Meta AI (FAIR), Max-Planck-Institute for Intelligent Systems\u003Cbr>本文提出了一个新型的LLM，名为AdvPrompter，它利用新颖的算法，无需目标LLM的梯度信息，迅速生成人类可读的敌对提示，显著提升了生成速度并保持了提示的语义连贯性。此外，通过AdvPrompter的训练还能增强LLM面对越狱攻击的稳健性，而不牺牲性能表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.16873v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.16873.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-19\u003C\u002Fspan> | **Relevant or Random: Can LLMs Truly Perform Analogical Reasoning?**\u003Cbr>\u003Csub>机构: Nanyang Technological University, Princeton University, Salesforce Research\u003Cbr>本论文系统地评估了LLMs进行类比推理的能力，并提出了两种可以在显著降低推理成本的同时获得更好性能的方法。研究结果表明，与以前认为相关性至关重要的观点相反，自我生成的无关例子在某些任务上可以达到相当甚至更好的性能。希望本研究能刺激更多关于自我生成上下文设计的进一步研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.12728v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.12728.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-19\u003C\u002Fspan> | **LLM-R2: A Large Language Model Enhanced Rule-based Rewrite System for Boosting Query Efficiency**\u003Cbr>\u003Csub>机构: Nanyang Technological University, DAMO Academy Alibaba Group, Singapore University of Technology and Design\u003Cbr>LLM-R2是一种利用大型语言模型增强的查询重写系统，通过自动选择一组给定重写规则中的有效规则，有效地提升了查询重写的执行效率，解决了目前其他方法的局限性，并在多个数据集上取得了优越的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.12872v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.12872.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-18\u003C\u002Fspan> | **mABC: multi-Agent Blockchain-Inspired Collaboration for root cause analysis in micro-services architecture**\u003Cbr>\u003Csub>机构:  Beihang University, Beijing Information Science and Technology University\u003Cbr>mABC是一种创新的框架，利用了大语言模型（LLMs）及多代理合作，并由区块链启发式的决策过程促成，针对云原生技术中微服务架构的根本原因分析（RCA）。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.12135v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.12135.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-18\u003C\u002Fspan> | **RAGCache: Efficient Knowledge Caching for Retrieval-Augmented Generation**\u003Cbr>\u003Csub>机构: Peking University, ByteDance Inc.\u003Cbr>通过针对性的缓存系统设计和中间状态共享，RAGCache优化了RAG流程的性能，显著提升了处理速度并减少了计算资源的开销。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.12457v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.12457.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-18\u003C\u002Fspan> | **Generating Diverse Criteria On-the-Fly to Improve Point-wise LLM Rankers**\u003Cbr>\u003Csub>机构: Westlake University, Alibaba Group, Zhejiang University\u003Cbr>该论文提出了MCRanker模型，通过构建虚拟专业评注团队和生成多角度评估标准，有效提升了LLM排序器的一致性与全面性，可广泛适应于各类数据集，改进了排序性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.11960v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.1196.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-18\u003C\u002Fspan> | **EVIT: Event-Oriented Instruction Tuning for Event Reasoning**\u003Cbr>\u003Csub>机构: Key Laboratory of High Confidence Software Technologies (PKU), MOE, China, School of Computer Science, Peking University, Advanced Institute of Big Data\u003Cbr>EVIT通过提出面向事件的指令调谐（Event-Oriented Instruction Tuning）和事件四元组的概念，解决了现有小型基于指令调谐模型在事件推理任务中的表现不足问题。实验结果表明，EVIT在事件推理任务上的表现优于其他模型。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.11978v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.11978.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-18\u003C\u002Fspan> | **Toward Self-Improvement of LLMs via Imagination, Searching, and Criticizing**\u003Cbr>\u003Csub>该论文介绍了一种名为ALPHALLM的新型框架，通过蒙特卡洛树搜索（MCTS）和大型语言模型（LLMs）的结合，实现了LLMs的自我提高，无需额外的注解数据。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.12253v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.12253.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-18\u003C\u002Fspan> | **Who Validates the Validators? Aligning LLM-Assisted Evaluation of LLM Outputs with Human Preferences**\u003Cbr>\u003Csub>机构: UC Berkeley\u003Cbr>这篇论文提出了一个与人类偏好相一致的LLM辅助评估界面EvalGen，通过混合主动式方法解决了LLM生成的评估功能评估质量受信任度的问题。论文还探讨了用户如何定义和使用评估标准的动态性，以及在实际应用中所面临的挑战。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.12272v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.12272.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-17\u003C\u002Fspan> | **AgentKit: Flow Engineering with Graphs, not Coding**\u003Cbr>\u003Csub>机构: Carnegie Mellon University, NVIDIA, Microsoft\u003Cbr>论文引入了一种新型的 LLM 提示框架 AgentKit，针对多功能代理问题，通过模块化组件和直观设计支持构建和微调复杂的代理思维过程。AgentKit 显示出实现先进代理能力和降低用户参与门槛的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.11483v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.11483.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fholmeswww\u002FAgentKit)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-17\u003C\u002Fspan> | **Unifying Bias and Unfairness in Information Retrieval: A Survey of Challenges and Opportunities with Large Language Models**\u003Cbr>\u003Csub>机构: Renmin University of China, Chinese Academy of Sciences, Huawei Technologies\u003Cbr>这篇综述文章提供了一个新颖的视角来理解LLMs和IR系统中的偏见和不公平为分布失配问题，并归类了各种缓解策略。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.11457v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.11457.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FKID-22\u002FLLM-IR-Bias-Fairness-Survey)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-17\u003C\u002Fspan> | **A Deep Dive into Large Language Models for Automated Bug Localization and Repair**\u003Cbr>\u003Csub>机构: University of Virginia, Purdue University, Amazon Web Services\u003Cbr>这篇论文提出了一种名为Toggle的新方法，该方法使用token粒度的bug定位并修复，克服了现有行粒度方法的局限，通过输入设计和LLMs的微调，大幅提升了错误修复的准确性，并在多个数据集上取得优异的表现，为APR领域带来新的进展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.11595v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.11595.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-17\u003C\u002Fspan> | **Many-Shot In-Context Learning**\u003Cbr>\u003Csub>机构: Google DeepMind\u003Cbr>本论文主要贡献包括系统评估LLM在不同规模上下文样例的性能，导入reinforced ICL和unsupervised ICL以减少样例依赖，并发现MS-ICL可以克服预训练偏差学习高维数值预测任务。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.11018v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.11018.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-16\u003C\u002Fspan> | **How faithful are RAG models? Quantifying the tug-of-war between RAG and LLMs' internal prior**\u003Cbr>\u003Csub>机构: Stanford University\u003Cbr>论文通过分析在RAG环境下LLMs内部知识与检索信息之间的张力，发现了LLMs倾向于遵循RAG信息的程度与模型在无上下文情况下的回答信心成反比。研究基于跨超过1200个问题的六个领域数据集，揭示了在模型的预训练知识与检索到的信息之间的固有冲突。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.10198v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.10198.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-16\u003C\u002Fspan> | **CoTAR: Chain-of-Thought Attribution Reasoning with Multi-level Granularity**\u003Cbr>\u003Csub>机构: Intel Labs\u003Cbr>本文提出的CoTAR方法针对LLMs在问答任务中倾向于生成不准确归因的问题。通过在输出生成前进行推理，并在不同的归因粒度级别上引导模型，显著提升了模型在答案质量和归因精确度上的表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.10513v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.10513.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-16\u003C\u002Fspan> | **Self-playing Adversarial Language Game Enhances LLM Reasoning**\u003Cbr>\u003Csub>机构: Tencent AI Lab\u003Cbr>本论文提出了一个名为SPAG的新型训练方案，通过自我对抗性语言游戏的自我播放，有效提升了LLMs的推理能力，并且其改进是可以通过迭代过程持续增强的。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.10642v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.10642.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FLinear95\u002FSPAG)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-15\u003C\u002Fspan> | **Learn Your Reference Model for Real Good Alignment**\u003Cbr>\u003Csub>机构: Tinkoff\u003Cbr>本论文提出了一个名为Trust Region DPO (TR-DPO) 的新方法，该方法通过交互式地更新参考策略的参数，显著改进了语言模型的对齐问题。实验结果显示，TR-DPO在两个数据集上均优于DPO方法，有效提升了模型的多参数性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.09656v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.09656.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-15\u003C\u002Fspan> | **Compression Represents Intelligence Linearly**\u003Cbr>\u003Csub>机构: The Hong Kong University of Science and Technology, Tencent\u003Cbr>这篇论文通过实证研究，证明了LLMs在下游任务性能与它们的压缩效率之间存在着几乎线性的相关性，为“更好的压缩能力表明了更高的智能”这一长期信念提供了支持。同时，提出了使用压缩效率作为评估LLMs性能的无监督度量标准的建议。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.09937v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.09937.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-14\u003C\u002Fspan> | **Emerging Platforms Meet Emerging LLMs: A Year-Long Journey of Top-Down Development**\u003Cbr>\u003Csub>本论文的研究主要集中在如何支持和优化新兴计算平台下的机器学习模型部署，并提出了一个框架TAPML，旨在通过顶层方法和通用运行时环境促进模型部署的广泛性、便利性和强大性，文中提供了实际部署案例作为发展ML系统的深入见解和最佳实践。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.09151v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.09151.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-13\u003C\u002Fspan> | **Intuition-aware Mixture-of-Rank-1-Experts for Parameter Efficient Finetuning**\u003Cbr>\u003Csub>机构: Nanjing University, University of California\u003Cbr>论文提出了一个新的用于大型语言模型多任务微调的框架Intuition-MoR1E，该框架借鉴人类认知神经科学原理，并利用排名1专家形式来管理直觉，显著提高了参数效率和多任务微调效果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.08985v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.08985.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-12\u003C\u002Fspan> | **Megalodon: Efficient LLM Pretraining and Inference with Unlimited Context Length**\u003Cbr>\u003Csub>机构: AI at Meta, University of Southern California, Carnegie Mellon University\u003Cbr>这篇论文介绍了MEGALODON，一个高效处理无限上下文长度序列的神经网络架构。通过引入多项创新技术，MEGALODON在长序列模型任务中显示出比Transformer更高的效率和效能，同时在不同规模和模态的基准测试中都取得了稳健的改进。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.08801v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.08801.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FXuezheMax\u002Fmegalodon)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-11\u003C\u002Fspan> | **Rho-1: Not All Tokens Are What You Need**\u003Cbr>\u003Csub>机构: Xiamen University, Tsinghua University, Microsoft\u003Cbr>本文提出了RHO-1，这是一种利用选择性语言建模（SLM）的新型语言模型。该模型在预训练中专注于对有用的令牌进行训练，这种方法在数学领域的连续预训练中显示出卓越性能，能够更快地达到基线性能，并且在少量令牌的情况下达到最新的状态。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.07965v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.07965.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-11\u003C\u002Fspan> | **Interactive Prompt Debugging with Sequence Salience**\u003Cbr>\u003Csub>这篇论文提出了一个名为序列显著性（Sequence Salience）的系统，它扩展了现有的输入显著性（IS）方法，以支持复杂的LLM提示调试。该工具提供实时交互式调试，并降低了实践者的认知负荷，支持根据显著性结果快速迭代提示，与开发者的思维模型更加对齐。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.07498v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.07498.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-11\u003C\u002Fspan> | **Decomposing Label Space, Format and Discrimination: Rethinking How LLMs Respond and Solve Tasks via In-Context Learning**\u003Cbr>\u003Csub>机构: Nanyang Technological University\u003Cbr>本文研究了ICL在提升任务性能方面的生效机制，通过分解ICL的贡献因素，发现ICL通过精细调整标签空间和格式来显著提升性能，同时强调了选择合适演示示例的重要性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.07546v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.07546.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-11\u003C\u002Fspan> | **ControlNet++: Improving Conditional Controls with Efficient Consistency Feedback**\u003Cbr>\u003Csub>机构: University of Central Florida, ByteDance Inc\u003Cbr>ControlNet++通过优化生成图像与条件控制之间的像素级一致性，并通过高效的奖励微调策略减少了与图像采样相关的时间和内存成本，显著改善了在多种条件控制下的可控性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.07987v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.07987.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-11\u003C\u002Fspan> | **ChatGPT Can Predict the Future when it Tells Stories Set in the Future About the Past**\u003Cbr>\u003Csub>机构: Baylor University\u003Cbr>本研究通过分析ChatGPT-3.5和ChatGPT-4的预测能力，揭示了LLMs在推理方面的新潜力。研究证明了“未来叙事”提示能够显著提升预测的准确性，为LLMs在分析环境中的潜在应用提供了有益见解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.07396v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.07396.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-11\u003C\u002Fspan> | **OSWorld: Benchmarking Multimodal Agents for Open-Ended Tasks in Real Computer Environments**\u003Cbr>\u003Csub>机构: The University of Hong Kong, CMU, Salesforce Research\u003Cbr>OSWORLD提供了一个新的评估环境，解决了现有基准测试的局限性，为开发能在真实计算机环境中完成开放式任务的多模态代理提供了基础。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.07972v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.07972.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-10\u003C\u002Fspan> | **Leave No Context Behind: Efficient Infinite Context Transformers with Infini-attention**\u003Cbr>\u003Csub>机构: Google\u003Cbr>该研究提出一种全新的注意力机制Infini-attention，它通过将压缩记忆与标准的点积注意力相结合，并在设计上支持插拔式的持续预训练和长上下文调整，使得LLMs能以有界的内存和计算资源处理无限长的上下文。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.07143v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.07143.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-10\u003C\u002Fspan> | **Superposition Prompting: Improving and Accelerating Retrieval-Augmented Generation**\u003Cbr>\u003Csub>机构: Apple, Cupertino, CA, USA\u003Cbr>该论文提出了一种新的检索增强生成（RAG）提示方法——“超级叠加提示”，用于处理大型语言模型处理长文本时遇到的问题，并在没有额外训练或微调的情况下显著提高了时间效率和准确性。这一方法在众多预训练模型上得到验证，并且作者计划发布一个开源代码实现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.06910v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.0691.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-10\u003C\u002Fspan> | **Transferable and Efficient Non-Factual Content Detection via Probe Training with Offline Consistency Checking**\u003Cbr>\u003Csub>机构: Renmin University of China, Tsinghua University\u003Cbr>本论文提出了一种通过离线自我一致性检查训练探测模型的新方法PINOS，有效地解决了现有真实性检测方法的限制。PINOS提高了过程的转移能力和效率，并且在真实性检测和问答基准测试上取得了超越现有方法的结果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.06742v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.06742.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-10\u003C\u002Fspan> | **\"We Need Structured Output\": Towards User-centered Constraints on Large Language Model Output**\u003Cbr>\u003Csub>机构: Google Research\u003Cbr>本论文探索如何为大型语言模型（LLM）输出实现用户中心的约束，通过调查行业专业人士来了解不同场景和需求。重点是提高开发者在开发、测试和整合LLM过程中的效率，并通过满足特定的输出格式和用户界面要求来增强最终用户的体验。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.07362v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.07362.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-09\u003C\u002Fspan> | **THOUGHTSCULPT: Reasoning with Intermediate Revision and Search**\u003Cbr>\u003Csub>机构: UC Berkeley\u003Cbr>THOUGHTSCULPT作为一个基于图的框架，通过内嵌的自我修正机制，能够让LLMs在生成新的思维节点的同时迭代地改进之前的输出，特别在需要持续修正和修改的任务中表现出卓越的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.05966v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.05966.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-09\u003C\u002Fspan> | **Event-enhanced Retrieval in Real-time Search**\u003Cbr>\u003Csub>机构: Tencent Search, Platform and Content Group\u003Cbr>EER是一种新型方法，针对实时搜索中的“语义漂移”问题，通过改进EBR模型和加入对比学习及事件三元组生成任务提升检索性能。该方法通过实验验证了其有效性，并可能为信息检索领域提供新的视角。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.05989v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.05989.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fopen-event-hub\u002FEvent-enhanced_Retrieval)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-09\u003C\u002Fspan> | **RULER: What's the Real Context Size of Your Long-Context Language Models?**\u003Cbr>\u003Csub>机构: NVIDIA  \u003Cbr>本论文为长上下文LMs提出了新的评估工具RULER，并开源，用于测试LMs在复杂任务和长上下文理解能力上的表现，并在各种模型和任务复杂度上进行了分析，推动了长上下文LMs的未来研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.06654v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.06654.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-09\u003C\u002Fspan> | **Privacy Preserving Prompt Engineering: A Survey**\u003Cbr>\u003Csub>机构: University of Arkansas\u003Cbr>这篇调研论文为了在使用LLMs进行ICL和一般提示的过程中保护隐私，提供了一个关于在这一范畴下的隐私保护方法的系统性概述，有利于推动社区在隐私保护方面的进一步研究和探索。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.06001v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.06001.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-08\u003C\u002Fspan> | **LayoutLLM: Layout Instruction Tuning with Large Language Models for Document Understanding**\u003Cbr>\u003Csub>机构: Alibaba Group, Zhejiang University\u003Cbr>该论文成功提出了LayoutLLM模型及其布局指导的调整策略，显著提高了模型对文档布局信息的理解和利用，尤其在零样本文档理解任务上表现出了卓越的效果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.05225v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.05225.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FAlibabaResearch\u002FAdvancedLiterateMachinery\u002Ftree\u002Fmain\u002FDocumentUnderstanding)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-08\u003C\u002Fspan> | **Evaluating Interventional Reasoning Capabilities of Large Language Models**\u003Cbr>\u003Csub>机构: Université de Montréal, Google DeepMind, ServiceNow Research\u003Cbr>本文对大型语言模型（LLMs）因果推理能力进行了评估。通过提出干预效果预测，它主要测试LLMs在干预实验后如何更新自己对事实的理解。结果显示GPT-4在某些条件下能够准确预测干预效果，但提示设计的微小变化会显著影响其表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.05545v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.05545.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-08\u003C\u002Fspan> | **Know When To Stop: A Study of Semantic Drift in Text Generation**\u003Cbr>\u003Csub>机构: FAIR, Meta, Anthropic\u003Cbr>本文为理解和测量语言模型在长文本生成中的语义漂移现象提供了工具。通过早停和重采样-重新排序等方法，显著提高了事实准确性，并为如何平衡信息量与事实准确性提供了可能的解决策略。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.05411v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.05411.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-08\u003C\u002Fspan> | **LLM-Augmented Retrieval: Enhancing Retrieval Models Through Language Models and Doc-Level Embedding**\u003Cbr>\u003Csub>机构: Meta\u003Cbr>该论文成功提出并验证了一个增强型文档级嵌入的LLM-augmented检索框架，不仅通过生成合成的相关查询和标题增加了文档嵌入的上下文信息，还改进了检索模型训练的关键步骤，从而提升检索模型的性能和鲁棒性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.05825v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.05825.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-07\u003C\u002Fspan> | **Radial Networks: Dynamic Layer Routing for High-Performance Large Language Models**\u003Cbr>\u003Csub>机构: Cornell University\u003Cbr>本论文提出了径向网络，这是一种新型神经网络结构，通过动态层稀疏性和一个经过训练的路由模块来实现令牌级的层间路由。这不仅提高了模型的性能，还显著降低了计算和服务成本，为大型语言模型的进一步扩展提供了可能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.04900v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.049.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-07\u003C\u002Fspan> | **Prompting Large Language Models for Zero-shot Essay Scoring via Multi-trait Specialization**\u003Cbr>\u003Csub>机构: Peking University\u003Cbr>该研究提出了一个零样本的大型语言模型作文评分框架（MTS），通过多轮对话来为作文的不同写作特质打分，并采用最小-最大缩放和异常值截断机制来得到最终得分。MTS在准确度上显著优于直接提示评分方法，并在小型化部署中优于ChatGPT，提供了监督学习之外的零样本作文评分方案。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.04941v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.04941.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-04\u003C\u002Fspan> | **Direct Nash Optimization: Teaching Language Models to Self-Improve with General Preferences**\u003Cbr>\u003Csub>机构: Microsoft Research\u003Cbr>这篇论文介绍了DNO——一种能够将对比学习的简洁性与从优化一般性偏好而来的理论普适性相结合的算法。DNO在后训练大型语言模型方面显著提升性能，它的成功实证了通过优化一般偏好来指导模型学习与人类价值观保持一致是可能的。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.03715v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.03715.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-04\u003C\u002Fspan> | **ReFT: Representation Finetuning for Language Models**\u003Cbr>\u003Csub>机构: Stanford University, Pr(Ai)2R Group\u003Cbr>这篇论文介绍了一种新的语言模型微调方法LoReFT，它在资源效率和模型控制能力方面显著优于现有的参数有效调整（PEFTs）方法。实验表明，该方法在多个NLP领域的任务上实现了新的最佳性能，同时保持了较少的参数需求和较高的可解释性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.03592v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.03592.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fstanfordnlp\u002Fpyreft)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-04\u003C\u002Fspan> | **AutoWebGLM: Bootstrap And Reinforce A Large Language Model-based Web Navigating Agent**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.03648v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.03648.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FTHUDM\u002FAutoWebGLM)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-03\u003C\u002Fspan> | **PromptRPA: Generating Robotic Process Automation on Smartphones from Textual Prompts**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University, CMU\u003Cbr>文章介绍了PromptRPA系统，这是一个解决RPA在移动设备上应用受限的有效方案。通过利用多代理框架和在线教程，该系统能够解释各种文本提示，解决大范围的RPA任务。性能评估显示成功率显著提高，证明了文本驱动控制在RPA领域的可行性，并开辟了功能增强和适用性扩展的新方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.02475v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.02475.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-02\u003C\u002Fspan> | **CMAT: A Multi-Agent Collaboration Tuning Framework for Enhancing Small Language Models**\u003Cbr>\u003Csub>机构: East China Jiaotong University, Guangdong University of Technology, University of Toronto\u003Cbr>该论文的核心贡献是提出了CMAT框架，这是一种创新方法，可实现多智能体系统内部的动态、实时记忆更新，并设计了一种新型的角色扮演机制，用于精准的任务分配和提升代理间的通信，以此显著提高整体性能和合作效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.01663v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.01663.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-02\u003C\u002Fspan> | **Octopus v2: On-device language model for super agent**\u003Cbr>\u003Csub>机构: Stanford University\u003Cbr>这篇论文解决了边缘设备上LLM的部署和功能调用效率问题，通过引入特殊的训练方法和减少推理时需处理的上下文量，显著提高了在设备上进行函数调用的准确率和降低了延迟，实验结果表明其对提升函数调用任务的性能具有显著影响。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.01744v3)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.01744.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-02\u003C\u002Fspan> | **Long-context LLMs Struggle with Long In-context Learning**\u003Cbr>\u003Csub>机构: University of Waterloo, Carnegie Mellon University\u003Cbr>这篇文章提出了一个新的评估基准，LongICLBench，用于评估LLMs在处理长输入任务时的性能，以及LLMs对输入序列中实例位置的敏感性。这一工作有助于更好地理解和改进大型语言模型在长文本处理方面的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.02060v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.0206.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-02\u003C\u002Fspan> | **LLM-ABR: Designing Adaptive Bitrate Algorithms via Large Language Models**\u003Cbr>\u003Csub>机构: Microsoft\u003Cbr>论文探讨了大型语言模型（LLMs）如何辅助设计自适应比特率（ABR）算法，通过生成多样化的候选算法，并运用早停机制在网络模拟器中进行测试，从而有效地筛选出最有效的算法设计。评估显示在特定网络场景中，利用LLMs可以显著提高ABR算法的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.01617v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.01617.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-02\u003C\u002Fspan> | **Advancing LLM Reasoning Generalists with Preference Trees**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.02078v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.02078.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-02\u003C\u002Fspan> | **Long-context LLMs Struggle with Long In-context Learning**\u003Cbr>\u003Csub>机构: University of Waterloo, Carnegie Mellon University\u003Cbr>这项研究为评估大型语言模型处理长上下文任务的能力提供了一个新的基准——LongICLBench，并显示了随着任务难度增加，LLMs的性能普遍下降，并且模型的长上下文学习能力受到提示中标签位置分布的影响。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.02060v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.0206.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-01\u003C\u002Fspan> | **AIOps Solutions for Incident Management: Technical Guidelines and A Comprehensive Literature Review**\u003Cbr>\u003Csub>机构: University of Lyon, INSA Lyon, Infologic\u003Cbr>本文提供了 AIOps 领域中事件管理的全面文献回顾，旨在通过提供结构化的知识、确定知识空白和为该领域的未来发展奠定基础。论文建立了 AIOps 的统一术语和分类法，揭示了现有的挑战，并提供了公开数据集，为未来的研究提供了方向和基础。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.01363v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.01363.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-01\u003C\u002Fspan> | **Mapping the Increasing Use of LLMs in Scientific Papers**\u003Cbr>\u003Csub>机构: Stanford University, UC Santa Barbara\u003Cbr>本文是首次进行的，跨arXiv、bioRxiv和Nature组合上发表的文章的系统性、大规模分析，采用的统计估计方法可以在群体层面上测量LLM修改内容的普及程度，为理解LLM在科学写作中的应用提供了宝贵的洞察。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.01268v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.01268.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-01\u003C\u002Fspan> | **Prompt-prompted Mixture of Experts for Efficient LLM Generation**\u003Cbr>\u003Csub>机构: CMU\u003Cbr>GRIFFIN是一个不需要训练的MoE系统，利用LLMs前馈块内的flocking现象在不同的激活函数下提高模型效率，保持性能的同时减少了计算成本。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.01365v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.01365.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fhdong920\u002FGRIFFIN)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-01\u003C\u002Fspan> | **Efficiently Distilling LLMs for Edge Applications**\u003Cbr>\u003Csub>机构: IBM Research  \u003Cbr>本论文提供了一种新的针对边缘设备进行LLMs蒸馏的方法，允许LPFT同时显著减少模型尺寸和训练成本，尤其是优化了解码器模型的压缩抵抗和训练时长。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.01353v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.01353.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>04-01\u003C\u002Fspan> | **LLM-RadJudge: Achieving Radiologist-Level Evaluation for X-Ray Report Generation**\u003Cbr>\u003Csub>机构: Microsoft Research Asia\u003Cbr>这篇论文提出了一个基于大型语言模型的放射学报告评价新框架——LLM-RadJudge，能够有效提高放射学报告评价的临床相关性和一致性。并通过知识蒸馏技术实现了小型模型的开发，既降低了评价成本也提高了可访问性，为放射学报告生成研究和实际应用提供了有力的支撑。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.00998v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-04\u002F2404.00998.md)  |\n\n---\n\n\n\n### 三月\n\n|  日期   | 论文 | 链接与摘要 |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-28\u003C\u002Fspan> | **Jamba: A Hybrid Transformer-Mamba Language Model**\u003Cbr>\u003Csub>机构: AI21 Labs\u003Cbr>Jamba是基于混合Transformer-Mamba体系结构的新型大型语言模型，突破了处理长上下文的限制，并且通过应用专家混合（MoE）组件提高了模型吞吐量，同时保持了较小的内存足迹。此模型标志着在大型语言模型领域的一个新方向，并展示了高效训练与强大性能之间的可能平衡。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.19887v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.19887.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-28\u003C\u002Fspan> | **sDPO: Don't Use Your Data All at Once**\u003Cbr>\u003Csub>此论文提出了一个新的步骤化DPO（sDPO）方法，通过分步骤利用偏好数据集，并使用先前步骤中的对齐模型作为当前步骤的参考模型，有效提高了最终模型的性能与对齐度。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.19270v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.1927.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-27\u003C\u002Fspan> | **Rejection Improves Reliability: Training LLMs to Refuse Unknown Questions Using RL from Knowledge Feedback**\u003Cbr>\u003Csub>这项工作通过提出RLKF框架并定义了新的模型可靠性评估指标，有效地解决了LLMs的幻觉问题，并提升了LLMs的诚实度和可靠性，显示出打造更值得信赖的AI系统的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.18349v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.18349.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-27\u003C\u002Fspan> | **BLADE: Enhancing Black-box Large Language Models with Small Domain-Specific Models**\u003Cbr>\u003Csub>机构: DCST Tsinghua University, Beijing Institute of Technology, Huawei Cloud BU\u003Cbr>这项研究提出了一个新架构BLADE，可以通过小型领域特定模型增强黑盒大型语言模型，并解决了大型模型在特定领域应用中的知识不足问题。BLADE证明了其在性能和成本上都是一个有效的解决方案。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.18365v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.18365.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-26\u003C\u002Fspan> | **COIG-CQIA: Quality is All You Need for Chinese Instruction Fine-tuning**\u003Cbr>\u003Csub>机构: Shenzhen Institute of Advanced Technology, CAS; M-A-P; Institute of Automation, CAS\u003Cbr>本文提出了COIG-CQIA数据集，这是一个针对中文指令调优的高质量数据集，能够促进与人类交互的对齐。研究强调了高质量数据源在模型微调中的重要性，并通过实验展示了数据集创建策略和微调方法对模型性能的显著影响。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.18058v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.18058.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-26\u003C\u002Fspan> | **LISA: Layerwise Importance Sampling for Memory-Efficient Large Language Model Fine-Tuning**\u003Cbr>\u003Csub>机构: The Hong Kong University of Science and Technology, University of Illinois Urbana-Champaign\u003Cbr>这篇论文提出的LISA策略，通过分层权重重要性采样，实现了在保持类似于LoRA的内存效率的同时，提升了大型语言模型的微调效率和性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.17919v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.17919.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-26\u003C\u002Fspan> | **The Unreasonable Ineffectiveness of the Deeper Layers**\u003Cbr>\u003Csub>机构: Meta FAIR, UMD\u003Cbr>本论文针对流行的开权重预训练LLMs提出了一种简单的层剪枝策略，并展示了在删除大量层后LLMs对性能影响较小的实证研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.17887v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.17887.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-25\u003C\u002Fspan> | **AIOS: LLM Agent Operating System**\u003Cbr>\u003Csub>机构: Rutgers University  \u003Cbr>AIOS作为一个LLM代理操作系统，通过设计特定的内核和模块，克服了之前资源调度和上下文管理等领域的挑战，为LLM代理的性能和效率提供了改进，为AIOS生态系统的未来发展和部署铺平了道路。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.16971v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.16971.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fagiresearch\u002FAIOS)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-22\u003C\u002Fspan> | **Can large language models explore in-context?**\u003Cbr>\u003Csub>机构: Microsoft Research, Carnegie Mellon University\u003Cbr>这篇论文调查了当代大型语言模型（LLMs）能否在上下文中从事探索的问题，特别是在没有训练干预的情况下。经过一系列实验，作者发现只有在特定的配置下LLMs才能稳健地进行探索。研究表明，没有适当的提示设计，即使是最先进的LLMs也可能无法在更复杂的环境中进行探索，而在这些环境中外部总结历史可能是一个非平凡的算法设计问题。这项工作提示了LLMs可能需要有针对性的算法干预才能在复杂环境中有效地工作。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.15371v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.15371.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-20\u003C\u002Fspan> | **Chain-of-Interaction: Enhancing Large Language Models for Psychiatric Behavior Understanding by Dyadic Contexts**\u003Cbr>\u003Csub>机构: University of Memphis, San Francisco Veterans Affairs Health Care System, University of California San Francisco\u003Cbr>本文通过引入互动链提示方法，有效地提升了大型语言模型在理解精神病行为方面的能力，特别是在动机面谈语境下的应用。通过结构化的提示和评估方法，能够模拟专业心理治疗人员的思维过程，对模型进行了有效的域知识教育，相比传统方法取得了更好的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.13786v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.13786.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-19\u003C\u002Fspan> | **Towards Robots That Know When They Need Help: Affordance-Based Uncertainty for Large Language Model Planners**\u003Cbr>\u003Csub>机构: University of Maryland  \u003Cbr>论文提出了一种新方法LAP，通过结合大型语言模型(LLMs)和场景可以供性来减少规划任务中的幻觉并实现不确定性对齐。通过在模拟和现实世界机器人操作任务的实验中表明，LAP可以显著提高成功率并减少对人类帮助的依赖，从而推动智能机器人领域的进步。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.13198v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.13198.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-18\u003C\u002Fspan> | **Decoding Compressed Trust: Scrutinizing the Trustworthiness of Efficient LLMs Under Compression**\u003Cbr>\u003Csub>机构: University of Texas at Austin, Drexel University, MIT\u003Cbr>本文首次对经过压缩的LLMs在多个信任维度上进行了全面评估，并提供了压缩时同时考虑效率和信任度的实用建议。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.15447v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.15447.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-15\u003C\u002Fspan> | **Uni-SMART: Universal Science Multimodal Analysis and Research Transformer**\u003Cbr>\u003Csub>机构: DP Technology, AI for Science Institute Beijing\u003Cbr>Uni-SMART 是一款创新的模型，旨在深入理解多模态科学文献，它在多个领域相对于其他顶尖文本焦点的 LLMs 显示出了更优越的性能，并有潜力改变我们与科学文献的互动方式。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.10301v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.10301.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-15\u003C\u002Fspan> | **VideoAgent: Long-form Video Understanding with Large Language Model as Agent**\u003Cbr>\u003Csub>机构: Stanford University\u003Cbr>VideoAgent通过模仿人类的认知过程，在长视频理解方面迈出了重要的一步，强调了在长时间跨度内对视觉信息进行推理的重要性。此工作不仅为长视频理解设立了新的基准，也为未来该方向的研究提供了启示。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.10517v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.10517.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-15\u003C\u002Fspan> | **RAFT: Adapting Language Model to Domain Specific RAG**\u003Cbr>\u003Csub>机构: UC Berkeley\u003Cbr>本论文提出的RAFT方法针对训练大型语言模型在特定领域内以“开卷”模式回答问题进行了创新，强化了模型的推理能力和对干扰文档的抵抗力，同时通过链式推理方式改进了模型生成解答的准确性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.10131v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.10131.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-13\u003C\u002Fspan> | **Call Me When Necessary: LLMs can Efficiently and Faithfully Reason over Structured Environments**\u003Cbr>\u003Csub>机构: Nanjing University, Microsoft\u003Cbr>Readi框架提出了一种高效并真实地在大规模结构化环境中进行推理的方法，它充分发挥了LLMs的规划能力，并通过动态反馈优化推理路径，实现了在多跳推理任务中的显著改进。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.08593v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.08593.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-13\u003C\u002Fspan> | **Steering LLMs Towards Unbiased Responses: A Causality-Guided Debiasing Framework**\u003Cbr>\u003Csub>机构: ByteDance Research, University of Maryland College Park, Carnegie Mellon University\u003Cbr>该论文成功提出了一个新的因果关系引导的去偏见框架，并通过实证研究验证了其有效性，既可以整合现有的基于提示的去偏见方法，也为诱导无偏见推理提出了新的途径。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.08743v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.08743.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-13\u003C\u002Fspan> | **Scaling Instructable Agents Across Many Simulated Worlds**\u003Cbr>\u003Csub>此论文提出的SIMA项目旨在创建一个能够在各种模拟3D环境中根据任意语言指令进行操作的AI系统。该系统的设计致力于解决在感知和体化行动中具体化语言的挑战，以及在许多不同环境中实现通用性和可扩展性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2404.10179v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2404.10179.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-12\u003C\u002Fspan> | **Chronos: Learning the Language of Time Series**\u003Cbr>\u003Csub>机构: Amazon Web Services, UC San Diego, University of Freiburg\u003Cbr>Chronos作为一个预训练的时间序列预测模型框架，在零样本和标准预测任务中表现出色。它利用了数据增强策略和公共数据集的优势，证实了时间序列预测中语言模型架构通用性的潜力，为将来的时间序列模型提供了新的研究方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.07815v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.07815.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-11\u003C\u002Fspan> | **RA-ISF: Learning to Answer and Understand from Retrieval Augmentation via Iterative Self-Feedback**\u003Cbr>\u003Csub>机构: Zhejiang University, Southeast University, Massachusetts Institute of Technology\u003Cbr>RA-ISF是一个创新的检索增强框架，通过迭代问题分解和三个子模块的迭代处理来提高LLMs的问题解决能力，并有效降低不相关文本的干扰，显著提升知识检索的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.06840v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.0684.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-11\u003C\u002Fspan> | **ERA-CoT: Improving Chain-of-Thought through Entity Relationship Analysis**\u003Cbr>\u003Csub>机构: Zhejiang University, Southeast University\u003Cbr>该论文通过提出一种新的框架ERA-CoT，有效强化了大型语言模型在复杂实体场景中的推理和问题回答能力。该方法通过增强对实体关系的理解，实现了显著提升模型推理准确度，特别是在CoT推理过程中。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.06932v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.06932.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-11\u003C\u002Fspan> | **Stealing Part of a Production Language Model**\u003Cbr>\u003Csub>机构: Google DeepMind, ETH Zurich, University of Washington\u003Cbr>本文提出了一项对生产语言模型进行模型窃取的新攻击方法，该方法能够有效地提取Transformer模型的最后一层，并能用于解密黑盒模型的细节信息、参数和尺寸。文章还讨论了可能的防御措施，并指出了修改API以防止未来此类攻击的必要性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.06634v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.06634.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-08\u003C\u002Fspan> | **Overcoming Reward Overoptimization via Adversarial Policy Optimization with Lightweight Uncertainty Estimation**\u003Cbr>\u003Csub>这篇论文介绍了Adversarial Policy Optimization (AdvPO)，它是解决基于人类反馈的强化学习过程中出现的奖励过优化问题的新方法，特别是在与人类偏好对齐的大型语言模型中。AdvPO有效地在没有带来高额计算成本的情况下缓解了奖励过优化。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.05171v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.05171.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-08\u003C\u002Fspan> | **Harnessing Multi-Role Capabilities of Large Language Models for Open-Domain Question Answering**\u003Cbr>\u003Csub>机构: Gaoling School of Artificial Intelligence Renmin University of China, Nankai University, Beijing Academy of Artificial Intelligence\u003Cbr>LLMQA是一个新的通用框架模型，通过结合检索和生成范式搜集更高质量的证据，并让LLMs在框架中发挥多重角色，提高了开放域问答系统的整体性能，实验结果也证明了其超越现有方法的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.05217v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.05217.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-08\u003C\u002Fspan> | **Gemini 1.5: Unlocking multimodal understanding across millions of tokens of context**\u003Cbr>\u003Csub>机构: Google\u003Cbr>Gemini 1.5 Pro在记忆与推理海量长上下文信息的能力上取得了显著突破，尤其是在超长文本、视频和音频处理方面。该模型不仅在效果上优于现有模型，也在计算效率上有显著提高。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.05530v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.0553.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-07\u003C\u002Fspan> | **Chatbot Arena: An Open Platform for Evaluating LLMs by Human Preference**\u003Cbr>\u003Csub>机构: UC Berkeley, Stanford, UCSD\u003Cbr>Chatbot Arena是一个基于用户偏好，用于评估大型语言模型的开放平台。它通过众包方式收集用户问题并进行匿名化的随机化对决，用于评估LLMs的表现，解决了现有静态数据集基准测试的局限性，并通过精心设计的统计方法确保了评估结果的可信度和效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.04132v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.04132.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-07\u003C\u002Fspan> | **Yi: Open Foundation Models by 01.AI**\u003Cbr>\u003Csub>机构: 01.AI\u003Cbr>该论文成功地提出了一个在性能和效率上都可与GPT-3.5相媲美的Yi-34B模型，并详细描述了在大型语言模型预训练及其指令微调方面的创新方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.04652v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.04652.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-05\u003C\u002Fspan> | **Design2Code: How Far Are We From Automating Front-End Engineering?**\u003Cbr>\u003Csub>机构: Stanford University, Georgia Tech, Microsoft\u003Cbr>本文通过对Design2Code任务的形式化和基准测试，评估了当前多模态LLMs在将视觉设计转换为代码的能力，并发现GPT-4V表现最佳，为自动化前端开发提供了一种新的范式。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.03163v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.03163.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-05\u003C\u002Fspan> | **ChatCite: LLM Agent with Human Workflow Guidance for Comparative Literature Summary**\u003Cbr>\u003Csub>机构: Tsinghua University\u003Cbr>ChatCite系统是为了克服LLM在生成文献回顾时的挑战而设计的，它通过特定的模块使LLM代理可以更有效地理解、汇总和对比不同的研究工作，进而生成有组织、有比较性分析的文献回顾。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.02574v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.02574.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-05\u003C\u002Fspan> | **MathScale: Scaling Instruction Tuning for Mathematical Reasoning**\u003Cbr>\u003Csub>机构: The Chinese University of Hong Kong Shenzhen, China; Microsoft Research Asia, Beijing, China; Shenzhen Research Institute of Big Data, Shenzhen, China\u003Cbr>MathScale提出了一个可扩展的方法来创建高质量的数学推理数据，通过构建新的评估基准MWPBENCH全面地评价LLMs在数学推理上的能力，显著提升了模型解决数学问题的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.02884v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-03\u002F2403.02884.md)  |\n\n---\n\n\n\n### 二月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-29\u003C\u002Fspan> | **StarCoder 2 and The Stack v2: The Next Generation**\u003Cbr>\u003Csub>机构: ServiceNow, Hugging Face  \u003Cbr>本论文提出了The Stack v2和StarCoder2的发展过程，这是基于代码大规模预训练和指令微调的一项工作。研究人员通过整合多样化数据源和经过精心设计的训练过程，显著提高了代码LLMs的性能，特别是在处理低资源编程语言和需要代码推理的任务上。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.19173v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.19173.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-29\u003C\u002Fspan> | **SEED: Customize Large Language Models with Sample-Efficient Adaptation for Code Generation**\u003Cbr>\u003Csub>机构: Peking University\u003Cbr>本文提出了一个名为SEED的适应方法，它利用错误驱动学习来使LLMs更少样本地高效学习，针对代码生成任务实现了更佳的性能和泛化性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.00046v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2403.00046.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-29\u003C\u002Fspan> | **Beyond Language Models: Byte Models are Digital World Simulators**\u003Cbr>\u003Csub>机构: Microsoft Research Asia\u003Cbr>论文展现了bGPT在处理挑战性的字节级数据模拟任务中的潜力，特别强调了其在跨模态知识转移和数字世界模拟方面的能力。这揭示了字节模型在数字媒体数据处理和理解上的广泛适用性和灵活性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.19155v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.19155.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-29\u003C\u002Fspan> | **Resonance RoPE: Improving Context Length Generalization of Large Language Models**\u003Cbr>\u003Csub>机构: 1DIRO Université de Montréal, Mila - Quebec AI Institute, Huawei Noah’s Ark Lab\u003Cbr>本论文提出了 Resonance Rope，这是一个改进的模型，它基于对 RoPE 位置嵌入特征波长的分析来提升模型在处理长文本时的性能。它还引入了 POSGEN 基准测试，以帮助研究和评估位置嵌入在长文本任务中的表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2403.00071v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2403.00071.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-27\u003C\u002Fspan> | **EMO: Emote Portrait Alive -- Generating Expressive Portrait Videos with Audio2Video Diffusion Model under Weak Conditions**\u003Cbr>\u003Csub>机构: Alibaba Group  \u003Cbr>EMO 框架通过直接的音频到视频合成方法提高了生成视频的真实感和表现力，显著优于现有技术，为视频合成领域提供了一个重要的进步。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.17485v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.17485.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-27\u003C\u002Fspan> | **The Era of 1-bit LLMs: All Large Language Models are in 1.58 Bits**\u003Cbr>\u003Csub>机构: Microsoft, University of Chinese Academy of Sciences\u003Cbr>论文提出BitNet b1.58模型，这是一个1.58比特量化的大型语言模型，与传统的完整精度LLMs在性能上可比，而且更高效、更节省能源。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.17764v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.17764.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-27\u003C\u002Fspan> | **When Scaling Meets LLM Finetuning: The Effect of Data, Model and Finetuning Method**\u003Cbr>\u003Csub>机构: Google DeepMind\u003Cbr>该论文提供了大型语言模型微调阶段不同因素如数据大小、模型大小以及微调方法对模型性能影响的深入洞见，定义了一种新的评估框架。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.17193v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.17193.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-27\u003C\u002Fspan> | **REAR: A Relevance-Aware Retrieval-Augmented Framework for Open-Domain Question Answering**\u003Cbr>\u003Csub>机构: Gaoling School of Artificial Intelligence Renmin University of China, School of Information Renmin University of China\u003Cbr>该论文提出了REAR框架，重点在于通过为LLMs加入文档相关性自我意识来增强其在QA任务中利用外部知识的能力，并证实该框架有效地超越了前述方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.17497v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.17497.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FRUCAIBox\u002FREAR)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-27\u003C\u002Fspan> | **Agent-Pro: Learning to Evolve via Policy-Level Reflection and Optimization**\u003Cbr>\u003Csub>机构: Zhejiang University, Institute of Software Chinese Academy of Sciences, Nanjing University of Posts and Telecommunications\u003Cbr>Agent-Pro是一个新型的基于LLM的智能代理，能够通过政策级反思和优化在交互环境中学习和发展策略，解决了现有工作无法通过交互学习和适应的问题。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.17574v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.17574.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-27\u003C\u002Fspan> | **Sora: A Review on Background, Technology, Limitations, and Opportunities of Large Vision Models**\u003Cbr>\u003Csub>机构: OpenAI\u003Cbr>本文是一篇对Sora——一个大型视觉模型的综述。论文讨论了Sora的技术特征、创新点、以及当前应用领域的局限性和未来可能的发展机会。Sora的能力在多个维度上展现了大型视觉模型的进步，包括长视频生成和多样化视频格式的处理。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.17177v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.17177.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-26\u003C\u002Fspan> | **Improving LLM-based Machine Translation with Systematic Self-Correction**\u003Cbr>\u003Csub>机构: Zhejiang University, Tencent, Angelalign Technology Inc.\u003Cbr>论文成功提出了第一个基于LLMs的自我纠正翻译框架TER，并验证了其在多种语言对和不同模型间的翻译质量改进效果。它为机器翻译领域带来了新的视角，特别是在自我纠正在高资源、低资源语言和不同中心语言之间翻译的应用。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.16379v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.16379.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-26\u003C\u002Fspan> | **Do Large Language Models Latently Perform Multi-Hop Reasoning?**\u003Cbr>\u003Csub>机构: Google DeepMind, UCL, Google Research\u003Cbr>本文对LLMs是否能够进行潜在的多跳推理进行了研究，并通过实验提出了评估LLMs潜在多跳推理能力的新方法。研究提示LLMs对某些关系类型的提示有很强的多跳推理证据，但这种推理路径的运用在不同类型的提示中表现出高度的情境依赖性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.16837v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.16837.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-26\u003C\u002Fspan> | **LLMArena: Assessing Capabilities of Large Language Models in Dynamic Multi-Agent Environments**\u003Cbr>\u003Csub>研究介绍了LLMARENA基准，用以评估LLMs智能体在复杂多代理环境中的能力，指出了存在的问题并促进了未来的研究方向，包括多模态动态环境中的能力及利用外部工具的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.16499v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.16499.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-25\u003C\u002Fspan> | **ChatMusician: Understanding and Generating Music Intrinsically with LLM**\u003Cbr>\u003Csub>机构: Hong Kong University of Science and Technology\u003Cbr>本文通过创造首个针对语言模型的音乐预训练数据集和评估基准，提升了LLMs在音乐理解和生成方面的表现，并在这一未被深入研究的领域取得了实质性进展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.16153v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.16153.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-23\u003C\u002Fspan> | **ChunkAttention: Efficient Self-Attention with Prefix-Aware KV Cache and Two-Phase Partition**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.15220v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.1522.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-23\u003C\u002Fspan> | **Genie: Generative Interactive Environments**\u003Cbr>\u003Csub>机构: Google DeepMind, University of British Columbia\u003Cbr>Genie是能够生成新视频并能通过用户输入控制视频内容的交互环境模型，弥补了传统视频生成技术与交互体验之间的差距。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.15391v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.15391.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-22\u003C\u002Fspan> | **Automating psychological hypothesis generation with AI: when large language models meet causal graph**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.14424v3)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.14424.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-22\u003C\u002Fspan> | **Middleware for LLMs: Tools Are Instrumental for Language Agents in Complex Environments**\u003Cbr>\u003Csub>通过为LLMs设计特定的工具和推理算法，研究开发了名为FUXI的新框架，有效提高了LLMs在复杂环境中的操作能\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.14672v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.14672.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-22\u003C\u002Fspan> | **CriticBench: Benchmarking LLMs for Critique-Correct Reasoning**\u003Cbr>\u003Csub>机构: Tsinghua University, University of Hong Kong\u003Cbr>该论文通过CRITICBENCH评估了LLMs的批判和纠正推理能力，并探究了影响这些能力的关键因子，旨在促进LLMs批判和自我改进能力的后续研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.14809v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.14809.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-22\u003C\u002Fspan> | **OpenCodeInterpreter: Integrating Code Generation with Execution and Refinement**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.14658v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.14658.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-21\u003C\u002Fspan> | **User-LLM: Efficient LLM Contextualization with User Embeddings**\u003Cbr>\u003Csub>USER-LLM是一个通过用户嵌入来上下文化LLM的框架。它能有效地解决用户数据的复杂性和长序列处理的问题，提升了LLM在个性化应用上的效能，同时也保证了计算效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.13598v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.13598.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-21\u003C\u002Fspan> | **AgentScope: A Flexible yet Robust Multi-Agent Platform**\u003Cbr>\u003Csub>机构: Alibaba Group\u003Cbr>AgentScope是一个用于构建多代理应用的多功能平台，强调易用性与可定制性，特别适合不同技能水平的开发者使用。通过实现容错和支持多模态数据处理，以及优化分布式操作，AgentScope显著降低了多代理系统开发与部署的难度，鼓励更广泛的参与和创新。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.14034v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.14034.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fmodelscope\u002Fagentscope)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-20\u003C\u002Fspan> | **TofuEval: Evaluating Hallucinations of LLMs on Topic-Focused Dialogue Summarization**\u003Cbr>\u003Csub>机构: AWS AI Labs, The University of Texas at Austin, KAIST\u003Cbr>本论文提出了一个名为TOFUEVAL的新型评估基准，针对LLM在生成话题焦点对话摘要时的事实一致性进行了评估。研究发现，不同大小的LLM在对话领域生成的摘要中存在大量事实错误。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.13249v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.13249.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-20\u003C\u002Fspan> | **Instruction-tuned Language Models are Better Knowledge Learners**\u003Cbr>\u003Csub>机构: FAIR at Meta, Carnegie Mellon University, University of Washington\u003Cbr>本文介绍了一种名为预指令微调（PIT）的方法，有效地提高了LLMs从文档中吸收知识的能力，解决了所谓的困惑度诅咒问题，并且在多域的知识获取中也取得了显著进展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.12847v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.12847.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-19\u003C\u002Fspan> | **AnyGPT: Unified Multimodal LLM with Discrete Sequence Modeling**\u003Cbr>\u003Csub>机构: Fudan University, Multimodal Art Projection Research Community, Shanghai AI Laboratory\u003Cbr>AnyGPT 是一个多模态架构的语言模型，通过离散序列建模，能够实现不同模态间的无缝转换和统一处理，提供任意到任意模态之间的生成能力，同时不需要改变现有的 LLM 架构或训练范式。该模型通过在语义和感知水平进行建模，能有效处理和生成高质量的多模态内容，并且与专业模型相比具有可比较的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.12226v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.12226.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-16\u003C\u002Fspan> | **SPAR: Personalized Content-Based Recommendation via Long Engagement Attention**\u003Cbr>\u003Csub>机构: The University of British Columbia, Meta\u003Cbr>SPAR框架充分利用长期用户互动历史来提升个性化内容推荐的精度，并在多项性能指标上超越现有技术。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.10555v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.10555.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-16\u003C\u002Fspan> | **FinTral: A Family of GPT-4 Level Multimodal Financial Large Language Models**\u003Cbr>\u003Csub>机构: The University of British Columbia & Invertible AI\u003Cbr>该论文提出了一个针对财务分析优化的多模态大型语言模型（LLM）套件FinTral。通过与现有模型的对比，展示了其在财务领域多任务环境下的先进性能，特别是在处理零样本任务和减少幻觉现象方面的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.10986v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.10986.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-16\u003C\u002Fspan> | **Speculative Streaming: Fast LLM Inference without Auxiliary Models**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.11131v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.11131.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-15\u003C\u002Fspan> | **How to Train Data-Efficient LLMs**\u003Cbr>\u003Csub>机构: Google DeepMind, University of California San Diego, Texas A&M University\u003Cbr>论文提出的ASK-LLM和DENSITY技术优化了大型语言模型的数据效率，有效提升了模型训练的速度和质量，并在资源限制下表现出色。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.09668v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.09668.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-15\u003C\u002Fspan> | **A Human-Inspired Reading Agent with Gist Memory of Very Long Contexts**\u003Cbr>\u003Csub>机构: Google DeepMind, Google Research\u003Cbr>ReadAgent 是一个受人类阅读方式启发的LLM代理系统，通过创建摘要记忆并根据需要检索信息来解决长文本任务，显著提高了模型的表现和伸缩性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.09727v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.09727.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-15\u003C\u002Fspan> | **Chain-of-Thought Reasoning Without Prompting**\u003Cbr>\u003Csub>机构: Google DeepMind\u003Cbr>这项工作揭示了通过改变解码策略，可以有效地从预训练的LLMs中自然地引发推理，并且在预训练数据中频繁出现的任务上CoT路径更常见。提出的CoT解码方法无需手动引导，就能显著提高各种推理基准上的模型性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.10200v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.102.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-14\u003C\u002Fspan> | **Premise Order Matters in Reasoning with Large Language Models**\u003Cbr>\u003Csub>机构: Google DeepMind\u003Cbr>这篇论文关注于大型语言模型在处理推理任务时，前提顺序的影响，并通过创建R-GSM基准测试来评估这一现象。研究揭示了LLMs对前提顺序极为敏感，性能受顺序影响显著。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.08939v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.08939.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-09\u003C\u002Fspan> | **InternLM-Math: Open Math Large Language Models Toward Verifiable Reasoning**\u003Cbr>\u003Csub>机构: Shanghai AI Laboratory, Tsinghua University, Fudan University School of Computer Science\u003Cbr>InternLM-Math模型是一种基于LLMs的数学推理工具，它整合了多种能力并提供了监督学习以帮助模型在各种数学推理任务中实现最先进的性能，并开源其代码和数据。论文还探讨了利用程序语言LEAN在多任务学习设置中解决数学问题的新方法，彰显了LLMs在形式化和代码辅助推理中的潜能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.06332v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.06332.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FInternLM\u002FInternLM-Math)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-02\u003C\u002Fspan> | **Reasoning Capacity in Multi-Agent Systems: Limitations, Challenges and Human-Centered Solutions**\u003Cbr>\u003Csub>机构: Megagon Labs, Carnegie Mellon University\u003Cbr>本论文提出了多代理系统中的“推理能力”概念，以改善优化和评估，并探讨了利用人类反馈增强系统推理能力的可能性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.01108v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.01108.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-02\u003C\u002Fspan> | **LimSim++: A Closed-Loop Platform for Deploying Multimodal LLMs in Autonomous Driving**\u003Cbr>\u003Csub>机构: Shanghai Artificial Intelligence Laboratory, College of Control Science and Engineering Zhejiang University\u003Cbr>LimSim++是首个专为(M)LLM支持的自动驾驶而开发的封闭循环评估平台。它解决了现有仿真平台的局限性，并通过实验验证了其在多种复杂交通场景中的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.01246v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.01246.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-02\u003C\u002Fspan> | **AMOR: A Recipe for Building Adaptable Modular Knowledge Agents Through Process Feedback**\u003Cbr>\u003Csub>机构: Tsinghua University, Ant Group\u003Cbr>AMOR框架综合了基于有限状态机（FSM）的推理逻辑和过程反馈机制，展示了基于开源LLM的知识代理如何通过人类监督实现推理和适应性，提高了模型在完成知识密集任务中的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.01469v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.01469.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-02\u003C\u002Fspan> | **K-Level Reasoning with Large Language Models**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.01521v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.01521.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-02\u003C\u002Fspan> | **MAGDi: Structured Distillation of Multi-Agent Interaction Graphs Improves Reasoning in Smaller Language Models**\u003Cbr>\u003Csub>机构: UNC Chapel Hill.\u003Cbr>本论文介绍了名为MAGDI的新方法，它通过结构化蒸馏方式将多LLM之间的推理交互蒸馏到更小的模型中，显著提升小模型的推理能力和泛化能力，同时降低了成本。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.01620v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.0162.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-01\u003C\u002Fspan> | **Don't Hallucinate, Abstain: Identifying LLM Knowledge Gaps via Multi-LLM Collaboration**\u003Cbr>\u003Csub>机构: University of Washington, University of California Berkeley, The Hong Kong University of Science and Technology\u003Cbr>本文关注的是如何在大型语言模型(LLMs)中识别知识差距并在必要时放弃回答问题。研究提出了两种基于多LLM合作的新方法，通过对比实验显示它们能有效提高LLMs放弃生成低信心输出的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.00367v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.00367.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-01\u003C\u002Fspan> | **HR-MultiWOZ: A Task Oriented Dialogue (TOD) Dataset for HR LLM Agent**\u003Cbr>\u003Csub>机构: Amazon, University of Milano-Bicocca\u003Cbr>本文介绍了一个新的针对人力资源领域的大语言模型代理（HR LLM Agent）任务的对话数据集，HR-MultiWOZ。它不仅解决了当前在构建和评估HR领域LLM代理时缺乏高质量训练数据集的问题，还提供了一个经济高效的数据集生成方法，为同领域中的其他研究提供了宝贵的资源和参考。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.01018v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.01018.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-01\u003C\u002Fspan> | **Learning Planning-based Reasoning by Trajectories Collection and Process Reward Synthesizing**\u003Cbr>\u003Csub>机构: Nanyang Technological University, Institute for Infocomm Research A*STAR, Salesforce Research\u003Cbr>文章提出了一个新颖的离线训练框架，专注于改进大型语言模型在处理复杂推理任务时的可靠性和精确性，通过收集轨迹和基于结果监督的直接偏好优化，无需教师模型或人类标注。在两个逻辑推理基准测试上的结果证明了该方法的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.00658v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.00658.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-01\u003C\u002Fspan> | **Can Large Language Models Understand Context?**\u003Cbr>\u003Csub>机构: Georgetown University, Apple\u003Cbr>本文提出了一个上下文理解基准，用以评估大型语言模型（LLMs）的上下文理解能力。该基准涵盖了对文档和对话基础上下文理解的要素，通过创新的测试方法和实验分析展示了LLMs在上下文理解方面的能力和局限性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2402.00858v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-02\u002F2402.00858.md)  |\n\n---\n\n\n\n### 一月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-31\u003C\u002Fspan> | **LongAlign: A Recipe for Long Context Alignment of Large Language Models**\u003Cbr>\u003Csub>机构: Tsinghua University, Zhipu.AI\u003Cbr>论文提出了一种新的长上下文对齐配方LongAlign，通过构建长指令数据集、采用新的训练策略并引入评估基准来提高LLMs处理长上下文的能力，且代码、数据和长对齐的模型已开源。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.18058v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.18058.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FTHUDM\u002FLongAlign)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-30\u003C\u002Fspan> | **Efficient Tool Use with Chain-of-Abstraction Reasoning**\u003Cbr>\u003Csub>机构: Meta\u003Cbr>本文提出了一种新的链式抽象推理方法，有效地提升了LLMs使用外部工具的能力，并加速了推理过程。实验结果证明了其在多步骤推理任务上的有效性和高效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.17464v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.17464.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-30\u003C\u002Fspan> | **Can Large Language Models be Trusted for Evaluation? Scalable Meta-Evaluation of LLMs as Evaluators via Agent Debate**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University, Carnegie Mellon University, Shanghai Artificial Intelligence Laboratory\u003Cbr>SCALEEVAL 是一种新型的元评估框架，用于评估LLMs作为评估者的可靠性和效率。通过利用LLM代理间的辩论和最小化的人类监督，该框架在评估中引入灵活性和可扩展性，并在实验中显示出与纯人工评估高度一致的结果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.16788v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.16788.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FGAIR-NLP\u002Fscaleeval)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-30\u003C\u002Fspan> | **Recovering Mental Representations from Large Language Models with Markov Chain Monte Carlo**\u003Cbr>\u003Csub>机构: Princeton University, University of Warwick\u003Cbr>本文通过将 LLMs 整合到采样算法中，并运用直接采样与 MCMC 的方式提取心理表征，有效提升了效率和性能，并探索了用 LLM 进行贝叶斯推断的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.16657v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.16657.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-30\u003C\u002Fspan> | **Incoherent Probability Judgments in Large Language Models**\u003Cbr>\u003Csub>机构: Princeton University\u003Cbr>这篇论文探讨了大型语言模型在形成概率判断方面的连贯性问题，并发现这些模型在该领域表现出的偏差与人类认知中的系统性偏差相似。通过应用概率恒等式和重复判断的方法，研究人员量化了这些判断的不连贯性。研究还提出了一个假设，即LLMs在做出概率判断时的人类样偏差可能源自它们采用的自回归训练目标，这一假设得到了以贝叶斯取样器模型和LLMs中的自回归过程之间潜在联系为基础的支持。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.16646v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.16646.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-29\u003C\u002Fspan> | **Beyond Direct Diagnosis: LLM-based Multi-Specialist Agent Consultation for Automatic Diagnosis**\u003Cbr>\u003Csub>机构: Harbin Institute of Technology\u003Cbr>本研究提出了一个基于LLM的自动诊断方法——多专家智能代理咨询模型（AMSC），它能更好地模拟现实世界中的诊断流程，并通过集成多个专家代理的预测来提升诊断的准确性和效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.16107v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.16107.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-29\u003C\u002Fspan> | **LLM4Vuln: A Unified Evaluation Framework for Decoupling and Enhancing LLMs' Vulnerability Reasoning**\u003Cbr>\u003Csub>机构: Nanyang Technological University\u003Cbr>LLM4Vuln是一个创新的框架，它通过提供漏洞知识的向量数据库、调用工具的功能、定制的CoT提示方案以及使用精通指令的模型来结构化输出，显著提高了LLMs在代码漏洞分析中的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.16185v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.16185.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-29\u003C\u002Fspan> | **SelectLLM: Can LLMs Select Important Instructions to Annotate?**\u003Cbr>\u003Csub>机构: University of Minnesota, Carnegie Mellon University\u003Cbr>这项工作提出了一个利用LLMs选择未标记的高质量指令的新方法SELECTLLM，通过挑战传统的选择算法并在保持数据集的全局结构的同时提升选择效果。实验结果显示了其在指令调整基准测试上的优越性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.16553v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.16553.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fminnesotanlp\u002Fselect-llm)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-28\u003C\u002Fspan> | **PRE: A Peer Review Based Large Language Model Evaluator**\u003Cbr>\u003Csub>这篇论文提出的PRE模型通过模拟学术界的同行评审机制，提供了一种全新的自动评估LLM的框架，它显著降低了成本，并且具有更高的通用性和可靠性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.15641v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.15641.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-27\u003C\u002Fspan> | **MultiHop-RAG: Benchmarking Retrieval-Augmented Generation for Multi-Hop Queries**\u003Cbr>\u003Csub>机构: Hong Kong University of Science and Technology\u003Cbr>这篇论文开发了MultiHop-RAG数据集，以评估和改善现存的检索增强生成（RAG）系统在处理需要多步检索和推理的查询上的不足。研究还提供了一系列实验结果，揭示了目前RAG系统在此类任务上的局限性，并公开了数据集推动进一步的研究和开发。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.15391v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.15391.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fyixuantt\u002FMultiHop-RAG)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-26\u003C\u002Fspan> | **EAGLE: Speculative Sampling Requires Rethinking Feature Uncertainty**\u003Cbr>\u003Csub>机构: Peking University, Microsoft Research, University of Waterloo\u003Cbr>文章提出了一个名为EAGLE的新框架，以提高大型语言模型（LLMs）自回归解码的速度，同时保证生成文本与原始LLMs的文本分布一致。EAGLE通过改进推测性采样方法，在减少时间开销和提高草稿的接受率方面取得了显著成效，对比Lookahead和Medusa实现了更快的加速效果，并且训练成本低，易于部署。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.15077v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.15077.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-25\u003C\u002Fspan> | **Towards Consistent Natural-Language Explanations via Explanation-Consistency Finetuning**\u003Cbr>\u003Csub>机构: Columbia University, Microsoft Research, University of California Berkeley\u003Cbr>EC-Finetuning方法成功地提高了LLMs生成解释的一致性，并且可以推广到未见过的数据集，表现出微调数据集上10.0%和分布外数据集上4.5%的解释一致性相对改善，同时也适度提升了预测准确度。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.13986v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.13986.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fyandachen\u002Fexplanation-consistency-finetuning)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-25\u003C\u002Fspan> | **ConstraintChecker: A Plugin for Large Language Models to Reason on Commonsense Knowledge Bases**\u003Cbr>\u003Csub>机构: HKUST\u003Cbr>ConstraintChecker是一个能有效提升LLMs在CSKB推理任务中性能的独立插件工具。通过提供和检查显式约束的方式，它能够帮助LLMs在推理中取得更好的表现，且在经过验证后的指标上超过了其他的提示技术。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.14003v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.14003.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FHKUST-KnowComp\u002FConstraintChecker)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-25\u003C\u002Fspan> | **True Knowledge Comes from Practice: Aligning LLMs with Embodied Environments via Reinforcement Learning**\u003Cbr>\u003Csub>机构: Nanyang Technological University, Zhejiang University\u003Cbr>TWOSOME框架通过强化学习来有效地将大型语言模型（LLMs）与体现环境对齐，提高了样本效率和任务泛化能力，同时保留了LLMs的原始功能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.14151v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.14151.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-24\u003C\u002Fspan> | **Can AI Assistants Know What They Don't Know?**\u003Cbr>\u003Csub>机构: Fudan University, Shanghai Artificial Intelligence Laboratory\u003Cbr>这篇论文重点探究了AI助手识别自己知识边界的能力，并通过构建Idk数据集并对助手调整，实现了让AI助手识别并承认不知道的问题，以减少回答中的事实错误。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.13275v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.13275.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-24\u003C\u002Fspan> | **MM-LLMs: Recent Advances in MultiModal Large Language Models**\u003Cbr>\u003Csub>机构: Tencent AI Lab, Kyoto University, Mohamed Bin Zayed University of Artificial Intelligence\u003Cbr>本文是一项关于MM-LLMs的综合性调研，旨在进一步推动MM-LLMs领域的研究工作。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.13601v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.13601.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-24\u003C\u002Fspan> | **Consistency Guided Knowledge Retrieval and Denoising in LLMs for Zero-shot Document-level Relation Triplet Extraction**\u003Cbr>\u003Csub>机构: Nanjing University of Science and Technology, Northeastern University, Singapore Institute of Technology\u003Cbr>论文提出了一个新的Zero-shot Document-level Relation Triplet Extraction (ZeroDocRTE)框架，该框架通过从LLMs中检索和去噪知识生成带标签的数据，并通过一系列新方法显著提高了文档级关系三元组抽取的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.13598v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.13598.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-24\u003C\u002Fspan> | **Clue-Guided Path Exploration: An Efficient Knowledge Base Question-Answering Framework with Low Computational Resource Consumption**\u003Cbr>\u003Csub>机构: Tsinghua University, Zhongguancun Laboratory, XinJiang University\u003Cbr>论文提出的CGPE框架能有效支持LLMs在问答任务中的应用，通过线索引导的路径探索机制，降低了对LLMs能力的要求，并显著减少了计算资源消耗，对计算资源有限的个人和组织具有重要实际意义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.13444v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.13444.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-24\u003C\u002Fspan> | **AgentBoard: An Analytical Evaluation Board of Multi-turn LLM Agents**\u003Cbr>\u003Csub>机构: The University of Hong Kong, Zhejiang University, Shanghai Jiao Tong University\u003Cbr>研究人员提出了一个新的基准测试 AGENTBOARD，专门评估具有多轮交互能力的大语言模型代理，它提供了细粒度的进展率和交互式分析工具，以增进对 LLM 代理性能的深入理解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.13178v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.13178.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-23\u003C\u002Fspan> | **AutoRT: Embodied Foundation Models for Large Scale Orchestration of Robotic Agents**\u003Cbr>\u003Csub>机构: Google DeepMind\u003Cbr>本论文描述了一个名为AutoRT的系统，它利用大型基础模型控制真实世界中的机器人，使它们能够自动导航并执行任务。这标志着第一次实现LLM控制的机器人在真实环境中进行自动操作、提出目标并实现这些目标。通过AutoRT收集到的数据不仅多样化且能够提高机器人学习模型的性能，并且可以与人类偏好保持一致。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.12963v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.12963.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-23\u003C\u002Fspan> | **KAM-CoT: Knowledge Augmented Multimodal Chain-of-Thoughts Reasoning**\u003Cbr>\u003Csub>机构: Samsung R&D Institute India - Bangalore\u003Cbr>KAM-CoT是一个多模态CoT推理框架，整合了CoT推理、知识图谱和多种模态。它在具有较少可训练参数的情况下优于现有的最先进方法，展现出卓越的性能和成本效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.12863v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.12863.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-23\u003C\u002Fspan> | **Large Language Models are Superpositions of All Characters: Attaining Arbitrary Role-play via Self-Alignment**\u003Cbr>\u003Csub>机构: Alibaba Inc.\u003Cbr>论文提出了一种名为DITTO的自对齐方法，能够通过知识增强和对话模拟增强LLMs的角色扮演能力。此外，它提供了一种客观、可复制、可解释且高效的角色扮演评估方法，并通过跨监督的实验了解角色扮演的分解，为LLMs构建角色扮演功能提供了深入的理解和见解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.12474v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.12474.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FOFA-Sys\u002FDitto)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-23\u003C\u002Fspan> | **CCA: Collaborative Competitive Agents for Image Editing**\u003Cbr>\u003Csub>该论文提出了一种基于多个大语言模型(LLMs)的新型生成模型CCA，能够处理复杂的图像编辑任务并提升结果的质量和鲁棒性。通过鼓励代理的协作竞争，模型展示出优于传统方法的能力，尤其在管理复杂任务和从中间步骤中学习以改进结果方面。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.13011v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.13011.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FTiankaiHang\u002FCCA)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-22\u003C\u002Fspan> | **Improving Small Language Models' Mathematical Reasoning via Mix Thoughts Distillation**\u003Cbr>\u003Csub>机构: Institute of Information Engineering, Chinese Academy of Sciences\u003Cbr>这篇论文通过介绍EoTD和MTD，表明了可以将LLMs的数学推理能力转化给参数数量少于一十亿个的SLMs。通过实验验证了这些方法不仅保留了SLMs的推理能力，还在一定程度上提升了该能力，使SLMs在推理任务上达到了最好水平。这一进展对于在资源受限的环境中推广SLMs的应用打开了大门，并缩小了对强大推理模型需求与计算资源限制之间的差距。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.11864v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.11864.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-22\u003C\u002Fspan> | **PsySafe: A Comprehensive Framework for Psychological-based Attack, Defense, and Evaluation of Multi-agent System Safety**\u003Cbr>\u003Csub>机构: Shanghai Artificial Intelligence Laboratory, Dalian University of Technology\u003Cbr>本文提出了一个针对多智能体系统安全性的综合性框架PsySafe，该框架结合了心理层面的攻击、防御与评估方法。研究的实验结果有助于更深入地理解和研究多智能体系统的安全问题。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.11880v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.1188.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-22\u003C\u002Fspan> | **CheXagent: Towards a Foundation Model for Chest X-Ray Interpretation**\u003Cbr>\u003Csub>机构: Stanford University, Stability AI  \u003Cbr>本论文致力于解决在自动化胸部X光解释方面存在的挑战，通过引入专为CXR解释设计的大型数据集、开发了新的基础模型以及创建了一个全面的评估基准，实现了在医学成像领域的应用，并证明了在多项评估任务中CheXagent的性能优于其他模型。同时也对模型中可能存在的偏差进行了检查，为未来的研究和应用提供了重要参考。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.12208v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.12208.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-21\u003C\u002Fspan> | **Interactive AI with Retrieval-Augmented Generation for Next Generation Networking**\u003Cbr>\u003Csub>机构: Nanyang Technological University, Guangdong University of Technology, Institute for Infocomm Research, Agency for Science Technology and Research\u003Cbr>本文研究了将交互式AI (IAI) 集成到下一代网络中的可能性，采用了检索增强型生成（RAG）和大型语言模型（LLM）来提升决策能力，并通过真实网络优化的案例研究证明了提出框架的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.11391v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.11391.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-20\u003C\u002Fspan> | **BadChain: Backdoor Chain-of-Thought Prompting for Large Language Models**\u003Cbr>\u003Csub>机构: University of Illinois Urbana-Champaign, University of Washington, Western Washington University\u003Cbr>本文提出了BadChain，这是一种针对采用COT提示的LLMs的后门攻击，不仅不需要访问训练数据集或模型参数，而且计算开销低。该方法有效地揭示了COT提示下LLMs的安全漏洞，强调了进行后门攻击和设计有效防御的重要性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.12242v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.12242.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-19\u003C\u002Fspan> | **Mitigating Hallucinations of Large Language Models via Knowledge Consistent Alignment**\u003Cbr>\u003Csub>机构: Sun Yat-sen University, Tencent AI Lab\u003Cbr>这篇论文引入了一种新颖的KCA方法，通过减少外部知识和内在知识之间的不一致性，从而减轻LLMs在校准过程中产生的幻觉。研究提供了未来研究的几个见解，尤其是KCA方法在多种场景下的出色表现，以及其简单性与有效性的结合。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.10768v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.10768.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Ffanqiwan\u002FKCA)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-19\u003C\u002Fspan> | **Pruning for Protection: Increasing Jailbreak Resistance in Aligned LLMs Without Fine-Tuning**\u003Cbr>\u003Csub>机构: MIT\u003Cbr>论文展示了通过Wanda剪枝方法，无需微调而提升LLMs从对齐安全性方面抵御“越狱”攻击的能力，并通过构建特定的数据集和评估体系验证模型表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.10862v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.10862.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-19\u003C\u002Fspan> | **Tool-LMM: A Large Multi-Modal Model for Tool Agent Learning**\u003Cbr>\u003Csub>机构: ShanghaiTech University, Meituan, UniDT\u003Cbr>Tool-LMM为首个致力于训练大型多模态模型以学习工具代理的系统，创新地整合了多模态输入与外部工具的正确选择，克服了文本模糊带来的问题，展现了在多模态指令下自动选择合适工具的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.10727v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.10727.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FTool-LMM\u002FTool-LMM)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-19\u003C\u002Fspan> | **Medusa: Simple LLM Inference Acceleration Framework with Multiple Decoding Heads**\u003Cbr>\u003Csub>机构: Princeton University, Together AI, University of Illinois Urbana-Champaign\u003Cbr>文章提出了一个名为Medusa的LLM推理加速框架，通过增加额外的解码头并用树形注意力机制，并行生成多个token，有效减少解码步骤数量，实现了对大模型推理速度的显著提升。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.10774v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.10774.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-18\u003C\u002Fspan> | **Advancing Large Multi-modal Models with Explicit Chain-of-Reasoning and Visual Question Generation**\u003Cbr>\u003Csub>机构: The University of Tokyo, RIKEN\u003Cbr>这项研究通过创新地整合一个显性的推理过程和生成问题的能力到LMM中，以促进模型进行更可靠的推理。创建了一个新的数据集并利用它对模型进行培训，为今后LMM的进步设定了先例，并通过这种方式使模型在面临不确定性时能生成显性推理步骤和提问。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.10005v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.10005.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-18\u003C\u002Fspan> | **A Fast, Performant, Secure Distributed Training Framework For Large Language Model**\u003Cbr>\u003Csub>机构: Ant Group China\u003Cbr>本论文提出了一个基于模型切片的安全分布式训练框架，能在保证模型训练精度和高效率的同时，解决了服务端和客户端的模型参数及数据泄露问题。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.09796v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.09796.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-18\u003C\u002Fspan> | **ChatQA: Building GPT-4 Level Conversational QA Models**\u003Cbr>\u003Csub>机构: NVIDIA\u003Cbr>ChatQA模型通过两阶段的指令微调策略显著改进了多轮对话式问答的效果，尤其是在上下文理解和信息检索方面。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.10225v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.10225.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-18\u003C\u002Fspan> | **Self-Rewarding Language Models**\u003Cbr>\u003Csub>机构: Meta, NYU  \u003Cbr>本文提出了自奖励语言模型（Self-Rewarding Language Models），旨在通过自我训练来避免人类偏好数据的瓶颈，并提高模型的自奖励和执行指令的能力。实验结果表明，该模型表现出色，有望成为连续自我改进模型的开山之作。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.10020v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.1002.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-17\u003C\u002Fspan> | **Vlogger: Make Your Dream A Vlog**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University, Shanghai AI Laboratory, Shenzhen Institute of Advanced Technology Chinese Academy of Sciences\u003Cbr>本论文通过介绍Vlogger系统，展示了一个创新的办法将LLMs应用于视频博客的生成过程中，从而克服了生成分钟级连贯视频内容的挑战，并取得了优异的实验结果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.09414v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.09414.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fzhuangshaobin\u002FVlogger)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-17\u003C\u002Fspan> | **LLMs for Relational Reasoning: How Far are We?**\u003Cbr>\u003Csub>机构: Continental-NTU Corporate Lab, Nanyang Technological University, Singapore\u003Cbr>本论文主要探讨了大型语言模型在关系推理方面的能力和局限性。通过全面的评估，包括新提出的测试方法和评估模块，发现LLMs虽然在某些关系推理任务上表现不错，但与专门为逻辑推理设计的模型相比，其性能相对较差。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.09042v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.09042.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-17\u003C\u002Fspan> | **ReFT: Reasoning with Reinforced Fine-Tuning**\u003Cbr>\u003Csub>机构: ByteDance Research\u003Cbr>ReFT通过利用强化学习优化非可微目标，显著提高了大型语言模型在数学问题求解任务中的性能和泛化能力。它超越了传统的监督式学习方法，展现了在更复杂推理任务中的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.08967v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.08967.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-16\u003C\u002Fspan> | **RAG vs Fine-tuning: Pipelines, Tradeoffs, and a Case Study on Agriculture**\u003Cbr>\u003Csub>机构: Microsoft\u003Cbr>本文研究了大型语言模型在农业数据上生成问答对的性能，并提出了一个新的生成管道，有效地使用了RAG和微调技术增强LLM的应用场景，拓展了LLM在特定行业的应用潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.08406v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.08406.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-16\u003C\u002Fspan> | **MARIO: MAth Reasoning with code Interpreter Output -- A Reproducible Pipeline**\u003Cbr>\u003Csub>机构: Alibaba Group  \u003Cbr>论文提出了一个新的数学推理数据集，该数据集与Python代码解释器相结合，通过改进数据集并实施特定微调流程显著提高了LLM在数学问题求解任务上的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.08190v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.0819.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-16\u003C\u002Fspan> | **Contrastive Preference Optimization: Pushing the Boundaries of LLM Performance in Machine Translation**\u003Cbr>\u003Csub>机构: Johns Hopkins University, Microsoft\u003Cbr>本论文提出了CPO，一个新的LLM微调方法，有效解决了SFT在机器翻译任务中存在的瓶颈，实现了在资源消耗极少的情况下显著提升中等规模LLM翻译模型的性能，最终与最先进的状态艺术翻译系统齐头并进。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.08417v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.08417.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-16\u003C\u002Fspan> | **SpecGen: Automated Generation of Formal Program Specifications via Large Language Models**\u003Cbr>\u003Csub>机构: Nanjing University, Nanyang Technological University, Singapore Management University\u003Cbr>论文提出了 SpecGen，一个结合了大型语言模型和启发式选择策略的程序形式化规范自动生成技术。通过比较与现有工具和纯 LLM 方法，SpecGen 表现出更高效和准确的生成规范的能力，并且提出了数据集促进后续研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.08807v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.08807.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-16\u003C\u002Fspan> | **Salute the Classic: Revisiting Challenges of Machine Translation in the Age of Large Language Models**\u003Cbr>\u003Csub>机构: Tencent AI Lab\u003Cbr>本文深入分析了LLMs在机器翻译任务中领域不匹配问题，并实验了不同数量的平行数据对LLMs翻译能力的影响，展现出LLMs在处理这些挑战中的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.08350v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.0835.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fpangjh3\u002FLLM4MT)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-16\u003C\u002Fspan> | **DoraemonGPT: Toward Understanding Dynamic Scenes with Large Language Models**\u003Cbr>\u003Csub>机构:  Zhejiang University\u003Cbr>DoraemonGPT是一个LLM驱动的智能体，通过符号记忆和工具集来理解并解答涉及动态视频的复杂问题。其采用了MCTS规划器优化回答的生成过程，能够在真实世界场景中处理更为复杂的任务。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.08392v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.08392.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-15\u003C\u002Fspan> | **A Study on Large Language Models' Limitations in Multiple-Choice Question Answering**\u003Cbr>\u003Csub>机构: David R. Cheriton School of Computer Science\u003Cbr>该论文针对LLMs在MCQ任务中的限制进行了研究，指出多数模型在此类任务中表现不佳。论文还发现模型的回答往往依赖于选项顺序，并提出了有效的评估方法来排除这些偏见。论文推荐在使用MCQ评估LLMs时要格外小心，并测试模型是否真正理解了任务。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.07955v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.07955.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-15\u003C\u002Fspan> | **MAPLE: Multilingual Evaluation of Parameter Efficient Finetuning of Large Language Models**\u003Cbr>\u003Csub>机构: Microsoft Research India\u003Cbr>这篇论文研究了大型语言模型在多语言任务上通过参数高效微调后的性能，特别是在低资源语言和英语任务上。研究展示了PEFT的潜力，同时指出了未来工作的一些可能方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.07598v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.07598.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-15\u003C\u002Fspan> | **The What, Why, and How of Context Length Extension Techniques in Large Language Models -- A Detailed Survey**\u003Cbr>\u003Csub>机构: Technology Innovation Institute UAE, Islamic University of Technology Bangladesh, Stanford University, Amazon GenAI, AI Institute University of South Carolina\u003Cbr>本论文是关于LLMs上下文长度扩展技术的详细调研。它为研究人员提供了该领域的现有策略和挑战的有组织概览，并鼓励了对未来发展的讨论。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.07872v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.07872.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-14\u003C\u002Fspan> | **Small LLMs Are Weak Tool Learners: A Multi-LLM Agent**\u003Cbr>\u003Csub>机构: Sun Yat-sen University, Alibaba Group\u003Cbr>研究表明小型LLM在作为工具学习者方面较为薄弱，通过引入α-UMi多LLM框架来构建性能更优的LLM代理，提出了必要的双阶段微调策略，并深入分析了数据规模法则。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.07324v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.07324.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-13\u003C\u002Fspan> | **Bridging the Preference Gap between Retrievers and LLMs**\u003Cbr>\u003Csub>本论文介绍了BGM框架以解决检索器和LLMs之间的\"偏好差\"问题，通过一个序列到序列（seq2seq）的桥模型结合SL和RL的训练方案，优化了检索信息以满足LLMs的偏好，改进了多个下游任务的表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06954v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06954.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-12\u003C\u002Fspan> | **From Automation to Augmentation: Large Language Models Elevating Essay Scoring Landscape**\u003Cbr>\u003Csub>机构: Tsinghua University, University of Maryland, Beijing Xicheng Educational Research Institute  \u003Cbr>本文的研究展现了大型语言模型在教育领域中，特别是在AES系统中的潜力。LLMs不仅能够自动化评分过程，还能够通过生成反馈来增强人类评分者的表现。这不仅是技术上的进步，更为未来的人工智能辅助教育和人工智能与人类的高效协作提供了宝贵见解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06431v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06431.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-12\u003C\u002Fspan> | **TestSpark: IntelliJ IDEA's Ultimate Test Generation Companion**\u003Cbr>\u003Csub>机构: JetBrains Research, Delft University of Technology\u003Cbr>论文提出了TestSpark插件，它结合了基于搜索的软件测试生成和基于语言模型的测试生成方法，在IntelliJ IDEA中提高了单元测试的生成和集成效率，同时解决了LLM生成测试用例可编译性的问题。插件的开源特性使其成为连接软件开发者和研究者的桥梁，有助于测试生成技术的实用性进步。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06580v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.0658.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FJetBrains-Research\u002FTestSpark)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-12\u003C\u002Fspan> | **An Experimental Design Framework for Label-Efficient Supervised Finetuning of Large Language Models**\u003Cbr>\u003Csub>机构: University of Washington Seattle, University of Wisconsin-Madison, Stanford University\u003Cbr>这篇论文提出了一个实验设计框架，为了提高大型语言模型在监督式微调（SFT）过程中的标签效率。它展示了实验设计技术可以在维持低计算成本的同时，大幅提高标签效率，在一些任务中与随机采样相比节省了50%的注释成本。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06692v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06692.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-12\u003C\u002Fspan> | **APAR: LLMs Can Do Auto-Parallel Auto-Regressive Decoding**\u003Cbr>\u003Csub>机构: Tsinghua University, Zhipu AI\u003Cbr>通过实施APAR，该研究成功提高了LLMs在内存受限场景和高吞吐率场景下的解码效率和生成速度，同时保持了生成质量，为大语言模型的部署提供了一种新的高效策略。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06761v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06761.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-12\u003C\u002Fspan> | **Kun: Answer Polishment for Chinese Self-Alignment with Instruction Back-Translation**\u003Cbr>\u003Csub>机构: Tianyu Zheng, Shuyue Guo, Xingwei Qu, Jiawei Guo, Weixu Zhang, Xinrun Du, Chenghua Lin, Wenhao Huang, Wenhu Chen, Jie Fu, Ge Zhang\u003Cbr>这篇论文提出了Kun策略，解决了中文大型语言模型指令微调中存在的数据一致性问题，通过AP过程和新的数据生成方法，减少了对人工标注的依赖。评估结果表明，Kun策略在创建高质量数据集方面具有明显优势。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06477v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06477.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FZheng0428\u002FCOIG-Kun)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-12\u003C\u002Fspan> | **How Johnny Can Persuade LLMs to Jailbreak Them: Rethinking Persuasion to Challenge AI Safety by Humanizing LLMs**\u003Cbr>\u003Csub>机构: Virginia Tech, Renmin University of China, UC Davis\u003Cbr>本论文提出了将LLMs视为具备类人沟通能力的实体，利用了一个新的视角来研究AI安全问题。通过将十多年的社会科学研究应用于AI安全，制定了一个说服技巧分类法，并通过创建的工具自动生成了对抗性提示。结果表明，说服技巧可以有效地增强有风险行为被LLMs执行的可能性，同时揭示了当前防御手段在应对这类策略时的不足。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06373v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06373.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-12\u003C\u002Fspan> | **Teaching Code LLMs to Use Autocompletion Tools in Repository-Level Code Generation**\u003Cbr>\u003Csub>机构: Nanyang Technological University, Fudan University\u003Cbr>该论文成功提出了一种新方法TOOLGEN，通过集成自动完成工具到仓库级代码生成中的LLMs，解决了依赖性问题，提高了代码生成的质量和成功率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06391v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06391.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-11\u003C\u002Fspan> | **Improving Large Language Models via Fine-grained Reinforcement Learning with Minimum Editing Constraint**\u003Cbr>\u003Csub>机构: Gaoling School of Artificial Intelligence, Renmin University of China; School of Information, Renmin University of China; Kuaishou Technology, Beijing China.\u003Cbr>本论文提出了一种新的RL方法，名为RLMEC，通过生成式奖励模型和最小编辑机制，使大型语言模型在RL训练过程中实现更精细的监督和训练的稳定性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06081v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06081.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FRUCAIBox\u002FRLMEC)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-11\u003C\u002Fspan> | **Chain of History: Learning and Forecasting with LLMs for Temporal Knowledge Graph Completion**\u003Cbr>\u003Csub>机构: Tsinghua Shenzhen International Graduate School Tsinghua University, School of Computer Science Peking University, Baidu Inc.\u003Cbr>本论文提出了一种使用大型语言模型进行时间知识图谱完成的方法，通过高效的微调方法和结合结构信息的历史数据增强，提高了模型的推理能力和性能。实验显示该方法有效地提升了时间知识图谱预测的精度，达到了最先进的结果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06072v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06072.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-11\u003C\u002Fspan> | **Risk Taxonomy, Mitigation, and Assessment Benchmarks of Large Language Model Systems**\u003Cbr>\u003Csub>机构: Zhongguancun Laboratory, Tsinghua University, Institute of Information Engineering Chinese Academy of Sciences\u003Cbr>本文为大语言模型系统中的风险分类、缓解措施以及评估标准提供了全面的概述，提出了一个新的系统化分类框架，帮助开发者更全面地理解和处理LLM系统的潜在风险。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05778v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05778.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-11\u003C\u002Fspan> | **Patchscope: A Unifying Framework for Inspecting Hidden Representations of Language Models**\u003Cbr>\u003Csub>机构: Google Research, Tel Aviv University\u003Cbr>该论文提出了一个名为Patchscopes的框架，提供了一种新的方法去解释大型语言模型（LLMs）隐藏表示中编码的信息，并且能够纠正多步推理错误。Patchscopes作为一种通用的可配置框架，不仅统一了现有的解释工具，并解决了它们自身的一些不足，同时也开辟了新的研究和应用可能性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06102v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06102.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-11\u003C\u002Fspan> | **TOFU: A Task of Fictitious Unlearning for LLMs**\u003Cbr>\u003Csub>机构: Carnegie Mellon University\u003Cbr>文章为LLM遗忘问题提供了新的数据集和评估机制，TOFU任务展示了现有遗忘技术的不足，鼓励了相继而来的改进和研究工作。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06121v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06121.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-11\u003C\u002Fspan> | **LLM-as-a-Coauthor: The Challenges of Detecting LLM-Human Mixcase**\u003Cbr>\u003Csub>机构: LAIR Lab Lehigh University, Huazhong University of Science and Technology  \u003Cbr>本文定义了混合场景中的混合文本（mixcase），构建了MIXSET数据集，并提出了通向解决混合文本检测问题的见解和方向。研究发现，现有的检测器在识别混合文本方面存在不足，这提出了制定更细粒度检测器的紧迫需求。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05952v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05952.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FDongping-Chen\u002FMixSet)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-11\u003C\u002Fspan> | **Evidence to Generate (E2G): A Single-agent Two-step Prompting for Context Grounded and Retrieval Augmented Reasoning**\u003Cbr>\u003Csub>机构: Qatar Computing Research Institute \u003Cbr>本论文提出了一个新的、用于改善LLMs在上下文推理能力的单代理双步提示框架——Evidence to Generate (E2G)。通过要求LLMs在生成答案的同时提供证据与解释，E2G能够减少错误推理并提高模型在处理各种推理任务时的准确度。实验结果表明，E2G方法在多个情境密集型语言任务中表现出较CoT更好的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05787v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05787.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-11\u003C\u002Fspan> | **EASYTOOL: Enhancing LLM-based Agents with Concise Tool Instruction**\u003Cbr>\u003Csub>机构: Fudan University, Microsoft Research Asia, Zhejiang University\u003Cbr>本文提出了一种名为EASYTOOL的方法，可以通过简化和统一工具文档的指令来提高LLM基础代理在工具使用方面的表现，解决了现有工具使用中的不一致性、冗余性和不完整性问题。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06201v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.06201.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fmicrosoft\u002FJARVIS)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-11\u003C\u002Fspan> | **The Benefits of a Concise Chain of Thought on Problem-Solving in Large Language Models**\u003Cbr>\u003Csub>机构: Johns Hopkins University\u003Cbr>此研究表明，通过使用简洁的思维链提示（CCoT），在大型语言模型中可以大幅减少文本输出的长度，而不会影响解决问题的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05618v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05618.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-10\u003C\u002Fspan> | **InfiAgent-DABench: Evaluating Agents on Data Analysis Tasks**\u003Cbr>\u003Csub>InfiAgent-DABench提供了一个新颖的评估基准，这不仅有助于衡量智能代理在数据分析任务中的性能，同时也是探索如何改进和优化LLM在这一特定领域应用的重要一步。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05507v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05507.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FInfiAgent\u002FInfiAgent)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-10\u003C\u002Fspan> | **CASA: Causality-driven Argument Sufficiency Assessment**\u003Cbr>\u003Csub>机构: Peking University\u003Cbr>本论文介绍了一个基于LLMs的零样本因果驱动论证充分性评估框架（CASA），成功应对了无观测数据下论证充分性量化和干预的难题，并在实际应用中展示了其有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05249v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05249.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fxxxiaol\u002FCASA)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-10\u003C\u002Fspan> | **Leveraging Print Debugging to Improve Code Generation in Large Language Models**\u003Cbr>\u003Csub>机构: Zhejiang University, ByteDance\u003Cbr>本文提出了一种利用print debugging方法指导LLMs进行代码生成和调试的方法，并且在Leetcode问题集上验证了其有效性，特别是在简单和中等难度的问题上。尽管在高难度问题上效果有限，但这项工作仍然是LLMs在代码调试方面的一个重要进步。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05319v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05319.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-10\u003C\u002Fspan> | **AUTOACT: Automatic Agent Learning from Scratch via Self-Planning**\u003Cbr>\u003Csub>机构: Zhejiang University, Alibaba Group\u003Cbr>这项研究提出了一个名为AUTOACT的框架，它通过自我指导和自我规划实现语言代理的自动学习，以应对从零开始学习新任务的挑战。该框架的核心贡献在于有效的数据扩充方法和高效率的自动代理学习过程。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05268v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05268.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fzjunlp\u002FAutoAct)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-10\u003C\u002Fspan> | **Prompting Large Language Models for Recommender Systems: A Comprehensive Framework and Empirical Analysis**\u003Cbr>\u003Csub>机构: Renmin University of China, Beijing Key Laboratory of Big Data Management and Analysis Methods, Meituan Group\u003Cbr>这项工作提出了一个名为ProLLM4Rec的框架，系统地分析了利用大型语言模型(LLMs)作为推荐系统的基础模型，并通过实验测试了不同情况下对LLMs的影响。通过实证分析，总结了对未来研究的启发性发现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04997v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.04997.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-10\u003C\u002Fspan> | **Attendre: Wait To Attend By Retrieval With Evicted Queries in Memory-Based Transformers for Long Context Processing**\u003Cbr>\u003Csub>机构: Google Research\u003Cbr>论文成功地提出了一个新的基于内存的转换器方法，通过存储驱逐策略和ATTENDRE层，有效地减少内存需求并支持双向注意力，在长序列处理上表现出与传统方法相当的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04881v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.04881.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-10\u003C\u002Fspan> | **Bootstrapping LLM-based Task-Oriented Dialogue Agents via Self-Talk**\u003Cbr>\u003Csub>机构: AWS AI Labs\u003Cbr>论文提出了一种基于大型语言模型（LLMs）自我对话生成训练数据的新方法，该方法有潜力改进任务导向对话代理的性能。尽管存在一些限制，研究结果表明，当选择高质量对话作为训练数据时，可以有效提高模型的性能。这证明了在正确的设置下，通过自我生成数据进行微调的语言模型确实有潜力实现自我改进，并成为更好的任务导向对话代理。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05033v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05033.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-10\u003C\u002Fspan> | **Personal LLM Agents: Insights and Survey about the Capability, Efficiency and Security**\u003Cbr>\u003Csub>机构: Tsinghua University, Xiaomi AI Lab\u003Cbr>该论文作为一项调研工作，介绍了个人LLM代理的现状、挑战和未来趋势，并提出了一种通用的系统架构和智能水平定义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.05459v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.05459.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-09\u003C\u002Fspan> | **Know Your Needs Better: Towards Structured Understanding of Marketer Demands with Analogical Reasoning Augmented LLMs**\u003Cbr>\u003Csub>机构: Zhejiang University, Ant Group\u003Cbr>本文提出了一种名为ARALLM的新方法，该方法结合了类比推理和多任务模型提炼，有效促进了大型语言模型从自然语言中理解并转换为结构化的逻辑语言的能力。通过这种方法，非专业营销人员能够利用自然语言来选择目标用户，有望改变用户定位实践。这种能力的提升，不仅在营销场景中有实际的应用价值，同时也为大型语言模型的功能性和实用性做出了有益的探索。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04319v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.04319.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-09\u003C\u002Fspan> | **Large Language Models for Robotics: Opportunities, Challenges, and Perspectives**\u003Cbr>\u003Csub>机构: Northwestern Polytechnical University, University of Georgia, Shaanxi Normal University\u003Cbr>论文提出的多模态GPT-4V框架，结合自然语言处理和视觉感知，有望解决LLMs在机器人任务规划中面对的挑战。这对于理解和实现更高级别的人机交互和人工智能的未来具有重要意义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04334v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.04334.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-09\u003C\u002Fspan> | **Chain-of-Table: Evolving Tables in the Reasoning Chain for Table Understanding**\u003Cbr>\u003Csub>机构: University of California San Diego, Google Cloud AI Research, Google Research\u003Cbr>该论文提出了一个创新的CHAIN-OF-TABLE框架，通过将表格数据显式地用于推理链，动态地规划并更新操作过程，从而提高了LLMs在基于表格的推理任务中的准确性和可靠性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04398v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.04398.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-09\u003C\u002Fspan> | **Rewriting the Code: A Simple Method for Large Language Model Augmented Code Search**\u003Cbr>\u003Csub>机构: Nanyang Technological University Singapore\u003Cbr>ReCo利用LLMs重写代码库中的代码，通过风格规范化显著提高了代码搜索的准确性，并通过新的评价指标CSSim量化了风格的差异，推动了代码样式标准化的研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04514v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.04514.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-09\u003C\u002Fspan> | **The Critique of Critique**\u003Cbr>\u003Csub>机构: The Hong Kong Polytechnic University, Shanghai Jiao Tong University, Shanghai Artificial Intelligence Laboratory\u003Cbr>METACRITIQUE是首个针对自然语言批判进行评价的框架，其通过精确度和召回率的原则评估批判的质量，并实现了高度的可解释性和透明性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04518v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.04518.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FGAIR-NLP\u002FMetaCritique)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-09\u003C\u002Fspan> | **Agent Alignment in Evolving Social Norms**\u003Cbr>\u003Csub>机构: Fudan University\u003Cbr>此论文提出了一个EvoluationaryAgent框架，用于评估和增强大型智能代理在动态持续变化的社会规范中的自适应性和一致性。研究强调了代理在进化中与社会规范对齐的重要性，并通过实验验证了模型的可行性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04620v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.0462.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-08\u003C\u002Fspan> | **TTMs: Fast Multi-level Tiny Time Mixers for Improved Zero-shot and Few-shot Forecasting of Multivariate Time Series**\u003Cbr>\u003Csub>机构: IBM Research\u003Cbr>TTM展示了专门针对多样化时间序列数据训练的小型预训练模型在多变量时间序列零\u002F少样本预测中的高效性和转移学习能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.03955v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.03955.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-08\u003C\u002Fspan> | **SpeechAgents: Human-Communication Simulation with Multi-Modal Multi-Agent Systems**\u003Cbr>\u003Csub>机构: Fudan University\u003Cbr>论文提出了一个基于多模态大型语言模型的多代理系统——SpeechAgents，其能模拟包含多达 25 名代理人的人类交流场景，并展现出卓越的可扩展性。通过使用多模态信号作为代理间交流的媒介，系统不仅可以模拟具有正确内容、真实节奏和丰富情感的对话，而且还能应用于如戏剧创作和有声小说生成等任务。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.03945v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.03945.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-08\u003C\u002Fspan> | **MARG: Multi-Agent Review Generation for Scientific Papers**\u003Cbr>\u003Csub>机构: Northwestern University, The Hebrew University of Jerusalem, Allen Institute for AI\u003Cbr>本论文提出了一个创新的多代理评论生成方法（MARG），可以跨越基础模型的上下文大小限制，生成高质量的科学论文同行评审反馈。通过用户研究和自动化度量，MARG的反馈质量对比基线有显著提高，生成的有用评论数量提高了2.2倍，同时生成了更加具体的评论。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04259v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.04259.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-07\u003C\u002Fspan> | **Soaring from 4K to 400K: Extending LLM's Context with Activation Beacon**\u003Cbr>\u003Csub>机构: Beijing Academy of Artificial Intelligence, Renmin University of China, Nankai University\u003Cbr>这篇文章介绍了激活信标这一能够扩展大型语言模型上下文长度的新技术，使得模型能在有限上下文窗口内感知更广的上下文信息，同时保留对短上下文信息的处理能力。激活信标代表了一种有效、高效、兼容且训练成本低的方法，来扩展LLMs的上下文长度。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.03462v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.03462.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-07\u003C\u002Fspan> | **ChatGPT for Conversational Recommendation: Refining Recommendations by Reprompting with Feedback**\u003Cbr>\u003Csub>机构: University of Louisville, Microsoft\u003Cbr>该论文探索了ChatGPT作为对话推荐系统的有效性。通过构建围绕ChatGPT的流程，模拟用户实际使用情景，并对流行偏见进行了研究和缓解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.03605v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.03605.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-07\u003C\u002Fspan> | **Exploring Large Language Model based Intelligent Agents: Definitions, Methods, and Prospects**\u003Cbr>\u003Csub>机构: The Chinese University of Hong Kong, DeepWisdom, Peking University\u003Cbr>论文提出了一个用于指导未来研究与开发的基于LLM的智能代理系统的框架，并探讨了提高它们的计划能力和多模态信息处理能力的不同方法，以及如何解决LLM代理所面临的挑战，为未来的研究方向提供了清晰的指南。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.03428v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.03428.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-07\u003C\u002Fspan> | **Grimoire is All You Need for Enhancing Large Language Models**\u003Cbr>\u003Csub>机构: Beihang University, Renmin University of China\u003Cbr>该论文提出了一种名为SLEICL的方法，通过强语言模型学习示例技能并将其转移给弱语言模型，显著提高了弱模型的ICL能力。通过实验验证了该方法的有效性，展现了该技术在增强弱语言模型上下文学习能力方面的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.03385v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.03385.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-06\u003C\u002Fspan> | **The Dawn After the Dark: An Empirical Study on Factuality Hallucination in Large Language Models**\u003Cbr>\u003Csub>机构: Renmin University of China, Université de Montréal\u003Cbr>本论文通过系统性实证研究，深入了解并探索大型语言模型中的幻觉问题，识别了幻觉的来源、检测方法和减轻策略，并提出了新的基准HaluEval 2.0和简单有效的幻觉检测框架。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.03205v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.03205.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FRUCAIBox\u002FHaluEval-2.0)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-06\u003C\u002Fspan> | **Quartet Logic: A Four-Step Reasoning (QLFR) framework for advancing Short Text Classification**\u003Cbr>\u003Csub>机构: Aerospace Information Research Institute Chinese Academy of Sciences, Key Laboratory of Target Cognition and Application Technology, University of Chinese Academy of Sciences\u003Cbr>本研究提出了一个针对短文本分类任务的Quartet Logic: A Four-Step Reasoning (QLFR)框架，以及一个CoT驱动的多任务学习（QLFR-CML）方法，这两者都通过大语言模型的推理链来解决STC领域中的挑战。实验结果证明了这些方法的有效性和实用性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.03158v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.03158.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-06\u003C\u002Fspan> | **CogGPT: Unleashing the Power of Cognitive Dynamics on Large Language Models**\u003Cbr>\u003Csub>机构: Harbin Institute of Technology, Kuaishou Technology\u003Cbr>CogGPT通过引入迭代认知机制和记忆保持系统，有效地解决了大型语言模型在模仿人类认知动态方面的挑战，展示了在连续信息处理中的优秀表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.08438v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.08438.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-05\u003C\u002Fspan> | **Infinite-LLM: Efficient LLM Service for Long Context with DistAttention and Distributed KVCache**\u003Cbr>\u003Csub>机构: Alibaba Group, Shanghai Jiao Tong University\u003Cbr>文章提出了一个有效支持长上下文语言模型云服务的系统，通过分布式算法DistAttention，优化了注意力模块的处理和存储，并通过DistKV-LLM服务系统进行管理和协调，实现了在分布式环境中对资源的高效分配和管理，验证了其在性能上的明显提高。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.02669v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.02669.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-05\u003C\u002Fspan> | **From LLM to Conversational Agent: A Memory Enhanced Architecture with Fine-Tuning of Large Language Models**\u003Cbr>\u003Csub>机构: Beike Inc.\u003Cbr>本论文介绍了RAISE框架，通过增强记忆系统和结构化的代理构建过程，提高了LLMs在多轮对话中的表现，尤其是在房地产销售情境中。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.02777v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.02777.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-04\u003C\u002Fspan> | **Using LLM to select the right SQL Query from candidates**\u003Cbr>\u003Csub>机构: Peking University\u003Cbr>本文提出了一种借助大型语言模型自动生成text-to-SQL测试用例的方法，并设计了三步重新排序过程，实验显示该方法能显著提高现有text-to-SQL模型的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.02115v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.02115.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-04\u003C\u002Fspan> | **SPEER: Sentence-Level Planning of Long Clinical Summaries via Embedded Entity Retrieval**\u003Cbr>\u003Csub>机构: Columbia University\u003Cbr>本论文针对医院出院总结的长篇文档任务，提出了一个基于嵌入式实体检索的句子级规划方法SPEER，通过引导大型语言模型LLMs更好地覆盖关键实体，生成更完整和可信的临床总结。研究证明了SPEER方法在实际应用中可以提高文档的覆盖度和准确性，减轻临床医生的文档负担。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.02369v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.02369.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-04\u003C\u002Fspan> | **On the Prospects of Incorporating Large Language Models (LLMs) in Automated Planning and Scheduling (APS)**\u003Cbr>\u003Csub>机构: University of South Carolina, New Mexico State University, IBM Research\u003Cbr>本文是对大型语言模型在自动规划和调度领域的应用进行了综述，提出了将领先的 LLMs 如 GPT-4 和 BERT 与经典规划方法结合的前景，以及在八个不同的规划问题类别中应用 LLMs 的潜力，以期发展更先进、更智能的规划系统。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.02500v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.025.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-04\u003C\u002Fspan> | **On the Prospects of Incorporating Large Language Models (LLMs) in Automated Planning and Scheduling (APS)**\u003Cbr>\u003Csub>机构: University of South Carolina, New Mexico State University, IBM Research\u003Cbr>本论文在理解大型语言模型（LLMs）与自动规划和调度（APS）的整合前景，突破了传统系统对上下文的适应性局限性，为实现更动态、上下文敏感的规划途径提供了可能性，并为进一步的应用和研究奠定了基础。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.02500v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.025.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-04\u003C\u002Fspan> | **Self-Contrast: Better Reflection Through Inconsistent Solving Perspectives**\u003Cbr>\u003Csub>机构: Zhejiang University, OPPO Research Institute\u003Cbr>本文提出了一种名为“自我对比”的新策略，用于改善大型语言模型（LLM）在反思和自我修正过程中存在的固执和不一致问题，通过创建多样化解决方案视角，对比不同解决方案的差异，并将差异总结为检查清单，进而提升了LLM的反思质量，并通过实验验证了该策略的效果和广泛适用性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.02009v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.02009.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-04\u003C\u002Fspan> | **ICE-GRT: Instruction Context Enhancement by Generative Reinforcement based Transformers**\u003Cbr>\u003Csub>机构: Bytedance Inc.\u003Cbr>本论文提出了针对大型语言模型在特定领域任务中深度与准确性提升的方法——ICE-GRT。通过结合人类反馈的强化学习，ICE-GRT 在不牺牲一般性能的前提下，显著提升了特定领域的能力，并在多项评估任务中达到了最先进的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.02072v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.02072.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-04\u003C\u002Fspan> | **LLM Augmented LLMs: Expanding Capabilities through Composition**\u003Cbr>\u003Csub>机构: Google Research, Google DeepMind\u003Cbr>该论文提出了一个新的模型扩展框架 —— CALM，有效整合了两个大型语言模型以实现新的任务，且在多个实验中证明了其有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.02412v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.02412.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-03\u003C\u002Fspan> | **Social Media Ready Caption Generation for Brands**\u003Cbr>\u003Csub>机构: Adobe Research India\u003Cbr>本论文提出了一个新的框架，旨在帮助品牌在社交媒体上创造与品牌形象和个性相符的吸引人的标题。框架分为两部分，成功应对了生成与品牌相关性强且吸引眼球的社交媒体标题的挑战。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.01637v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.01637.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-03\u003C\u002Fspan> | **MedSumm: A Multimodal Approach to Summarizing Code-Mixed Hindi-English Clinical Queries**\u003Cbr>\u003Csub>机构: Indian Institute of Technology Patna, Stanford University, Amazon GenAI\u003Cbr>MedSumm是一个新颖的多模态医疗问题总结框架，它能够通过整合文本和视觉信息生成医学细节丰富的总结，有潜力提高医疗决策的质量并加深对患者问题的理解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.01596v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.01596.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-02\u003C\u002Fspan> | **A Comprehensive Survey of Hallucination Mitigation Techniques in Large Language Models**\u003Cbr>\u003Csub>机构: Islamic University of Technology Bangladesh, University of South Carolina, Stanford University\u003Cbr>本文是对LLM幻觉减轻技术的全面综述，提出了分类框架和系统化的反馈和理由方法，并评估了这些技术的有效性和影响。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.01313v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.01313.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-02\u003C\u002Fspan> | **LLM Maybe LongLM: Self-Extend LLM Context Window Without Tuning**\u003Cbr>\u003Csub>这篇论文成功展示了一种无需fine-tuning即可扩展LLMs上下文窗口的方法，这对于在计算资源受限情况下提升大型语言模型处理长文本的能力具有重要意义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.01325v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.01325.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-01\u003C\u002Fspan> | **A & B == B & A: Triggering Logical Reasoning Failures in Large Language Models**\u003Cbr>\u003Csub>机构: The Chinese University of Hong Kong, Tencent AI Lab\u003Cbr>本论文针对LLMs的逻辑推理能力的评估和改进问题，提出了一个名为LogicAsker的方法，能够全面评估LLMs的推理能力，并通过问题生成和上下文学习有效提升这些能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.00757v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.00757.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-01\u003C\u002Fspan> | **The Earth is Flat? Unveiling Factual Errors in Large Language Models**\u003Cbr>\u003Csub>机构: The Chinese University of Hong Kong, Tencent AI Lab\u003Cbr>本文介绍的FactChecker提供了针对大型语言模型的事实错误自动测试新框架，通过构建知识图谱并生成测试问题，揭示并减少了模型的事实错误。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.00761v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.00761.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>01-01\u003C\u002Fspan> | **From Prompt Engineering to Prompt Science With Human in the Loop**\u003Cbr>\u003Csub>机构: University of Washington\u003Cbr>文章展示了如何将LLMs的提示工程转化为更为科学和系统的提示科学。通过引入人在环中的质性编码方法，确保了LLM生成的响应的质量和一致性，同时消除了个体主观性和随意性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.04122v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2024-01\u002F2401.04122.md)  |\n\n---\n\n\n\n### 十二月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-31\u003C\u002Fspan> | **BatchEval: Towards Human-like Text Evaluation**\u003Cbr>\u003Csub>机构: Beijing Institute of Technology, Xiaohongshu Inc  \u003Cbr>论文提出了一种新的LLM评估范式——BATCHEVAL，解决了自动文本评估在鲁棒性和与人类判断一致性方面的问题。通过批量评估和迭代处理，BATCHEVAL在准确性和成本效率方面显著超越了现有方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.00437v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2401.00437.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-31\u003C\u002Fspan> | **Improving Text Embeddings with Large Language Models**\u003Cbr>\u003Csub>机构: Microsoft Corporation\u003Cbr>本文采用最新的大型语言模型和合成数据，提出一种新颖的文本嵌入方法，能够在无需人工标注数据且训练步骤少于1千的情况下，达到与竞争性基准相匹配的性能，为进一步提升文本嵌入技术提供了有力证据。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.00368v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2401.00368.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-29\u003C\u002Fspan> | **DB-GPT: Empowering Database Interactions with Private Large Language Models**\u003Cbr>\u003Csub>机构: Alibaba Group\u003Cbr>本文提出了名为DB-GPT的创新项目，该项目集成了LLMs及数据库系统，以提升用户体验和无障碍性。DB-GPT展现了层次化设计，有效处理了隐私和安全保护等问题，同时通过多源RAG和自适应ICL提升了系统的整体性能和效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17449v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17449.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Feosphoros-ai\u002FDB-GPT)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-29\u003C\u002Fspan> | **Building Efficient Universal Classifiers with Natural Language Inference**\u003Cbr>\u003Csub>机构: Vrije Universiteit Amsterdam, University of London Royal Holloway, Hugging Face\u003Cbr>这篇论文提供了一种利用自然语言推断进行通用文本分类的新方法，并且提供了实现该方法的详细步骤和工具，能够在不牺牲性能的前提下显著提高模型的效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17543v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17543.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-29\u003C\u002Fspan> | **Enhancing Quantitative Reasoning Skills of Large Language Models through Dimension Perception**\u003Cbr>\u003Csub>机构: **Institution:** Shanghai Key Laboratory of Data Science School of Computer Science Fudan University, School of Data Science Fudan University, DataGrand Co. LTD\u003Cbr>本文的研究通过建立维度单位知识库和定制化基准测试，显著提升了LLMs的定量推理能力。这为理解文本中重要的量值信息并进行高准确度的推理任务提供了新的途径。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17532v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17532.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-29\u003C\u002Fspan> | **The Right Prompts for the Job: Repair Code-Review Defects with Large Language Model**\u003Cbr>\u003Csub>机构: Ant Group, Nanjing University\u003Cbr>研究探讨了LLMs在代码审查缺陷修复中的应用，提出了一个有效的半自动APR范例，分析了9种流行模型的性能，并设计了有效的提示以指导代码修复过程。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17485v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17485.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-29\u003C\u002Fspan> | **Truth Forest: Toward Multi-Scale Truthfulness in Large Language Models through Intervention without Tuning**\u003Cbr>\u003Csub>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17484v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17484.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fjongjyh\u002Ftrfr)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-28\u003C\u002Fspan> | **Experiential Co-Learning of Software-Developing Agents**\u003Cbr>\u003Csub>机构: Tsinghua University,Dalian University of Technology,Beijing University of Posts and Telecommunications\u003Cbr>本文提出了一种新的框架，称为经验共同学习（Experiential Co-Learning），通过共同追踪、共同记忆和共同推理模块的顺序实现，使得LLM驱动的智能代理能够更有效地从历史轨迹中学习，并利用历史经验来相互推理解决新任务。展示了明显优于现有技术的绩效改进。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17025v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17025.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-28\u003C\u002Fspan> | **Challenge LLMs to Reason About Reasoning: A Benchmark to Unveil Cognitive Depth in LLMs**\u003Cbr>\u003Csub>机构: Chinese University of Hong Kong, Tencent AI Lab\u003Cbr>这篇论文提出了一个创新的评估模型，要求LLMs不仅要解决问题，还要进行元推理——即评估推理过程本身。这种方法有望揭示由于以往以结果为导向的评估方法而忽略的模型认知缺陷，为未来LLMs的评估和训练提供了新的方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17080v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1708.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-28\u003C\u002Fspan> | **Structured Packing in LLM Training Improves Long Context Utilization**\u003Cbr>\u003Csub>机构: University of Warsaw, Google DeepMind, Polish Academy of Sciences\u003Cbr>这篇论文通过提出SPLICE方法来改进长距离上下文的利用，验证了其在提高大规模语言模型上下文利用率和改进长上下文任务性能方面的有效性。SPLICE特别适用于在缺乏额外结构化信息的训练数据上构造训练示例。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17296v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17296.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-28\u003C\u002Fspan> | **GitAgent: Facilitating Autonomous Agent with GitHub by Tool Extension**\u003Cbr>\u003Csub>机构: Tsinghua University, Renmin University of China\u003Cbr>文章主要介绍了一个名为GITAGENT的自主代理，它可以自主从GitHub扩展工具，以满足用户查询的多种需求。GITAGENT通过解决非标准化挑战，能够自主学习基于GitHub Issues\u002FPRs的人类经验，以解决工具扩展过程中的问题，并且展示了在自主集成工具以完成跨专业领域任务方面的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17294v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17294.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-28\u003C\u002Fspan> | **Grounding-Prompter: Prompting LLM with Multimodal Information for Temporal Sentence Grounding in Long Videos**\u003Cbr>\u003Csub>机构: Tsinghua University\u003Cbr>本论文提出了Grounding-Prompter方法，针对长视频中的TSG问题，将LLM与时序推理和多模态信息结合起来，证明了通过多模态提示LLM的有效性，并通过实验验证了其在长视频TSG任务中的优越性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17117v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17117.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-28\u003C\u002Fspan> | **Challenge LLMs to Reason About Reasoning: A Benchmark to Unveil Cognitive Depth in LLMs**\u003Cbr>\u003Csub>机构: Chinese University of Hong Kong, Tencent AI Lab\u003Cbr>这篇论文提出了一个挑战LLMs进行元推理的新评估范式，并开发了配套的公开基准DiagGSM8K，这为评估LLMs的认知能力增加了一个新维度。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17080v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1708.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-28\u003C\u002Fspan> | **DrugAssist: A Large Language Model for Molecule Optimization**\u003Cbr>\u003Csub>机构: Tencent AI Lab, Department of Computer Science Hunan University\u003Cbr>DrugAssist是一个通过人机交互进行分子优化的模型，它突破了LLMs在药物发现过程中互动性不足的局限，并在多属性分子优化领域展现了出色的性能和转移能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.10334v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2401.10334.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fblazerye\u002FDrugAssist)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-28\u003C\u002Fspan> | **Improving In-context Learning via Bidirectional Alignment**\u003Cbr>\u003Csub>机构: Nanyang Technological University, Princeton University, Salesforce Research USA\u003Cbr>本文通过引入新颖的排名损失以及对输出分布的对齐，提出了双向对齐(BiAlign)，有效提高了小型模型的 ICL 能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17055v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17055.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-27\u003C\u002Fspan> | **Conversational Question Answering with Reformulations over Knowledge Graph**\u003Cbr>\u003Csub>机构: University of Illinois at Urbana-Champaign, Amazon\u003Cbr>CoRnNet 是一种新型RL模型，用于在知识图谱上进行会话式问题回答并结合LLM生成的改写，展现了比其他先进模型更出色的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17269v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17269.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-27\u003C\u002Fspan> | **Adapting Large Language Models for Education: Foundational Capabilities, Potentials, and Challenges**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University (SJTU)\u003Cbr>本论文是一个关于如何适配大型语言模型于教育系统的综述，它提供了对LLMs在教育相关能力方面的发展情况的概述，并探讨了构建这样系统的潜力与挑战，为未来的相关研究提供了洞见。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.08664v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2401.08664.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-27\u003C\u002Fspan> | **How Robust are LLMs to In-Context Majority Label Bias?**\u003Cbr>\u003Csub>机构: Amazon\u003Cbr>本文对LLMs在面对ICL中多数类标签偏差时的鲁棒性进行了全面研究，通过实验发现某些模型在处理这种偏差时显示出显著的稳定性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.16549v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.16549.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-27\u003C\u002Fspan> | **Rethinking Tabular Data Understanding with Large Language Models**\u003Cbr>\u003Csub>机构: UC San Diego, USC, UC Davis  \u003Cbr>这篇论文深入探讨了LLMs对表格数据的理解和推理能力，对表格结构的鲁棒性、文本与符号推理的比较，以及多推理路径聚合对模型性能提升的影响做出了贡献。所提出的表格结构标准化方法和混合自一致性机制对提高LLMs在表格数据推理上的性能具有重要意义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.16702v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.16702.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-26\u003C\u002Fspan> | **Think and Retrieval: A Hypothesis Knowledge Graph Enhanced Medical Large Language Models**\u003Cbr>\u003Csub>机构: Key Laboratory of High Confidence Software Technologies (Peking University), Ministry of Education; School of Computer Science Peking University, Beijing China\u003Cbr>HyKGE框架有效解决了大型语言模型在面对医疗领域复杂问题时的准确性和解释性挑战，具有在医疗领域中的潜在应用并且在实际场景中展示出了很大的优越性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.15883v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.15883.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-26\u003C\u002Fspan> | **Scaling Down, LiTting Up: Efficient Zero-Shot Listwise Reranking with Seq2seq Encoder-Decoder Models**\u003Cbr>\u003Csub>机构: University of Waterloo\u003Cbr>这篇论文提出了LiT5-Distill和LiT5-Score两种序列到序列的编码器-解码器模型，用于有效的零样本列表级重新排序。这些方法不仅在模型效果上竞争力强，并且解决了传统依赖于大型LLM和外部相关性标签的问题，展示了在这一领域的优化和进步。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.16098v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.16098.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fcastorini\u002FLiT5)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-26\u003C\u002Fspan> | **Align on the Fly: Adapting Chatbot Behavior to Established Norms**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University, Shanghai Artificial Intelligence Laboratory, The Hong Kong Polytechnic University\u003Cbr>该工作提出了一个动态的OPO方法，通过收集法律和道德规则作为外部存储器来限制LLMs的行为，无需进一步训练，并通过一个可扩展的评估模块来应对潜在的基准测试泄漏问题及扩大测试规则的范围。尽管该方法在推理效率方面存在局限性并且检索模型仍可进一步优化，但在多个评估数据集上的广泛实验表明了该方法的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.15907v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.15907.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FGAIR-NLP\u002FOPO)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-26\u003C\u002Fspan> | **Supervised Knowledge Makes Large Language Models Better In-context Learners**\u003Cbr>\u003Csub>机构: School of Engineering Westlake University, Westlake Institute for Advanced Study, Peking University\u003Cbr>论文提出的SuperContext框架通过利用特定任务微调的SLMs的监督知识，显著提高了LLMs在自然语言理解和问答任务中的泛化能力和事实性。它代表了将小型模型的强大功能融入LLMs，以处理分布外数据和最小化幻觉现象的一种创新做法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.15918v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.15918.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-26\u003C\u002Fspan> | **KnowledgeNavigator: Leveraging Large Language Models for Enhanced Reasoning over Knowledge Graph**\u003Cbr>\u003Csub>机构: Northeastern University, Neusoft AI Magic Technology Research, Neusoft Institute of Intelligent Medical Research\u003Cbr>这篇论文介绍了一个新型框架KnowledgeNavigator，它通过改善知识图谱上的推理过程，解决了LLM在复杂推理任务上的性能局限问题。实验结果证实了其有效性，并有望在高风险和高敏感领域推广LLM的应用。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.15880v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1588.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-26\u003C\u002Fspan> | **RecRanker: Instruction Tuning Large Language Model as Ranker for Top-k Recommendation**\u003Cbr>\u003Csub>机构: City University of Hong Kong, The Chinese University of Hong Kong, Hangdian University\u003Cbr>该论文提出了RecRanker这一新型框架，它通过指令调整的方式优化了LLMs在top-k推荐任务中的性能，并有效地融合了传统推荐系统的信号，改善了模型在推荐场景中的应用表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.16018v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.16018.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-26\u003C\u002Fspan> | **A Prompt Learning Framework for Source Code Summarization**\u003Cbr>\u003Csub>机构: Nanyang Technological University, Tencent Inc., Nanjing University\u003Cbr>本论文提出了一个新颖的PromptCS框架，用于源代码摘要，能够生成高质量的摘要，减少了训练成本，并提供了代码以供他人研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.16066v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.16066.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-26\u003C\u002Fspan> | **Aligning Large Language Models with Human Preferences through Representation Engineering**\u003Cbr>\u003Csub>机构: Fudan University  \u003Cbr>本论文提出了一个新颖的方法RAHF，通过表示工程技术操纵内部模型表示来对齐LLMs与人类偏好，这种方法在计算上高效且容易实现，并展示了处理多种人类偏好或价值的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.15997v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.15997.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-25\u003C\u002Fspan> | **Alleviating Hallucinations of Large Language Models through Induced Hallucinations**\u003Cbr>\u003Csub>机构: Soochow University, Tencent AI Lab\u003Cbr>论文提出一个新颖的减少LLMs幻觉的方法，通过构建一个事实上较弱的LLM并在生成过程中减去其知识，改进了模型在生成事实性内容方面的表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.15710v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1571.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-25\u003C\u002Fspan> | **ESGReveal: An LLM-based approach for extracting structured data from ESG reports**\u003Cbr>\u003Csub>机构: Alibaba Cloud, Tsinghua University, Sun Yat-Sen University\u003Cbr>ESGReveal代表了在处理ESG数据中的一大步进，旨在通过大型语言模型和相关技术来提高从公司报告中提取结构化数据的一致性和准确性，并推动了ESG实践和透明度的改进。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.17264v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.17264.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-22\u003C\u002Fspan> | **Reasons to Reject? Aligning Language Models with Judgments**\u003Cbr>\u003Csub>机构: Tencent AI Lab, The Chinese University of Hong Kong\u003Cbr>论文提出了一个新的通过直接利用语言反馈来对齐LLMs的框架Contrastive Unlikelihood Training（CUT），并且证明了其在多种场景下的有效性，包括离线对齐和在线对齐，以及从未对齐的模型（冷启动）和已对齐的模型（热启动）进行进一步优化。研究显示，与奖励相比，评判性反馈在对齐LLMs方面具有更大的潜力，值得进行进一步研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.14591v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.14591.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-22\u003C\u002Fspan> | **VIEScore: Towards Explainable Metrics for Conditional Image Synthesis Evaluation**\u003Cbr>\u003Csub>机构: University of Waterloo, IN.AI Research\u003Cbr>该论文提出了一个名为VIEScore的评估框架，旨在提供对条件图像生成任务的可解释性评价。VIEScore克服了现有自动化度量无法解释评分理由的挑战，并能够适应各种任务需求。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.14867v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.14867.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-22\u003C\u002Fspan> | **A Survey of Reinforcement Learning from Human Feedback**\u003Cbr>\u003Csub>机构: LMU Munich, Duke Kunshan University\u003Cbr>这篇文章是对RLHF的综述，分析了它在人工智能和人机交互交叉点中的应用，并探讨了与LLMs相关的最新研究趋势。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.14925v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.14925.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-22\u003C\u002Fspan> | **Generative AI Beyond LLMs: System Implications of Multi-Modal Generation**\u003Cbr>\u003Csub>该论文是针对跨文本、图像和视频生成模型的系统性能特征化的首次工作，它揭示了不同于传统LLMs的独特系统属性，并提出了对于TTI\u002FTTV模型而言，传统的优化技术需要重新考虑的挑战和机会。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.14385v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.14385.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-22\u003C\u002Fspan> | **Large Language Model (LLM) Bias Index -- LLMBI**\u003Cbr>\u003Csub>机构: University of Oxford, University Canada West, Amazon Web Services (AWS)\u003Cbr>引入LLMBI是在创建公平可靠的LLMs方面迈出的重要一步。它为系统工程师和研究人员提供了一种定量衡量偏见的工具，引导他们持续改进这些强大的模型，确保它们反映社会的多样性和不断进化的结构。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.14769v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.14769.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-22\u003C\u002Fspan> | **Plan, Posture and Go: Towards Open-World Text-to-Motion Generation**\u003Cbr>\u003Csub>机构: Tsinghua University, Microsoft Research Asia\u003Cbr>研究者们提出了一个名为PRO-Motion的新框架，以克服传统文本到动作生成方法的局限性，并成功在开放世界场景中生成更多样和真实的动作。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.14828v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.14828.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-22\u003C\u002Fspan> | **YAYI 2: Multilingual Open-Source Large Language Models**\u003Cbr>\u003Csub>机构: Beijing Wenge Technology Co. Ltd., Institute of Automation Chinese Academy of Sciences\u003Cbr>该论文提出了YAYI 2，一个针对多语言场景优化的大型语言模型，通过在大规模语料库上进行预训练，并通过多种方法与人类价值观对齐，显著提升了模型在多种任务中的表现，特别是在中文相关任务上。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.14862v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.14862.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-22\u003C\u002Fspan> | **Pangu-Agent: A Fine-Tunable Generalist Agent with Structured Reasoning**\u003Cbr>\u003Csub>机构: Huawei Noah's Ark Lab, University College London, University of Oxford\u003Cbr>本论文提出了Pangu-Agent框架，目标是解决标准RL方法在多任务环境中所面临的挑战。Pangu-Agent通过内在函数引入结构性推理，并通过监督学习和RL实现智能体的微调，提高了智能体适应多环境交互的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.14878v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.14878.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-22\u003C\u002Fspan> | **NPHardEval: Dynamic Benchmark on Reasoning Ability of Large Language Models via Complexity Classes**\u003Cbr>\u003Csub>机构: University of Michigan, Rutgers University\u003Cbr>本论文通过NPHardEval基准测试提供了一种新的评估LLMs推理能力的方法。该基准测试广泛涵盖了从多项式时间到NP-Hard复杂性级别的问题，并设计了动态数据更新机制以防止模型过拟合，从而确保了评估结果的可靠性和真实性。这些发现极大地促进了对LLMs当前能力的理解，并为提高这些模型的推理能力铺平了道路。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.14890v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1489.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fcasmlab\u002FNPHardEval)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-21\u003C\u002Fspan> | **The Truth is in There: Improving Reasoning in Language Models with Layer-Selective Rank Reduction**\u003Cbr>\u003Csub>机构: MIT, Microsoft Research NYC\u003Cbr>该论文提出了LASER，一种在模型训练完成后对Transformer模型的特定层进行裁剪以提升性能的方法。作者表明，这种策略不仅有效，而且是首次发现可以通过精心选择的剪枝来增强Transformer模型的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.13558v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.13558.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-21\u003C\u002Fspan> | **On Task Performance and Model Calibration with Supervised and Self-Ensembled In-Context Learning**\u003Cbr>\u003Csub>机构: Language Technology Lab University of Cambridge\u003Cbr>本文提供了在资源有限的情况下不同学习方法的性能和校准的全面分析。这表明虽然提高性能和校准同时达成是困难的，但通过自组装技术能够在不影响性能的前提下增强模型的校准，对于未来LLMs的应用提供了重要的实践指导。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.13772v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.13772.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-21\u003C\u002Fspan> | **AppAgent: Multimodal Agents as Smartphone Users**\u003Cbr>\u003Csub>机构: Tencent  \u003Cbr>这项研究提出了一个创新的多模态代理框架，它允许代理像人类用户一样操作任何智能手机应用，并通过自动探索和观察人类演示来学习新应用的使用方法。研究结果证实了该框架在执行多样化高级任务时的效率和适应性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.13771v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.13771.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-21\u003C\u002Fspan> | **De novo Drug Design using Reinforcement Learning with Multiple GPT Agents**\u003Cbr>\u003Csub>机构: Tsinghua University, Microsoft Research AI\u003Cbr>这篇论文推出了一个结合多个GPT代理的强化学习算法用于药物分子的生成，并在GuacaMol基准测试和SARS-CoV-2蛋白靶标抑制剂设计中显示出良好的性能和实用性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2401.06155v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2401.06155.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FHXYfighter\u002FMolRL-MGPT)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-20\u003C\u002Fspan> | **Time is Encoded in the Weights of Finetuned Language Models**\u003Cbr>\u003Csub>这项研究通过时间向量的概念表明了时间变化可以在一定程度上通过语言模型的权重空间来编码，并且权重插值可以帮助定制模型以适应新的时间段。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.13401v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.13401.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-20\u003C\u002Fspan> | **Lampr: Boosting the Effectiveness of Language-Generic Program Reduction via Large Language Models**\u003Cbr>\u003Csub>机构: University of Waterloo, The Hong Kong University of Science and Technology, Concordia University\u003Cbr>Lampr是第一个整合LLMs于程序缩减过程的算法。它通过多层次提示方法和LLMs的辅助，取得了跨语言通用性和特定语言语义意识之间的平衡，并且在实验中证明了其优越性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.13064v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.13064.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-20\u003C\u002Fspan> | **AgentCoder: Multi-Agent-based Code Generation with Iterative Testing and Optimisation**\u003Cbr>\u003Csub>机构: The University of Hong Kong, Shanghai Jiao Tong University, King’s College London\u003Cbr>本论文提出了一个新颖的基于多智能体的代码生成解决方案AgentCoder，通过特定的智能体聚焦于代码生成、测试设计和测试执行，有效地解决了代码生成与测试之间的平衡问题，并实现了优于现有SOTA方法的代码生成质量。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.13010v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1301.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-20\u003C\u002Fspan> | **Mini-GPTs: Efficient Large Language Models through Contextual Pruning**\u003Cbr>\u003Csub>机构: Massachusetts Institute of Technology\u003Cbr>这篇论文展示了通过上下文剪枝开发小型但高效的GPT模型，即Mini-GPTs的过程和结果。通过这种方法，研究人员在不同领域特定的数据集上成功减少了LLMs的尺寸并且保持了性能，展现了剪枝技术不仅理论上可行，而且在开发资源高效的领域特定LLMs中实践上具有实用价值。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.12682v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.12682.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-20\u003C\u002Fspan> | **Lookahead: An Inference Acceleration Framework for Large Language Model with Lossless Generation Accuracy**\u003Cbr>\u003Csub>机构: Ant Group\u003Cbr>本论文提出了名为Lookahead的推理加速框架，它通过使用基于Trie树的多分支推理策略，在提高LLMs推理速度的同时，保持了生成准确性。框架通过广泛的实验验证了其性能，并在支付宝的实际使用场景中得到了部署。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.12728v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.12728.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-20\u003C\u002Fspan> | **Generative Multimodal Models are In-Context Learners**\u003Cbr>\u003Csub>机构: Beijing Academy of Artificial Intelligence, Tsinghua University, Peking University\u003Cbr>本论文通过扩大模型规模，成功提升了多模态生成模型 Emu2 在上下文学习能力上的表现，并在一系列多模态理解任务中取得了突破性的效果，尤其在基于指令微调后的视觉问答和可控视觉生成方面。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.13286v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.13286.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-20\u003C\u002Fspan> | **AgentCoder: Multi-Agent-based Code Generation with Iterative Testing and Optimisation**\u003Cbr>\u003Csub>机构: The University of Hong Kong, Shanghai Jiao Tong University\u003Cbr>AgentCoder是一种新型的多代理框架，它在自动代码生成中通过进行迭代测试和优化，明显提高了代码生成的质量和准确性，尤其是在面对挑战性更大的增强型数据集时表现出其优势。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.13010v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1301.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-19\u003C\u002Fspan> | **A Revisit of Fake News Dataset with Augmented Fact-checking by ChatGPT**\u003Cbr>\u003Csub>本文提出了首个结合人类核实与ChatGPT辅助的假新闻检测公共基准数据集ChatGPT-FC，并通过定量分析对比了人类记者与LLM进行事实核查的差异。研究发现ChatGPT可以增强新闻事实核查过程的客观性和可靠性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11870v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1187.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-19\u003C\u002Fspan> | **Text-Conditioned Resampler For Long Form Video Understanding**\u003Cbr>\u003Csub>机构: University of Oxford, Google, Google DeepMind\u003Cbr>本论文提出了一个名为TCR的新型架构及预训练方法，能够处理与文本条件相结合的长视频。它有效地桥接了预训练的视觉编码器和LLM，实现了长期视频理解的问题，并在多个评估任务上取得了最佳性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11897v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.11897.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-19\u003C\u002Fspan> | **Active Preference Inference using Language Models and Probabilistic Reasoning**\u003Cbr>\u003Csub>机构: Cornell University, Cornell Tech\u003Cbr>本研究提出了一个实时算法，通过生成信息丰富的问题来加快LLMs对用户偏好的推断，并在网购场景中验证了其减少用户交互并提高任务性能的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.12009v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.12009.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-19\u003C\u002Fspan> | **Curated LLM: Synergy of LLMs and Data Curation for tabular augmentation in ultra low-data regimes**\u003Cbr>\u003Csub>机构: University of Cambridge\u003Cbr>本文介绍了CLLM，这是一种结合了大型语言模型的先验知识和强大的数据中心方法来进行数据增强的新方法，旨在为资料匮乏的领域和地区的机器学习提供了新的途径。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.12112v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.12112.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **From Google Gemini to OpenAI Q-Star: A Survey of Reshaping the Generative Artificial Intelligence (AI) Research Landscape**\u003Cbr>\u003Csub>机构: Cyberstronomy Pty Ltd, Academies Australasia Polytechnic, Massey University\u003Cbr>这项综述详尽地分析了生成型AI领域的发展及其对研究景观的重塑效应，尤其关注了MoE多模态学习和AGI的前景。研究涵盖了从AI模型结构和培训技术到应用领域和伦理考虑的全面分类。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10868v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10868.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **G-LLaVA: Solving Geometric Problem with Multi-Modal Large Language Model**\u003Cbr>\u003Csub>机构: Huawei Noah's Ark Lab, The University of Hong Kong, The Hong Kong University of Science and Technology\u003Cbr>这篇论文通过构建 Geo170K 数据集和开发基于它的 G-LLaVA 模型，克服了多模态大型语言模型在解决几何问题上的限制，并实现了比现有最先端模型更好的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11370v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1137.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **Generalized Category Discovery with Large Language Models in the Loop**\u003Cbr>\u003Csub>本论文提出了一个端到端的主动学习框架，该框架通过引入大型语言模型进入训练循环，有效地提升了模型在泛化类别发现任务上的性能，并能自动生成类别名称。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10897v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10897.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **Social Learning: Towards Collaborative Learning with Large Language Models**\u003Cbr>\u003Csub>机构: Google, EPFL\u003Cbr>本文提出了在LLMs中实现知识传递的新框架—社交学习，并提供了保护隐私的解决方案。该框架通过自然语言在模型间交换知识，同时避免敏感信息泄露，并通过实验验证了其有效性和隐私保护能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11441v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.11441.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **MAC-SQL: Multi-Agent Collaboration for Text-to-SQL**\u003Cbr>\u003Csub>机构: Beihang University, Tencent Cloud AI\u003Cbr>总体而言，MAC-SQL 框架通过联合智能代理，解决了 Text-to-SQL 任务中的一些关键挑战，如处理大型数据库、复杂查询以及SQL验证和修正问题。还发布了一个开源模型SQL-Llama，该模型展示了鼓励性的结果，并具备与收费模型如GPT-4相媲美的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11242v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.11242.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fwbbeyourself\u002FMAC-SQL)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **\"Paraphrasing The Original Text\" Makes High Accuracy Long-Context QA**\u003Cbr>\u003Csub>机构: Tsinghua University  \u003Cbr>论文主要通过理论证明和实验验证，提出了一种低成本且高效的方法，通过原文释义任务和有效的指令微调数据扩展现有语言模型处理长文本的能力，显著提高了长文本问答的准确性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11193v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.11193.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **Retrieval-Augmented Generation for Large Language Models: A Survey**\u003Cbr>\u003Csub>机构: Shanghai Research Institute for Intelligent Autonomous Systems, Tongji University, Fudan University\u003Cbr>这篇论文为RAG领域提供了一个全面和系统的技术概览，强调了提升LLMs检索和生成能力的重要性，指出了现有挑战，展望了未来的研究方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10997v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10997.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **NoMIRACL: Knowing When You Don't Know for Robust Multilingual Retrieval-Augmented Generation**\u003Cbr>\u003Csub>机构: University of Waterloo, Huawei Noah’s Ark Lab, FEEC-Unicamp Brazil\u003Cbr>这项工作通过引入NoMIRACL数据集，为评估LLM在检索式增强生成中的稳健性提供了一个多语言的评估工具，并通过建立GPT-4基线模型展示了LLM在识别相关与非相关检索结果中存在的挑战，突出了未来研究提高LLM稳健性的必要性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11361v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.11361.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **Agent-based Learning of Materials Datasets from Scientific Literature**\u003Cbr>\u003Csub>机构: University of Toronto  \u003Cbr>本论文展示了一个以大型语言模型为基础的智能代理在自动学习和提取科学文献中材料相关数据集方面的能力。Eunomia展示了在没有任何微调的情况下在提取实体和关系方面的有效性，且可以增强其在处理复杂任务时避免错误的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11690v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1169.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FAI4ChemS\u002FEunomia)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **Designing LLM Chains by Adapting Techniques from Crowdsourcing Workflows**\u003Cbr>\u003Csub>机构: University of Washington, Stanford University, Allen Institute for AI\u003Cbr>本文提出了一个设计空间概念框架以及通过转换众包工作流到LLM链的三个案例研究，为未来LLM链的设计和开发提供了实践指导和理论见解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11681v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.11681.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-18\u003C\u002Fspan> | **Towards Better Serialization of Tabular Data for Few-shot Classification with Large Language Models**\u003Cbr>\u003Csub>机构: Carnegie Mellon University\u003Cbr>论文成功地展示了在表格数据分类中应用LLMs的创新实践，并以LaTeX序列化框架为特点，提出了有效处理领域特定数据集的新型序列化方法。研究还对LLMs在解读复杂数据关系方面的能力进行了深入的探索。论文的LaTeX序列化方法不仅提升了LLMs在分类任务中的表现，还显著提高了内存的使用效率和计算效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.12464v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.12464.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-17\u003C\u002Fspan> | **Distinguishing Translations by Human, NMT, and ChatGPT: A Linguistic and Statistical Approach**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University\u003Cbr>本研究为ChatGPT作为NMT之外的另一种翻译工具的可能性提供了初步答案，并展示了ChatGPT与NMT和HT相比的独特特性。这些新认识有助于未来更人性化、更符合语境的翻译系统的开发，并为如何有效使用AI生成的翻译提供洞见。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10750v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1075.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-17\u003C\u002Fspan> | **Mixed Distillation Helps Smaller Language Model Better Reasoning**\u003Cbr>\u003Csub>机构: Zhejiang University, Dalian Medical University\u003Cbr>Mixed Distillation框架通过整合LLMs中的PoT和CoT能力到更小的模型中，显著改善了它们的高级推理能力，特别是在数学推理任务上的表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10730v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.1073.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-16\u003C\u002Fspan> | **RIGHT: Retrieval-augmented Generation for Mainstream Hashtag Recommendation**\u003Cbr>\u003Csub>机构: CAS Key Lab of Network Data Science and Technology ICT CAS, University of Chinese Academy of Sciences Beijing China\u003Cbr>本文提出了一种新的检索增强型生成主流标签推荐系统（RIGHT），通过结合检索器、选择器和生成器的优势，克服了现有方法在理解新信息和识别主流标签方面的限制，并在实验中取得显著成效。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10466v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10466.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-16\u003C\u002Fspan> | **A Survey on Robotic Manipulation of Deformable Objects: Recent Advances, Open Challenges and New Frontiers**\u003Cbr>\u003Csub>机构: Tongji University, National Natural Science Foundation of China, Shanghai Municipal Science and Technology Major Project\u003Cbr>本综述归纳了机器人操作可变形对象（DOM）领域的近期进展、存在的挑战和新前沿。特别强调了大型语言模型（LLMs）在机器人操纵中的初始进展，并指出这一领域值得进一步研究的重要方向。尽管综述了大量的文献并指出了未来研究方向，但实际的部署示例和定量评估是有限的。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10419v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10419.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-16\u003C\u002Fspan> | **ProTIP: Progressive Tool Retrieval Improves Planning**\u003Cbr>\u003Csub>机构: Apple  \u003Cbr>这篇论文提出了 ProTIP，为大型语言模型在复杂规划任务中的工具检索和使用提供了一种进步的策略。ProTIP 的核心在于渐进式检索、有效利用执行历史和实现子任务与工具功能的对齐。实验结果展示出 ProTIP 明显超过传统方法，降低了工具虚构，并提高了规划效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10332v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10332.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-16\u003C\u002Fspan> | **CoAScore: Chain-of-Aspects Prompting for NLG Evaluation**\u003Cbr>\u003Csub>机构: GSAI Renmin University of China\u003Cbr>CoAScore 是一个新颖的评估指标，它通过“方面链”的方法提升了对于 NLG 任务的评估精度，并且该效果获得了实验的证实。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10355v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10355.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-16\u003C\u002Fspan> | **RecPrompt: A Prompt Tuning Framework for News Recommendation Using Large Language Models**\u003Cbr>\u003Csub>机构: Science Foundation Ireland (SFI), JSPS KAKENHI\u003Cbr>这篇论文提出了RecPrompt模型，利用LLM对新闻推荐进行优化。通过手动和LLM自动生成的提示模板的迭代优化过程，显著提高了新闻推荐性能，尤其是在使用GPT-4进行自动生成的提示模板下。然而，这种方法并非总是能超越传统的推荐方法，且推荐效果受到LLM选择的显著影响。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10463v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10463.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **ProCoT: Stimulating Critical Thinking and Writing of Students through Engagement with Large Language Models (LLMs)**\u003Cbr>\u003Csub>机构: Luleå University of Technology Sweden\u003Cbr>本文通过引入ProCoT方法，展示了如何利用LLM促进学生批判性思维与写作，同时防止作弊。这种方法有助于教育者更好地利用这些技术工具，并培养学生成为更好的批判性思维者。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09801v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09801.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **Challenges with unsupervised LLM knowledge discovery**\u003Cbr>\u003Csub>机构: Google DeepMind, Google Research\u003Cbr>本文通过理论证明和实验验证，挑战了现有无监督方法在探索LLMs中隐性知识的能力，并提出了未来评估知识启发方法时应考虑的理智检查。总体上，作者认为未来的无监督方法很可能会遇到类似的问题，即难以准确区分模型知识和其他特征。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10029v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10029.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **Faithful Persona-based Conversational Dataset Generation with Large Language Models**\u003Cbr>\u003Csub>机构: University of Southern California, Google, Information Sciences Institute\u003Cbr>本论文提出了一种基于LLMs的框架，用于生成、扩展和更新大型的个性化对话数据集，并且通过Generator-Critic架构和信实性标准来提高对话的质量，有效地建立了Synthetic-Persona-Chat数据集。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10007v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10007.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **ReST meets ReAct: Self-Improvement for Multi-Step Reasoning LLM Agent**\u003Cbr>\u003Csub>机构: Google\u003Cbr>本论文通过定义一个能够进行推理和外部知识互动的LLM代理，并采用自我改进算法，实现了在合成问答基准测试中小型模型与大型模型相媲美的表现。提出的方法不仅提高了模型的推理能力，也大大减小了模型所需的参数数量。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10003v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10003.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **The Art of Balancing: Revolutionizing Mixture of Experts for Maintaining World Knowledge in Language Model Alignment**\u003Cbr>\u003Csub>机构: NLP Group Fudan University, Hikvision Inc  \u003Cbr>本论文提出了一个名为LoRAMoE的模型，用于解决大规模微调数据导致的语言模型中的世界知识遗忘问题，并在多任务学习中表现出潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09979v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09979.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **Generative Context-aware Fine-tuning of Self-supervised Speech Models**\u003Cbr>\u003Csub>机构: ASAPP, Carnegie Mellon University, Toyota Technological Institute at Chicago\u003Cbr>论文介绍了一种新的自监督语音模型微调方法，它使用大型语言模型生成的文本信息作为上下文，以提高任务执行的表现力，同时在不牺牲性能的情况下减少对额外大型语言模型的依赖和减少推理时的资源消耗。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09895v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09895.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **WEAK-TO-STRONG GENERALIZATION: ELICITING STRONG CAPABILITIES WITH WEAK SUPERVISION**\u003Cbr>\u003Csub>机构: OpenAI\u003Cbr>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](https:\u002F\u002Fcdn.openai.com\u002Fpapers\u002Fweak-to-strong-generalization.pdf)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fopenai\u002Fweak-to-strong)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Blog](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FBlog-Posts-yellow?logo=rss)](https:\u002F\u002Fmp.weixin.qq.com\u002Fs\u002Ff6YW-CxnLhnfMWTLg4M4Cw)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **No-Skim: Towards Efficiency Robustness Evaluation on Skimming-based Language Models**\u003Cbr>\u003Csub>机构: Fudan University\u003Cbr>本论文首次系统地研究了从效率角度出发，基于\"错过\"的语言模型的脆弱性，并提出了一个有效和通用的效率鲁棒性评估框架No-Skim，以生成增加计算复杂度的对抗性输入。同时，该框架还通过不同的插件模块进行了模块化设计，这些模块在不同的实际情景下工作，评估可以在三种不同的知识水平下进行。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09494v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09494.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **GSVA: Generalized Segmentation via Multimodal Large Language Models**\u003Cbr>\u003Csub>机构: Tsinghua University\u003Cbr>论文提出的GSVA方法通过学习预测多个[SEG]标记和创新性地生成[REJ]标记以解决GRES任务中存在的多目标和空目标挑战，相较于现有技术，展现了显著优势。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.10103v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.10103.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-15\u003C\u002Fspan> | **KGLens: A Parameterized Knowledge Graph Solution to Assess What an LLM Does and Doesn't Know**\u003Cbr>\u003Csub>机构: Apple\u003Cbr>本文提出了一种新的名为KGLens的框架，用于评估LLM中的事实知识。KGLens利用KG结构生成自然语言问题并进行评估，OD辅以参数化的KG和图指导的QG策略以提高自然问题的生成质量和评估过程的效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11539v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.11539.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Zebra: Extending Context Window with Layerwise Grouped Local-Global Attention**\u003Cbr>\u003Csub>机构: Tencent AI Lab Seattle\u003Cbr>本文提出的Zebra模型通过使用分组的局部-全局注意力层，有效地降低了计算和内存需求，并在长短序列处理上展示了卓越的性能。研究团队通过一系列实验验证了模型的效果，证明了Zebra架构的优势。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08618v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08618.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Towards Verifiable Text Generation with Evolving Memory and Self-Reflection**\u003Cbr>\u003Csub>机构: Peking University, Chinese Academy of Sciences, Baidu Inc\u003Cbr>VTG通过演化的长短期记忆和自我反思的方法来提升LLMs生成文本时的可靠性和验证性，对复杂的注意力转移问题和文档检索的挑战有着有效的应对策略，并且通过实验获得了验证。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09075v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09075.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **The Earth is Flat because...: Investigating LLMs' Belief towards Misinformation via Persuasive Conversation**\u003Cbr>\u003Csub>机构: Tsinghua University, Stanford University, Nanyang Technological University\u003Cbr>本论文为首次全面研究LLMs面对事实错误信息在劝说性对话设置中的鲁棒性，并揭示了LLMs对劝说性错误信息的易感性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09085v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09085.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Auto MC-Reward: Automated Dense Reward Design with Large Language Models for Minecraft**\u003Cbr>\u003Csub>机构: CUHK-SenseTime Joint Laboratory, Shanghai AI Laboratory, Tsinghua University\u003Cbr>Auto MC-Reward是一种先进的学习系统，利用LLMs以自动方式设计针对Minecraft任务的密集型奖励，通过LLMs的理解和经验总结能力，有效地提高了代理在复杂环境中学习新行为和完成长期任务的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09238v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09238.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Entity-Augmented Code Generation**\u003Cbr>\u003Csub>机构: JetBrains\u003Cbr>论文为解决利用外部实体进行代码生成的任务提出了一个新颖的架构。该架构能在不牺牲性能的前提下扩展，通过将实体检索器注入到解码器而非编码器中，模型可以一次性查看所有实体并直接使用它们。新架构不仅解决了现有模型的限制，还在多个实验场景中展示了其优越性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08976v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08976.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Math-Shepherd: A Label-Free Step-by-Step Verifier for LLMs in Mathematical Reasoning**\u003Cbr>\u003Csub>机构: Peking University, DeepSeek-AI, The University of Hong Kong\u003Cbr>MATH-SHEPHERD通过自动生成监督数据训练LLMs，来解决高成本人力标注的问题，并提高了LLMs在复杂数学问题上的准确性。这一成果为LLMs的进步和实际应用开辟了新的可能性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08935v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08935.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Modeling Complex Mathematical Reasoning via Large Language Model based MathAgent**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University\u003Cbr>论文建议通过MathAgent框架，即Planner-Reasoner-Executor-Reflector (PRER)，提升LLMs解决复杂数学问题的能力。通过将问题分解为多个阶段并模拟人类解题过程，MathAgent能显著提高对挑战性数学数据集的解决能力，尤其是在估算和综合能力要求较高的领域。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08926v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08926.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Boosting LLM Reasoning: Push the Limits of Few-shot Learning with Reinforced In-Context Pruning**\u003Cbr>\u003Csub>机构: Hong Kong University of Science and Technology, Microsoft Research\u003Cbr>这篇论文提出了CoT-Max，一个通过粗到细的剪枝技术来增强LLMs数学推理能力的方法，有效地提高了少样本学习在数学推理任务中的效果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08901v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08901.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Forbidden Facts: An Investigation of Competing Objectives in Llama-2**\u003Cbr>\u003Csub>机构: MIT\u003Cbr>这篇论文通过研究模型在禁止事实任务下的行为，解析了Llama-2-chat模型如何处理相互竞争的目标，并对它的分析提出了新的手法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08793v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08793.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **TAP4LLM: Table Provider on Sampling, Augmenting, and Packing Semi-structured Data for Large Language Model Reasoning**\u003Cbr>\u003Csub>机构: National University of Singapore, University of Illinois Urbana-Champaign, Microsoft  \u003Cbr>本文中提出的TAP4LLM框架通过采样、增强和打包半结构化数据，显著提升了大型语言模型在表格推理任务中的性能，并且可以作为插件提供给不同组件，用于增强LLMs对于结构化数据的理解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09039v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09039.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Self-Evaluation Improves Selective Generation in Large Language Models**\u003Cbr>\u003Csub>机构: Google DeepMind, Google Research\u003Cbr>论文提出了一种新的方法，通过指导LLM进行自我评估，以提高其在选择性生成场景中输出内容质量的校准。实验证明，该方法可以提高LLM生成内容的准确性和整体质量。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09300v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.093.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **StemGen: A music generation model that listens**\u003Cbr>\u003Csub>机构: SAMI, ByteDance Inc.\u003Cbr>该论文提出了一个新的非自回归的语言模型方法用于音乐生成，优化了多声道的处理和音乐与上下文信息的一致性，并通过客观和主观评估证明了模型生成的音乐质量和与上下文信息的契合程度。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08723v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08723.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **CogAgent: A Visual Language Model for GUI Agents**\u003Cbr>\u003Csub>机构: Tsinghua University, Zhipu AI\u003Cbr>CogAgent 打破了纯文本输入方式的局限性，通过结合高低分辨率的影像编码器和视觉语言模型，高效地解决了在图形用户界面（GUI）中理解和导航的挑战，同时在九个视觉问答基准测试中取得国际领先水平，推动了VLM在AI代理研究和应用方面的未来发展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08914v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08914.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FTHUDM\u002FCogVLM)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **TinyGSM: achieving >80% on GSM8k with small language models**\u003Cbr>\u003Csub>机构: Carnegie Mellon University, Microsoft Research  \u003Cbr>这篇论文通过创建一个合成的数学问题数据集TinyGSM及其对应的Python解决方案，成功使小型语言模型在GSM8K数学问题推理基准测试上的准确率超过了80%，展示了通过高质量数据集和验证器策略显著提高了小型模型性能的可行性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09241v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09241.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-14\u003C\u002Fspan> | **Weight subcloning: direct initialization of transformers using larger pretrained ones**\u003Cbr>\u003Csub>机构: Apple\u003Cbr>本论文提出了一种有效的权重子克隆（weight subcloning）技术，用以从较大的预训练模型初始化较小的变换器模型，显著提高了训练速度，并使得全新的模型即使在低计算资源条件下也能得到高效训练。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.09299v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.09299.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-13\u003C\u002Fspan> | **E&V: Prompting Large Language Models to Perform Static Analysis by Pseudo-code Execution and Verification**\u003Cbr>\u003Csub>机构: UC Riverside, Microsoft Research\u003Cbr>本论文通过提出E&V方法，展示了LLMs在执行伪代码静态分析和自我验证中的潜力。该方法不仅提高了静态分析的灵活性和精准度，还减少了编写静态分析工具需要的人力和专业知识。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08477v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08477.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-13\u003C\u002Fspan> | **LDM$^2$: A Large Decision Model Imitating Human Cognition with Dynamic Memory Enhancement**\u003Cbr>\u003Csub>机构: University of Chinese Academy of Sciences\u003Cbr>该论文提出了LDM2模型，它使用动态内存机制和树探索策略来增强LLMs的决策能力，使其能够适应更复杂和未知的环境，并实现动态学习能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08402v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08402.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-13\u003C\u002Fspan> | **SwitchHead: Accelerating Transformers with Mixture-of-Experts Attention**\u003Cbr>\u003Csub>机构: The Swiss AI Lab IDSIA USI & SUPSI, AI Initiative KAUST, Center for Brain Science Harvard University\u003Cbr>SwitchHead是一种新颖的方法，它通过优化多头自注意力结构中的资源使用，实现了资源消耗的降低同时保持了模型性能。该方法具有实际应用潜力，尤其对于资源有限的研究人员和机构而言。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.07987v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.07987.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-13\u003C\u002Fspan> | **Efficient Toxic Content Detection by Bootstrapping and Distilling Large Language Models**\u003Cbr>\u003Csub>机构: University of Southern California, Amazon.com Inc.\u003Cbr>文章针对现有的网络有害内容自动探测面临的问题，提出了一个称为BD-LLM的新方法，它通过一个新的方法DToT来提升LLMs在有害内容检测任务中的效能和转移性，并将优化模型压缩以便更有效地部署。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08303v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08303.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-13\u003C\u002Fspan> | **Knowledge-Aware Artifact Image Synthesis with LLM-Enhanced Prompting and Multi-Source Supervision**\u003Cbr>\u003Csub>机构: Peking University\u003Cbr>本文提出了一个结合LLMs增强提示和多源监督的知识感知古代文物图像合成方法，解决了现有文本到图像合成方法在考古领域应用时缺乏领域知识的问题，并在质量和历史知识对齐方面取得了显著进步。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.08056v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.08056.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fdanielwusg\u002Fartifact_diffusion)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-12\u003C\u002Fspan> | **Alignment for Honesty**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University, Shanghai Artificial Intelligence Laboratory, Fudan University\u003Cbr>论文提出了与人类的诚实性对齐的概念，并在此基础上提出了挑战和解决方法。通过正式定义问题、提出新方法和建立评估框架，论文为大型语言模型中的诚实性对齐提供了全面的解决方案。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.07000v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.07.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FGAIR-NLP\u002Falignment-for-honesty)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-12\u003C\u002Fspan> | **Efficient Few-Shot Clinical Task Adaptation with Large Language Models**\u003Cbr>\u003Csub>本文提出了一个在少样本的医学图像分类中通过冷冻一部分网络层进行高效的微调方法，并且引入了大型语言模型来上下文化标签，以提供有效的语义指导。方法在挑战赛中取得了优异的成绩，表明在处理少样本场景下自然图像模型到医学图像任务的适配问题时具有很高的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.07125v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.07125.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-12\u003C\u002Fspan> | **VILA: On Pre-training for Visual Language Models**\u003Cbr>\u003Csub>机构: NVIDIA, MIT  \u003Cbr>VILA利用改进的预训练策略，在多种视觉语言任务中显示出卓越的性能，为未来视觉语言模型的设计提供了实用指南。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.07533v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.07533.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-12\u003C\u002Fspan> | **Comparable Demonstrations are Important in In-Context Learning: A Novel Perspective on Demonstration Selection**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University\u003Cbr>本文从示例间关系的角度研究ICL，提出通过最小化编辑文本以构造Comparable Demonstrations（CDs）来减轻潜在的示例偏倚，实验证明了其在OOD情形下的性能增益，表明了CDs在简化任务中尤其必要，并展示了其相对于示例数的稳健性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.07476v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.07476.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-12\u003C\u002Fspan> | **LLMEval: A Preliminary Study on How to Evaluate Large Language Models**\u003Cbr>\u003Csub>机构: Fudan University, Shanghai Jiaotong University  \u003Cbr>论文针对如何评估大型语言模型（LLMs），对多种评估标准、不同类型的评估者、评分方法和排名系统进行了比较和分析，提出了新的评估数据集LLMEval，对20个LLMs进行了评估，生成了大量的手动和自动评估结果。该研究为未来的LLM评估提供了有益的洞见和结论。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.07398v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.07398.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-12\u003C\u002Fspan> | **diff History for Long-Context Language Agents**\u003Cbr>\u003Csub>机构: New York University\u003Cbr>论文提出并验证了使用diff历史来提高对长交互历史的模型处理能力。这一方法显著提升了模型在复杂决策任务中的表现，并能有效扩大模型可处理的历史长度，为长时间序列决策代理的设计提供了新思路。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.07540v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.0754.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-12\u003C\u002Fspan> | **Tell, don't show: Declarative facts influence how LLMs generalize**\u003Cbr>\u003Csub>机构: Apollo Research, University of Oxford\u003Cbr>本文研究了培训数据中声明性陈述与统计模式或“程序”示例相冲突时模型的泛化情况。所得结果对于AI风险（关于“背叛转折”）和公平性有重要影响。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.07779v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.07779.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-12\u003C\u002Fspan> | **LLM in a flash: Efficient Large Language Model Inference with Limited Memory**\u003Cbr>\u003Csub>机构: Apple\u003Cbr>这份研究提供了一个创新且实用的解决方案，不仅能有效降低在内存受限设备上运行大型语言模型时的数据负载，还能显著提升推理速度，在实际应用中具有重要意义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.11514v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.11514.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-11\u003C\u002Fspan> | **Honeybee: Locality-enhanced Projector for Multimodal LLM**\u003Cbr>\u003Csub>机构: Kakao Brain\u003Cbr>论文提出了一种新型的局部性增强投影器设计，解决了现有方法在处理视觉特征局部性上的不足，并有效利用了多面向指令数据集，最终使得Honeybee模型在多个MLLM基准测试中取得了显著的性能提升。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.06742v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.06742.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fkakaobrain\u002Fhoneybee)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-11\u003C\u002Fspan> | **Dense X Retrieval: What Retrieval Granularity Should We Use?**\u003Cbr>\u003Csub>机构: University of Washington, Tencent AI Lab\u003Cbr>本文提出命题作为一种新型稠密检索单元，其在减少所检索文本中无关信息的同时，提高了下游问答任务的性能和跨任务泛化能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.06648v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.06648.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-11\u003C\u002Fspan> | **Federated Full-Parameter Tuning of Billion-Sized Language Models with Communication Cost under 18 Kilobytes**\u003Cbr>\u003Csub>机构: Zhejiang University, Alibaba Group\u003Cbr>论文提出了一种新颖的联邦全参数微调方法——FedKSeed，通过ZOO与有限组种子结合，显著降低了数十亿大小LLMs全参数微调所需的通信开销，同时实现了较高的模型精确度和计算效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.06353v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.06353.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-11\u003C\u002Fspan> | **Unlocking Anticipatory Text Generation: A Constrained Approach for Faithful Decoding with Large Language Models**\u003Cbr>\u003Csub>机构: Salesforce AI Research\u003Cbr>本文提出了一种通过考虑未来约束满足来改善大型语言模型解码方法的新途径。提出的正式方法和评分机制通过与LLMs的基准测试，可以显著提高文本生成的质量和控制。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.06149v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.06149.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-11\u003C\u002Fspan> | **\"What's important here?\": Opportunities and Challenges of Using LLMs in Retrieving Information from Web Interfaces**\u003Cbr>\u003Csub>机构: Carnegie Mellon University\u003Cbr>本文研究了LLMs在从Web界面检索信息中的应用潜力和面临的挑战。通过一系列实验，揭示了模型性能的关键因素及其限制，并为未来工作指明了方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.06147v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.06147.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-11\u003C\u002Fspan> | **MMICT: Boosting Multi-Modal Fine-Tuning with In-Context Examples**\u003Cbr>\u003Csub>机构: Xiamen University, Tencent YouTu Lab\u003Cbr>这项工作通过提出MMICT，展示了在大型多模态语言模型上运用上下文学习能力以增强微调性能的新范式。通过设计M-Hub这一多功能模块并通过各种上下文示范实验，研究揭示了上下文学习在改善多模态任务性能中的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.06363v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.06363.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-11\u003C\u002Fspan> | **Oracle-based Protocol Testing with Eywa**\u003Cbr>\u003Csub>机构: Microsoft Research\u003Cbr>本文介绍了基于神谕的测试方法，充分利用LLMs建立了丰富的协议行为模型，并通过符号执行和传统测试生成方法相结合，提升了网络协议测试用例的自动生成和覆盖面。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.06875v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.06875.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-11\u003C\u002Fspan> | **On Meta-Prompting**\u003Cbr>\u003Csub>机构: Microsoft  \u003Cbr>这篇论文提出了一个基于范畴论的理论框架来概括和描绘自动化提示方法，通过在构想力和创造力这两个领域的实验，展示了meta-prompting比传统固定提示方法更能生成用户偏好的输出。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.06562v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.06562.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-11\u003C\u002Fspan> | **Extracting Self-Consistent Causal Insights from Users Feedback with LLMs and In-context Learning**\u003Cbr>\u003Csub>机构: Microsoft, Microsoft Research\u003Cbr>该研究提出了一种新框架，使用LLMs和ICL从用户反馈中提取自洽的因果见解，以支持微软Feedback Hub的分析。该框架采用创新的自洽性和提示集合技术以抑制LLMs的幻觉和错误推理，并提出了两种启发式方法来评估反馈的信息丰富度。实验显示，该方法能有效地提取因果见解和新的bug，并有助于微软工程师优先处理信息量丰富的反馈。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.06820v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.0682.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-10\u003C\u002Fspan> | **Fine-Tuning or Retrieval? Comparing Knowledge Injection in LLMs**\u003Cbr>\u003Csub>机构: Microsoft Israel\u003Cbr>这项研究的核心贡献在于它对比了细化训练和RAG两种方法对于LLMs知识注入能力的影响，并发现RAG在注入新的和已有的知识方面表现更佳。研究使用了创新的数据集和评估方法，确保了理论发现的实用性和可行性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.05934v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.05934.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-09\u003C\u002Fspan> | **Context Tuning for Retrieval Augmented Generation**\u003Cbr>\u003Csub>机构: Apple  \u003Cbr>本论文通过引入上下文调优这一新颖组件，提高了基于检索的增强计划（RAG-based planning）的效果，使其能处理不完整或不明确的查询，同时还降低了幻觉性错误的产生。研究对比了不同的检索方法在轻量模型和LLMs中的应用，并展示了新方法在提高上下文理解上的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.05708v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.05708.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-09\u003C\u002Fspan> | **Can Large Language Models Serve as Rational Players in Game Theory? A Systematic Analysis**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University\u003Cbr>本研究系统地探索了LLMs在游戏理论背景下的能力边界，并从三个角度出发，提供了将LLMs在社会科学研究中使用的进一步指导。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.05488v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.05488.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-09\u003C\u002Fspan> | **NLLG Quarterly arXiv Report 09\u002F23: What are the most influential current AI Papers?**\u003Cbr>\u003Csub>机构: University of Mannheim, University of Bielefeld\u003Cbr>该论文通过分析在特定时间内arXiv上引用最多的论文，提供了AI研究领域的最新趋势和影响力分析，特别强调了大型语言模型在其中的重要性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.05688v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.05688.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-09\u003C\u002Fspan> | **Sim-GPT: Text Similarity via GPT Annotated Data**\u003Cbr>\u003Csub>机构: Shannon.AI, Zhejiang University, Bytedance\u003Cbr>Sim-GPT是一个利用GPT-4生成数据标签来训练STS模型的框架。它在生成数据时仅产生一次性成本，速度较快，模型在多个STS基准上性能优越。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.05603v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.05603.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FShuheWang1998\u002FSim-GPT)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-09\u003C\u002Fspan> | **Agile-Quant: Activation-Guided Quantization for Faster Inference of LLMs on the Edge**\u003Cbr>\u003Csub>机构: Northeastern University, Oracle\u003Cbr>本文提出了一个名为Agile-Quant的激活引导量化框架，以加速大型语言模型的边缘设备推理。Agile-Quant克服了激活值异常的挑战和边缘设备上的硬件实施问题，并实现了与仅权重量化方法相当的任务性能，同时在实际设备上获得了显著的推理速度提升。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.05693v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.05693.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-08\u003C\u002Fspan> | **PaperQA: Retrieval-Augmented Generative Agent for Scientific Research**\u003Cbr>\u003Csub>机构: RAND Corporation, Carnegie Mellon University, LangChain\u003Cbr>该论文提出了PaperQA，一个基于检索的生成型代理，用于科学研究。PaperQA可以准确回答基于最新科学文献的问题，并且与人类专家的回答相当，甚至在某些方面表现更好。论文展示了PaperQA的有效性，并通过与人类专家和其他商业工具的对比，证明了其优越性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.07559v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.07559.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-08\u003C\u002Fspan> | **Using Program Knowledge Graph to Uncover Software Vulnerabilities**\u003Cbr>\u003Csub>论文通过结合程序图和安全数据，提出了程序知识图谱，并利用大型语言模型的提示调整来自动生成检测软件代码中漏洞的查询。该方法旨在克服传统漏洞检测方法的局限性，提高漏洞检测的自动化程度和有效性，尤其是在静态分析中的应用。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.04818v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.04818.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-07\u003C\u002Fspan> | **Beyond Surface: Probing LLaMA Across Scales and Layers**\u003Cbr>\u003Csub>机构: Hong Kong University of Science and Technology\u003Cbr>本研究的核心贡献在于提出了一系列评估大型语言模型高阶能力的探针任务，这些任务围绕着计算能力、数学推理、逻辑推理和真实性检测。研究揭示了LLM的表现如何随着模型规模和层次结构的变化。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.04333v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.04333.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-07\u003C\u002Fspan> | **Fortify the Shortest Stave in Attention: Enhancing Context Awareness of Large Language Models for Effective Tool Use**\u003Cbr>\u003Csub>机构: Gaoling School of Artificial Intelligence, Renmin University of China, Alibaba Group\u003Cbr>该论文针对LLMs在工具使用时对上下文认知的不足提出了Attention Buckets方法，通过处理不同的RoPE角度基础来强化对上下文的关注，显著提升了LLMs在工具使用任务的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.04455v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.04455.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-07\u003C\u002Fspan> | **Generating Illustrated Instructions**\u003Cbr>\u003Csub>机构: GenAI Meta, Columbia University\u003Cbr>本论文介绍了一种名为StackedDiffusion的新方法，用于生成插图说明，这是一种将文本和图像结合起来描述如何实现某一目标的任务。该方法通过结合大型语言模型和文本到图像扩散模型，并引入一些新颖的建模技巧，解决了现有T2I模型无法直接从用户查询中生成视觉效果的问题，并在人类评估中超越了现有技术水平。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.04552v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.04552.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-07\u003C\u002Fspan> | **CLadder: A Benchmark to Assess Causal Reasoning Capabilities of Language Models**\u003Cbr>\u003Csub>机构: MPI for Intelligent Systems, University of Washington\u003Cbr>此研究为测试和分析大型语言模型（LLMs）在正规因果推理上的能力提出了CLADDER数据集和CAUSALCOT思维路径提示策略，通过实验突显了LLMs的局限并为未来研究提出了方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.04350v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.0435.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FcausalNLP\u002Fcladder)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-07\u003C\u002Fspan> | **A Study on the Calibration of In-context Learning**\u003Cbr>\u003Csub>机构: Harvard University\u003Cbr>该论文深入研究了上下文内学习(ICL)在语言模型(LMs)中的校准准确性问题，并提出了评估和分析方法。它揭示了校准误差与模型大小和微调过程中的变化关系，以及校准在推理任务生成中的降低。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.04021v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.04021.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-07\u003C\u002Fspan> | **Cost-Effective In-Context Learning for Entity Resolution: A Design Space Exploration**\u003Cbr>\u003Csub>机构: Renmin University of China, Beijing Institute of Technology, HKUST (GZ)\u003Cbr>这篇论文提供了一个全面的研究，旨在探索如何开发一种成本效益的批量提示方法来进行实体解析。主要贡献是介绍 BATCHER 框架并提出基于覆盖的演示选择策略。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03987v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03987.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-07\u003C\u002Fspan> | **Chain of Code: Reasoning with a Language Model-Augmented Code Emulator**\u003Cbr>\u003Csub>机构: Google DeepMind, Stanford University, University of California Berkeley  \u003Cbr>Chain of Code (CoC)为语言模型增加了通过编写代码和模拟代码执行来改善推理能力的新维度。它在数字和语义推理任务中均实现了突破性的性能，对LLMs的应用范围进行了扩展，并有潜力应用于更广泛的问题。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.04474v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.04474.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-07\u003C\u002Fspan> | **An LLM Compiler for Parallel Function Calling**\u003Cbr>\u003Csub>机构: UC Berkeley, ICSI, LBNL\u003Cbr>论文提出了一个名为LLMCompiler的系统，解决了大型语言模型在执行多功能调用时的高延迟成本和效率低下的问题，通过并行化函数调用和优化协调来提高速度，节省成本并提升准确率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.04511v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.04511.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-06\u003C\u002Fspan> | **OneLLM: One Framework to Align All Modalities with Language**\u003Cbr>\u003Csub>机构: MMLab The Chinese University of Hong Kong, Shanghai Artificial Intelligence Laboratory\u003Cbr>OneLLM通过其统一的多模态编码框架和渐进式对齐管道，在推理和利用方面展示了强大的多模态理解和处理能力，并成功地处理了扩展多模态LLMs的挑战。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03700v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.037.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fcsuhan\u002FOneLLM)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-06\u003C\u002Fspan> | **Generative agent-based modeling with actions grounded in physical, social, or digital space using Concordia**\u003Cbr>\u003Csub>机构: Google DeepMind, Google Research\u003Cbr>本论文提出了利用生成式大型语言模型增强基于代理的模型的方法，通过Concordia库实现了在社会、物理和数字空间中模拟代理的交互。该模型旨在提供逼真的社会模拟，并探索模型的有效性验证。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03664v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03664.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-06\u003C\u002Fspan> | **Holmes: Towards Distributed Training Across Clusters with Heterogeneous NIC Environment**\u003Cbr>\u003Csub>机构: Zhejiang Lab\u003Cbr>文章成功介绍了一个能在网络接口卡异构环境中进行大型语言模型训练的框架——Holmes。通过实证研究其性能，Holmes被证明可在异构环境中实现与同构RDMA NICs相当的性能水平，从而使LLM训练更加普及并扩大了有效扩展的可能性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03549v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03549.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-06\u003C\u002Fspan> | **AnimateZero: Video Diffusion Models are Zero-Shot Image Animators**\u003Cbr>\u003Csub>机构: Peking University, Tencent AI Lab, HKUST\u003Cbr>AnimateZero为T2V生成提供解耦和精确的外观和动作控制，通过空间外观控制和时间一致性控制，实现了从T2I到I2V的步骤式视频生成，同时维护良好的域一致性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03793v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03793.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-06\u003C\u002Fspan> | **Efficient Large Language Models: A Survey**\u003Cbr>\u003Csub>机构: The Ohio State University, Google Research, Amazon AWS AI\u003Cbr>论文综述了大型语言模型中对于稀疏激活方法的最新进展，特别是混合专家系统（MoE）及其在长文本处理方面的应用。它总结了MoE模型优化的各种方法，包括算法级别的改进和系统级别的加速框架。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03863v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03863.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FAIoT-MLSys-Lab\u002FEfficientLLMs)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-06\u003C\u002Fspan> | **Controllable Human-Object Interaction Synthesis**\u003Cbr>\u003Csub>机构: Stanford University, FAIR Meta\u003Cbr>本文提出了一种新的交互合成方法CHOIS，它能在受语言描述指导的条件下，生成符合三维场景几何约束的人与物体的同步运动。该方法通过集成到一个系统中，展示了其在合成连续、逼真和环境感知的人物互动方面的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03913v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03913.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **Rank-without-GPT: Building GPT-Independent Listwise Rerankers on Open-Source Large Language Models**\u003Cbr>\u003Csub>机构: University of Waterloo, 2Cohere, Comcast Applied AI\u003Cbr>本文的核心成果是演示了如何构建一种不依赖GPT模型的有效列表重排序器，能显著超越现有基于GPT的重排序器，并呼吁研究社区开发更高质量的列表排序训练数据，以提升模型的表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02969v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.02969.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **A Comparative Study of AI-Generated (GPT-4) and Human-crafted MCQs in Programming Education**\u003Cbr>\u003Csub>机构: Carnegie Mellon University  \u003Cbr>本文的主要贡献是开发了一个基于GPT-4的自动化MCQ生成系统，通过专门的弹性构架和精确的LO对齐机制，成功生成与高等教育Python课程LO一致的MCQs。研究结果表明，自动生成的MCQ在大多数情况下与LO保持良好的一致性，质量接近人工设计的MCQ，但在拥有单一正确答案和高质量干扰项方面略显欠缺，未来工作应该集中在减轻这些问题上。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03173v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03173.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **Beyond Isolation: Multi-Agent Synergy for Improving Knowledge Graph Construction**\u003Cbr>\u003Csub>机构: Zhejiang Lab, Ant Group\u003Cbr>通过在KGC中引入多智能体合作的方法，cooperKGC框架提升了智能体解决实体、关系和事件提取任务中的精确度，并有望为AI的协作意识化未来奠定了基础。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03022v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03022.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **Let's Think Outside the Box: Exploring Leap-of-Thought in Large Language Models with Creative Humor Generation**\u003Cbr>\u003Csub>机构: Sea AI Lab, Sun Yat-sen University, Harvard University  \u003Cbr>本论文提出了一种旨在提升大型语言模型创造性思维能力的Creative Leap-of-Thought (CLoT)范式，并验证了其在多种任务中的有效性和概括能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02439v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.02439.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fsail-sg\u002FCLoT)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **RankZephyr: Effective and Robust Zero-Shot Listwise Reranking is a Breeze!**\u003Cbr>\u003Csub>机构: University of Waterloo\u003Cbr>RankZephyr是一款新型开源LLM，特别优化了零样本列表重新排序任务。它提供了与大型专有模型相当或更优的重新排序效果，同时强调了数据增强对于提升模型鲁棒性的重要性，并通过实验证明了其有效性和在现实场景中的应用潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02724v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.02724.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fcastorini\u002Frank_llm)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **Large Knowledge Model: Perspectives and Challenges**\u003Cbr>\u003Csub>机构: Zhejiang University\u003Cbr>本文提出了一种大型知识模型（LKM）的概念，旨在更有效地管理和解读知识表示的多样性。研究指出了从现有的大型语言模型到LKM转变的挑战，强调了结构化知识在预训练中的重要性，并提出了一套LKM的设计原则。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02706v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.02706.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **A Hardware Evaluation Framework for Large Language Model Inference**\u003Cbr>\u003Csub>机构: Princeton University\u003Cbr>LLMCompass 作为一种硬件评估框架，成功地应对了设计LLM推理硬件时面临的挑战。它不仅快速精准，而且具有架构描述性和成本意识，已经在商业硬件上进行了验证且显示出优异的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03134v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03134.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **Prompt Optimization via Adversarial In-Context Learning**\u003Cbr>\u003Csub>机构: National University of Singapore, Hong Kong University of Science and Technology, Institute for Infocomm Research (I2R) A*STAR\u003Cbr>论文介绍了一个新颖的Adversarial In-Context Learning（adv-ICL）方法，用于优化大型模型中prompt的选择，以此提高模型性能。它可以实现对抗训练目标，克服数据和计算资源限制，通过优化prompt而不是模型参数来提升性能，且实验结果在多个任务上显著优于现有技术。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02614v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.02614.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **Inherent limitations of LLMs regarding spatial information**\u003Cbr>\u003Csub>机构: ProtagoLabs, International Monetary Fund, NetMind.ai  \u003Cbr>论文为GPT-4等大型语言模型在处理空间信息方面的能力提供了新的评估框架和专门设计的数据集，并分析了GPT-4在处理空间信息方面的能力和局限性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03042v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03042.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-05\u003C\u002Fspan> | **How should the advent of large language models affect the practice of science?**\u003Cbr>\u003Csub>机构: Max Planck Institute for Biological Cybernetics, University of Tübingen, University of Washington  \u003Cbr>本文讨论了LLMs对科学实践的影响，并建议对其使用持审慎态度，同时强调了保护科学的规范和认识论方面的重要性。虽然LLMs可能提升某些科研任务的效率，但作为工具，其使用应该谨慎并确保符合科学规范。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03759v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.03759.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-04\u003C\u002Fspan> | **Exchange-of-Thought: Enhancing Large Language Model Capabilities through Cross-Model Communication**\u003Cbr>\u003Csub>机构: Fudan University, National University of Singapore, Shanghai AI Laboratory  \u003Cbr>本文提出的Exchange-of-Thought（EoT）框架通过模型间交流提升LLMs的推理能力，凭借四种通信范例和信心评估机制，在多个推理任务上取得了显著成效，并证明了外部思维在增强模型性能中的作用。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01823v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01823.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-04\u003C\u002Fspan> | **Competition-Level Problems are Effective LLM Evaluators**\u003Cbr>\u003Csub>机构: Microsoft Research Asia, Xiamen University, Microsoft Azure AI\u003Cbr>本研究通过评估大型语言模型在处理竞赛级编程问题上的表现，揭示了GPT-4等模型在真实推理能力上的不足，并提出了一些提升表现的方法。这些发现突显了这类问题作为评估LLMs的有效工具的重要性，并促进了对于提高LLMs复杂推理能力的进一步研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02143v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.02143.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-04\u003C\u002Fspan> | **The Unlocking Spell on Base LLMs: Rethinking Alignment via In-Context Learning**\u003Cbr>\u003Csub>机构: Allen Institute for Artificial Intelligence, University of Washington\u003Cbr>本论文提出了一个通过上下文学习实现LLMs对齐的简单无须调整方法（URIAL），表现出与传统调整对齐方法相匹配甚至更好的效果。这一发现对未来LLMs研究具有重要的启示，说明了在LLMs对齐上更深入的分析和理论理解的重要性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01552v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01552.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-04\u003C\u002Fspan> | **On the Effectiveness of Large Language Models in Domain-Specific Code Generation**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University, Chongqing University, East China Normal University\u003Cbr>这项研究表明，通过有效地整合领域知识到代码生成过程中，可以增强LLMs在特定领域内的代码生成能力。DomCoder作为一个新的代码生成方法，利用了不同策略以整合领域知识，并在特定设置下提升了代码生成的实际效果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01639v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01639.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-04\u003C\u002Fspan> | **ChatGPT as a Math Questioner? Evaluating ChatGPT on Generating Pre-university Math Questions**\u003Cbr>\u003Csub>机构: Nanyang Technological University, National University of Singapore\u003Cbr>该研究提出了第一个系统的评估ChatGPT在生成前大学数学问题潜力的研究。通过两种主要场景：给定上下文和未给定上下文的生成问题，并为教育工作者提供实用的洞察。研究的结果有可能促进现代AI技术在教育领域的应用，并提高自动化数学问题生成的实用性和效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01661v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01661.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-04\u003C\u002Fspan> | **Data Management For Large Language Models: A Survey**\u003Cbr>\u003Csub>机构: Peking University, Huawei Noah’s Ark Lab\u003Cbr>这篇综述研究了在LLMs的预训练和监督式微调阶段，数据管理的研究现状以及数据管理策略的设计。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01700v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.017.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FZigeW\u002Fdata_management_LLM)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-04\u003C\u002Fspan> | **Retrieval-augmented Multi-modal Chain-of-Thoughts Reasoning for Large Language Models**\u003Cbr>\u003Csub>机构: Xiamen University, MBZUAI, Tencent AI Lab\u003Cbr>文章通过引入动态自动检索机制和分层抽样方法，成功提升了多模态任务中LLMs的CoT推理能力。提出的方法不仅提高了模型性能，而且通过多样化示例选择进一步细化了推理过程，为多模态推理领域树立了新的性能标杆。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01714v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01714.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-04\u003C\u002Fspan> | **A Survey on Large Language Model (LLM) Security and Privacy: The Good, the Bad, and the Ugly**\u003Cbr>\u003Csub>机构: Elsevier\u003Cbr>这篇论文总结了大型语言模型（LLMs）在安全性和隐私保护中的应用及相关挑战，指出LLMs在这些领域的好处、坏处和丑陋之处，同时强调了其在数据保护方面的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02003v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.02003.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-04\u003C\u002Fspan> | **LLMs Accelerate Annotation for Medical Information Extraction**\u003Cbr>\u003Csub>机构: Google Research\u003Cbr>本论文展示了一个利用大型语言模型，特别是Google的PaLM 2，来提升医学信息抽取任务中注释速度的方法。这个基于LLM的注释流程提高了效率且不需要对模型进行复杂的调参，使其成为一个有潜力的工具来加速医疗领域的数据注释工作。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02296v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.02296.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-03\u003C\u002Fspan> | **Running cognitive evaluations on large language models: The do's and the don'ts**\u003Cbr>\u003Csub>机构: Massachusetts Institute of Technology\u003Cbr>这篇论文为大型语言模型的认知评估研究方法提供了指导性的建议，探讨了在方法论上如何避免在运行认知评估时可能出现的问题。论文的目标是贡献于AI心理学领域最佳实践的更广泛讨论。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01276v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01276.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-03\u003C\u002Fspan> | **TextGenSHAP: Scalable Post-hoc Explanations in Text Generation with Long Documents**\u003Cbr>\u003Csub>机构: University of Southern California, Google Cloud AI\u003Cbr>TextGenSHAP是一个为大型语言模型设计的高效后验解释性方法，通过改进解释生成的速度，并展示了如何利用这些解释改进长文档问答和文档检索系统。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01279v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01279.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-03\u003C\u002Fspan> | **D-Bot: Database Diagnosis System using Large Language Models**\u003Cbr>\u003Csub>机构: Tsinghua University, Pigsty, ModelBest\u003Cbr>D-Bot是一个基于大型语言模型的数据库诊断系统，它通过文档中的知识提取和生成有效的诊断报告来提高数据库诊断的效率和准确性，解决了区域专家在数据库诊断中遇到的挑战。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01454v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01454.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-02\u003C\u002Fspan> | **Large Language Models Are Zero-Shot Text Classifiers**\u003Cbr>\u003Csub>机构: Florida Atlantic University\u003Cbr>论文展示了LLMs可以有效作为零样本文本分类器的能力，这对于需要快速部署文本分类器的小团队或小企业来说特别有益。研究结果表明，在所有四个数据集中，GPT-4一致超过了传统ML算法。文章还建议未来的研究方向包括优化提示以获得更高的精度或引入评论代理以评估和提升LLM的结果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01044v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01044.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-02\u003C\u002Fspan> | **Exploring and Improving the Spatial Reasoning Abilities of Large Language Models**\u003Cbr>\u003Csub>机构: Stanford University  \u003Cbr>论文提高了对LLMs在空间推理和序列标注方面能力的理解，提出了一种改进LLMs处理3D轨迹识别任务的方法，具有显著的性能提升。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01054v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01054.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-02\u003C\u002Fspan> | **Just-in-Time Security Patch Detection -- LLM At the Rescue for Data Augmentation**\u003Cbr>\u003Csub>机构: University of Luxembourg, Windows Copilot Microsoft, Singapore Management University\u003Cbr>论文提出了一种新颖的安全补丁检测框架 LLMDA，使用大型语言模型进行补丁分析和数据增强，并对多模态输入进行对齐。这使系统能够从补丁和代码的联合上下文中提取更丰富的信息，提升检测准确性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.01241v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.01241.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-02\u003C\u002Fspan> | **Axiomatic Preference Modeling for Longform Question Answering**\u003Cbr>\u003Csub>本文提出的基于公理的框架为长篇问答偏好模型提供了一种新方法，通过细致审视人类偏好，并优化了偏好打分的准确性与效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02206v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.02206.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **On Exploring the Reasoning Capability of Large Language Models with Knowledge Graphs**\u003Cbr>\u003Csub>机构: Singapore Management University, National Sun Yat-sen University\u003Cbr>研究结果显示，LLMs能够通过其内部知识图成功处理知识图推理任务，并能从上下文中推断出知识图关系，展示了LLMs在知识图推理中的潜力及应用价值。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00353v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.00353.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **Learning from One Continuous Video Stream**\u003Cbr>\u003Csub>该论文介绍了一个框架，用于从单一连续视频流中进行在线学习，这一框架侧重于适应性与泛化的评估，并提出了一系列未来预测任务进行预训练。研究显示，在这种学习环境下，优化策略需要调整，通过减少动量和调整权重更新频率可以改善模型的适应性和泛化能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00598v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.00598.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **Leveraging Large Language Models to Improve REST API Testing**\u003Cbr>\u003Csub>机构: Georgia Institute of Technology, IBM Research\u003Cbr>RESTGPT通过利用LLMs，特别是GPT-3.5 Turbo的高效准确性和少量示例学习的精准性，解决了现有方法在提取自然语言描述中规则和生成有效值时的限制，显著提升了REST API测试的质量和准确度。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00894v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.00894.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **The Cost of Compression: Investigating the Impact of Compression on Parametric Knowledge in Language Models**\u003Cbr>\u003Csub>机构: University of Wisconsin - Madison\u003Cbr>这项研究首次大规模考察了LLMs的压缩技术对模型参数知识的影响，并为实际应用提供了重要见解，特别是在关于修剪和量化技术相关的决策方面。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00960v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.0096.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **The Cost of Compression: Investigating the Impact of Compression on Parametric Knowledge in Language Models**\u003Cbr>\u003Csub>机构: University of Wisconsin - Madison\u003Cbr>本论文通过对大型语言模型（LLMs）进行压缩技术（剪枝和量化）的全面研究，揭示了这些技术对模型参数知识保留的影响，为实践者提供了关于模型压缩的有价值见解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00960v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.0096.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **Improve Supervised Representation Learning with Masked Image Modeling**\u003Cbr>\u003Csub>机构: Google Research, OpenAI  \u003Cbr>这篇论文提出了一种融合监督表示学习和MIM的新训练设置，该设置在不增加显著的训练或推理开销的前提下，显著提高了下游任务如分类、图像检索和语义分割的表示学习质量。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00950v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.0095.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **Nash Learning from Human Feedback**\u003Cbr>\u003Csub>机构: Google DeepMind\u003Cbr>这篇文章提出了一种全新的调节大型语言模型以通过纳什均衡与人类偏好对齐的方法，展示了其在复杂任务中的潜能，并通过实验证明了其效果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00886v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.00886.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **RLHF-V: Towards Trustworthy MLLMs via Behavior Alignment from Fine-grained Correctional Human Feedback**\u003Cbr>\u003Csub>RLHF-V是一个通过细粒度校正型人类反馈校正MLLM行为的新框架，通过收集高质量的人类偏好数据为MLLMs提供人类对齐的学习信号，并通过全面的实验验证了该框架的有效性。该研究可能在提高大型多模态语言模型在各种任务中的可靠性和实用性方面取得重要进展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00849v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.00849.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FRLHF-V\u002FRLHF-V)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **Beyond ChatBots: ExploreLLM for Structured Thoughts and Personalized Model Responses**\u003Cbr>\u003Csub>机构: Google\u003Cbr>本文介绍了探索LLM系统ExploreLLM，它通过结合基于提示的任务分解方法和全新的类似图式的图形用户界面（UI），在用户和LLM助手之间提供了一种全新的交互模式。该系统通过在结构化和交互式界面中表示生成子任务，旨在减轻用户完成复杂任务时的认知负担，同时提高个性化响应的水平。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00763v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.00763.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **Deciphering Digital Detectives: Understanding LLM Behaviors and Capabilities in Multi-Agent Mystery Games**\u003Cbr>\u003Csub>机构: Quebec AI Institute\u003Cbr>这篇论文贡献了适应JuBensha游戏复杂性和新挑战的评估方法，并创建了一个能够评估交互式环境中LLM智能体能力的新框架ThinkThrice，推动了AI在多玩家角色扮演游戏中的应用。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00746v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.00746.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>12-01\u003C\u002Fspan> | **Instruction-tuning Aligns LLMs to the Human Brain**\u003Cbr>\u003Csub>机构: EPFL\u003Cbr>本研究表明，通过指令调整训练的大型语言模型在世界知识表示方面以及与人脑活动的对齐程度上表现更佳。这为未来LLMs的发展提供了将世界知识集成到模型中的重要视角。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00575v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-12\u002F2312.00575.md)  |\n\n---\n\n\n\n### 十一月\n\n|  Date   | Paper | Links & Summary |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-30\u003C\u002Fspan> | **TaskBench: Benchmarking Large Language Models for Task Automation**\u003Cbr>\u003Csub>机构: Zhejiang University\u003Cbr>该文献提出了TaskBench基准测试和TASKEVAL评估系统，通过数据生成和量化评估系统，有效地解决了在任务自动化领域对LLMs的评估问题。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18760v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.1876.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-30\u003C\u002Fspan> | **Unnatural Error Correction: GPT-4 Can Almost Perfectly Handle Unnatural Scrambled Text**\u003Cbr>\u003Csub>机构: The University of Tokyo\u003Cbr>研究展示了GPT-4处理混淆文本的强大能力，设置了两项新指标RR和RPG，并通过它们验证了GPT-4在不同混淆场景和比率下的稳定表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18805v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.18805.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-30\u003C\u002Fspan> | **IAG: Induction-Augmented Generation Framework for Answering Reasoning Questions**\u003Cbr>\u003Csub>机构: Huawei Poisson Lab\u003Cbr>IAG框架通过归纳提示法加强知识陈述的真实性，并且优化了知识融合机制和学生归纳模型，以解决现有基于检索的方法在隐性推理问答任务上的不足。研究成果表明，IAG在回答涉及隐性推理的问答任务上表现更优。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18397v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.18397.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-30\u003C\u002Fspan> | **Autonomous Agents in Software Development: A Vision Paper**\u003Cbr>\u003Csub>机构: Tampere University\u003Cbr>本论文提出了一个关于利用多个 GPT 代理来自动执行软件工程任务的愿景，并演示了在简单软件任务上所取得的初步成功。这项工作有可能彻底改变软件开发的方式，并缩短开发时间。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18440v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.1844.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-30\u003C\u002Fspan> | **Applying Large Language Models and Chain-of-Thought for Automatic Scoring**\u003Cbr>\u003Csub>机构: University of Georgia\u003Cbr>本文展示了LLMs在促进自动评分方面的潜力，并强调CoT在配合项茎和评分标准使用时能显著增强评分的准确度。通过结合LLMs和CoT的方法，可以降低自动评分模型构建的复杂性和人力成本，并可能提供更接近人类评分结果的评分。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03748v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2312.03748.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-30\u003C\u002Fspan> | **MicroCinema: A Divide-and-Conquer Approach for Text-to-Video Generation**\u003Cbr>\u003Csub>机构: University of Science and Technology of China, Microsoft Research Asia\u003Cbr>MicroCinema以其创新的文本到视频生成两阶段流程和有效的Appearance Injection Network及Appearance Noise Prior机制，在视频生成质量上实现了新的突破，为后续工作提供了可借鉴的范例。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18829v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.18829.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-30\u003C\u002Fspan> | **CoDi-2: In-Context, Interleaved, and Interactive Any-to-Any Generation**\u003Cbr>\u003Csub>机构: UC Berkeley, Microsoft Azure AI, ZOOM\u003Cbr>CoDi-2是一种具有前沿能力的多模态生成模型，可以处理复杂的多模态输入、在上下文中指导生成、通过多轮交互与用户互动，并实现了优秀的零样本和少样本性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18775v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.18775.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-30\u003C\u002Fspan> | **PoseGPT: Chatting about 3D Human Pose**\u003Cbr>\u003Csub>机构: Max Planck Institute for Intelligent Systems, Meshcapade\u003Cbr>PoseGPT是一个新型框架，它通过在LLM中嵌入SMPL姿态标记，使模型可以直接从文本和视觉输入生成三维人体姿态，并在解释三维人体姿态方面实现了一定程度的创新。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18836v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.18836.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-30\u003C\u002Fspan> | **What Do Llamas Really Think? Revealing Preference Biases in Language Model Representations**\u003Cbr>\u003Csub>机构: Comcast Applied AI, University of Waterloo\u003Cbr>作者们提出了一个新型探针来检测LLMs表示中的内隐关联偏见，并通过实验在偏好检测中达到了最新水平。研究还发现了多个指令遵循型和“传统”的LLMs中的显著偏见，这些偏见存在于国籍、政治、宗教和性别等方面，尽管LLMs已经经过明确的安全指导调整。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18812v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.18812.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fcastorini\u002Fbiasprobe)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-29\u003C\u002Fspan> | **TimeBench: A Comprehensive Evaluation of Temporal Reasoning Abilities in Large Language Models**\u003Cbr>\u003Csub>机构: Harbin Institute of Technology\u003Cbr>TIMEBENCH基准的提出是对大型语言模型时间推理能力综合评估的重要步骤，它展示了当前模型与人类在这方面的差距，并为未来的研究提供了指引。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.17667v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.17667.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fzchuz\u002FTimeBench)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-29\u003C\u002Fspan> | **Large Language Models for Networking: Applications, Enabling Techniques, and Challenges**\u003Cbr>\u003Csub>机构: BUPT\u003Cbr>该论文提出了一个整合大型语言模型与网络技术的新框架ChatNet，并探究了它在网络规划中的应用。研究表明，ChatNet可以有效提升网络任务的自动化和智能化水平，尽管在部署前仍需解决多模态数据整合和插件开发等挑战。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.17474v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.17474.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-29\u003C\u002Fspan> | **Are Large Language Models Good Fact Checkers: A Preliminary Study**\u003Cbr>\u003Csub>机构: Chinese Academy of Sciences\u003Cbr>这篇文章通过系统评估LLMs在整个事实核查流程中的潜力，发现尽管LLMs在某些方面表现出潜力，但依然需要更多研究和尝试来提升它们在事实核查任务上的表现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.17355v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.17355.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-29\u003C\u002Fspan> | **Zero-shot Conversational Summarization Evaluations with small Large Language Models**\u003Cbr>\u003Csub>机构: Intel labs\u003Cbr>文章以大型语言模型在会话摘要任务中的应用作为焦点，深入探讨了不同指令对模型执行效果的影响，并研究了在有限硬件下使用压缩模型的优化方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18041v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.18041.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-29\u003C\u002Fspan> | **Understanding and Improving In-Context Learning on Vision-language Models**\u003Cbr>\u003Csub>机构: LMU Munich, University of Oxford\u003Cbr>本文提出了一个用于视觉-语言模型在背景学习中选择示范的新方法MMICES，并通过一系列实验展示了其在不同模型和数据集上的良好性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.18021v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.18021.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-29\u003C\u002Fspan> | **Towards Top-Down Reasoning: An Explainable Multi-Agent Approach for Visual Question Answering**\u003Cbr>\u003Csub>机构: Sun Yat-Sen University\u003Cbr>这项工作通过创新性地结合三个代理来模拟人类认知中的自顶向下推理过程，并引入了多视角知识库的概念，显著提升了VQA模型的表现力和解释能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.17331v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.17331.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-29\u003C\u002Fspan> | **How to Build an AI Tutor that Can Adapt to Any Course and Provide Accurate Answers Using Large Language Model and Retrieval-Augmented Generation**\u003Cbr>\u003Csub>机构: The Education University of Hong Kong\u003Cbr>这篇论文代表了一次开创性的尝试，构建了一个可以适应任何学科并提供高质量的定制化教育支持的AI导师系统。这不仅能促进AI教育技术的应用，而且为AI教学系统的发展开辟了新路径。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.17696v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.17696.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-29\u003C\u002Fspan> | **TaskWeaver: A Code-First Agent Framework**\u003Cbr>\u003Csub>机构: Microsoft\u003Cbr>TaskWeaver是为构建基于LLM的自治代理而设计的代码优先框架，实现了对复杂数据的高效处理以及插件的灵活使用，并将特定域知识成功整合入系统中。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.17541v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.17541.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fmicrosoft\u002FTaskWeaver)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **Can Generalist Foundation Models Outcompete Special-Purpose Tuning? Case Study in Medicine**\u003Cbr>\u003Csub>机构: Microsoft\u003Cbr>本文通过系统的提示工程方法探讨了在无需专家监督的情况下，如何指导通用的基础模型在专业任务上发挥专家级别的能力，具体以医学领域为案例研究。所提出的Medprompt策略证明了其在增强基础模型专业能力方面的显著优势，并展示了广泛适用于多个学科的可能性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.16452v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.16452.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **Beyond Hallucinations: Enhancing LVLMs through Hallucination-Aware Direct Preference Optimization**\u003Cbr>\u003Csub>机构: Shanghai AI Laboratory\u003Cbr>文章提出了一个新颖的策略来优化LVLMs并减少幻觉现象，同时介绍了一种新的评估方法来更全面地衡量幻觉现象，并通过实验验证了所提方法的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.16839v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.16839.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **Graph Prompt Learning: A Comprehensive Survey and Beyond**\u003Cbr>\u003Csub>机构: The Chinese University of Hong Kong, Hong Kong University of Science and Technology, Fudan University  \u003Cbr>论文是关于图提示学习的综合性调研，涵盖了AGI在图数据处理方面面临的挑战以及如何通过图提示学习来实现AGI技术的跨模态、跨域和跨任务适用性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.16534v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.16534.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FWxxShirley\u002FAwesome-Graph-Prompt)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **ChatGPT's One-year Anniversary: Are Open-Source Large Language Models Catching up?**\u003Cbr>\u003Csub>机构: Nanyang Technological University\u003Cbr>这篇综述文章提供了对开源LLMs在多任务领域相较ChatGPT的性能评估的考察，突出了目前开源LLMs的强项和潜在问题，并为未来的研究和开发提供了启示。此外，文章还总结了众多的最佳实践和挑战，显示出开源领域在一定程度上有望缩小与商业模型之间的差距。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.16989v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.16989.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **Animate Anyone: Consistent and Controllable Image-to-Video Synthesis for Character Animation**\u003Cbr>\u003Csub>机构: Alibaba Group\u003Cbr>本文提出了一个利用扩散模型进行角色动画的新框架“Animate Anyone”。该框架通过ReferenceNet保持外观一致性，并通过姿态引导器与时间层确保动画的可控性与连续性，取得了先进的角色动画生成结果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.17117v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.17117.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FHumanAIGC\u002FAnimateAnyone)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Blog](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FBlog-Posts-yellow?logo=rss)](https:\u002F\u002Fhumanaigc.github.io\u002Fanimate-anyone\u002F)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **LLaFS: When Large-Language Models Meet Few-Shot Segmentation**\u003Cbr>\u003Csub>机构: Singapore University of Technology and Design, Zhejiang University \u003Cbr>本文提出了一个基于大型语言模型（LLM）的小样本图像分割框架，并解决了让LLMs理解和执行视觉任务的核心挑战。通过定制指导和细粒度上下文指导相结合的方法，实现了高质量的小样本分割。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.16926v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.16926.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Flanyunzhu99\u002FLLaFS)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **Prompting in Autoregressive Large Language Models**\u003Cbr>\u003Csub>机构: George Mason University\u003Cbr>本论文为自回归大型语言模型的提示技术领域提供了一个紧凑的文献综述，并指出了一些尚未解决的挑战和开放性问题，为未来研究提供了方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.03740v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2312.0374.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **Training Chain-of-Thought via Latent-Variable Inference**\u003Cbr>\u003Csub>机构: Google\u003Cbr>本论文开发了一种基于MCMC-EM的微调策略，通过平均理由帮助LLMs生成正确的答案，具有潜在的推广应用的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.02179v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2312.02179.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **RELIC: Investigating Large Language Model Responses using Self-Consistency**\u003Cbr>\u003Csub>机构: ETH Zurich\u003Cbr>RELIC是一个交互式系统，它通过多样本的事实一致性检验，帮助用户验证和指导LLMs生成的文本。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.16842v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.16842.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **RankingGPT: Empowering Large Language Models in Text Ranking with Progressive Enhancement**\u003Cbr>\u003Csub>机构: Alibaba Group\u003Cbr>本研究提出了一种用于文本排序的二阶段训练模型，结合了弱监督预训练和监督细化训练，通过在不损害预训练益处的基础上增强模型细化训练性能，完成了从预训练到细化训练的平滑过渡，并在实验中显著优于现有技术。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.16720v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.1672.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-28\u003C\u002Fspan> | **AvatarGPT: All-in-One Framework for Motion Understanding, Planning, Generation and Beyond**\u003Cbr>\u003Csub>研究提出了一个创新的，一体化的框架AvatarGPT，用于处理理解、规划以及生成人类动作相关的高级和低级任务，展现出长时间运动合成的能力和减少手动干预的可能性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.16468v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.16468.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-27\u003C\u002Fspan> | **RoboGPT: an intelligent agent of making embodied long-term decisions for daily instruction tasks**\u003Cbr>\u003Csub>机构: Chinese Academy of Sciences, Peking University\u003Cbr>文章提出了一个名为RoboGPT的智能体，该智能体用于制定执行日常指令任务的长期决策。该智能体通过一项新的机器人数据集，结合了LLMs的通用知识和机器人领域的专业知识，并引入了Re-Plan模块和RoboSkill模块以增强任务规划的逻辑性和适应性。在ALFRED基准测试和泛化任务上，RoboGPT优于现有的先进方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.15649v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.15649.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-25\u003C\u002Fspan> | **Faster Minimum Bayes Risk Decoding with Confidence-based Pruning**\u003Cbr>\u003Csub>机构: University of Cambridge\u003Cbr>论文提出了一个用于MBR解码的算法，该算法通过在样本估计中逐渐增加样本数量并使用置信度剪枝来减少用户函数调用。在保持准确度的同时，该算法显著降低了计算成本，并通过三种语言对的NMT实验得到了验证。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.14919v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.14919.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-24\u003C\u002Fspan> | **Calibrated Language Models Must Hallucinate**\u003Cbr>\u003Csub>机构: Microsoft Research\u003Cbr>该文章展示了预训练语言模型在充分校准的条件下，必然产生幻觉的统计根源，并介绍了预测性能良好的模型固有的幻觉产生机制。同时，文章还提供了幻觉产生率的下界估算，并探讨了不同类型事实产生幻觉的可能性，指出了未来减轻特定类型幻觉的可能方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.14648v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.14648.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-24\u003C\u002Fspan> | **Data-Efficient Alignment of Large Language Models with Human Feedback Through Natural Language**\u003Cbr>\u003Csub>机构: Amazon\u003Cbr>文章提出了一个有效的CnR方法，它能够通过使用自然语言的精细反馈和响应修正，高效地校准LLMs以符合人类预期。通过相对较少的人类反馈数据，此方法可以显著改善即使是顶尖LLMs的响应质量，如ChatGPT。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.14543v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.14543.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-23\u003C\u002Fspan> | **Controlling Large Language Model-based Agents for Large-Scale Decision-Making: An Actor-Critic Approach**\u003Cbr>\u003Csub>机构: Chinese Academy of Sciences\u003Cbr>LLaMAC框架展示了基于LLM的多智能体系统在长期规划、数学推理、优化问题和空间推理方面的卓越表现，并且减少了大规模多智能体协作的访问成本。随着LLM的进一步提升和更多协作框架的出现，多智能体协作领域将迎来新的发展机遇。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13884v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13884.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-23\u003C\u002Fspan> | **ZipLoRA: Any Subject in Any Style by Effectively Merging LoRAs**\u003Cbr>\u003Csub>机构: Google Research\u003Cbr>文章提出了一种名为ZipLoRA的新策略，旨在通过一个优化过程有效地合并独立训练的主题和风格LoRAs，从而能够生成任何用户提供的主题风格的组合。ZipLoRA对生成任何特定主题和风格的图像这一开放性研究问题提供了创新的解决方案，且由于其无需手动超参数调整，使用起来更加简便高效。实验证明该方法在保持主题和风格真实性的同时，相比于现有方法和其他基本方法而言，具有更好的生成质量和鲁棒性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13600v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.136.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-23\u003C\u002Fspan> | **Diffusion Model Alignment Using Direct Preference Optimization**\u003Cbr>\u003Csub>机构: Nikhil Naik, Stanford University\u003Cbr>本文提出了一个名为Diffusion-DPO的方法，其通过直接优化基于人类比较数据的模型来实现对扩散模型与人类偏好的对齐。此外，文章也探索了基于AI反馈的训练，取得了与基于人类偏好训练相媲美的成绩。这明显提升了模型在视觉吸引力和文本对齐方面的性能，为利用AI反馈扩展扩散模型对齐方法提供了新的途径。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12908v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12908.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-23\u003C\u002Fspan> | **LucidDreamer: Domain-free Generation of 3D Gaussian Splatting Scenes**\u003Cbr>\u003Csub>机构: ASRI\u003Cbr>LucidDreamer是一个能够用于生成逼真而且分辨率更高的3D场景的模型。它优于现有的场景生成模型，因为它不依赖特定的训练数据集，并能够适应多种输入样式。LucidDreamer通过约束点云的移动和使用插值算法，克服了形状扭曲和点云与图像错位的问题，从而在操纵3D空间中的点云时保持了场景的真实感和一致性。在实验中明显展示了其优越性和高泛化能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13384v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13384.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-23\u003C\u002Fspan> | **FusionFrames: Efficient Architectural Aspects for Text-to-Video Generation Pipeline**\u003Cbr>\u003Csub>机构: Sber AI\u003Cbr>总体而言，该论文提出了一个新型两阶段潜在扩散的文本到视频生成架构，解决了关键帧合成和插值帧生成中存在的问题，通过使用独立的时域块和有效的插值架构，减少了计算成本，并在多个质量指标上取得了优于现有技术的表现。此外，论文还针对视频解码器设计了不同的架构选项，进一步优化了视频的一致性和整体质量。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13073v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13073.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-23\u003C\u002Fspan> | **GAIA: a benchmark for General AI Assistants**\u003Cbr>\u003Csub>机构: FAIR, Meta\u003Cbr>GAIA 是一项针对通用人工智能助理的基准测试，其目的在于提出真实世界的挑战性问题，并避开传统 LLMs 评价中的许多陷阱。该基准测试强调任务对人类简单而对AI难度较大，以此来评估AI的执行复杂行动序列的准确能力，这些任务在设计上无法简单地通过暴力方法得以解决。GAIA 还考虑了如何扩展基准测试，并探讨了一些最先进的助理的成功与短板，展示了增强 LLMs 的潜力。最终，文章旨在设立一个开发者问题集，为人工智能研究提供一个可扩展的基准测试平台。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12983v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12983.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-23\u003C\u002Fspan> | **Probabilistic Tree-of-thought Reasoning for Answering Knowledge-intensive Complex Questions**\u003Cbr>\u003Csub>机构: Tsinghua University\u003Cbr>文章提出了一种新颖的概率树状推理（ProbTree）方法，通过探索LLM在回答知识密集型复杂问题时的能力，并将不确定性引入推理过程，在统一框架中整合了外部和参数知识。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13982v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13982.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-22\u003C\u002Fspan> | **Visual In-Context Prompting**\u003Cbr>\u003Csub>机构: HKUST, Microsoft Research\u003Cbr>本论文提出了DINOv，一个新的视觉上下文内提示框架，能够有效处理多样化的视觉提示，使用无标签数据，并在多个任务中达到很好的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13601v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13601.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FUX-Decoder\u002FDINOv)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-22\u003C\u002Fspan> | **AlignedCoT: Prompting Large Language Models via Native-Speaking Demonstrations**\u003Cbr>\u003Csub>机构: The Hong Kong University of Science and Technology (Guangzhou), The Hong Kong University of Science and Technology, University of California, Los Angeles\u003Cbr>本文提出的AlignedCoT技术，旨在通过对齐LLMs的CoT文本风格与其“本土风格”，来提高LLMs的推理能力，并通过实验证明了其有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13538v4)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13538.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-22\u003C\u002Fspan> | **Enhancing Summarization Performance through Transformer-Based Prompt Engineering in Automated Medical Reporting**\u003Cbr>\u003Csub>机构: Utrecht University\u003Cbr>这项研究验证了在自动化医疗报告中应用基于转换器的提示工程可以提高摘要性能。尽管存在一些局限性，但研究提出的方法证明了在提示制定时加入示例和上下文信息的效用，并且指出了未来工作的方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13274v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13274.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-22\u003C\u002Fspan> | **LIMIT: Less Is More for Instruction Tuning Across Evaluation Paradigms**\u003Cbr>\u003Csub>机构: Princeton University\u003Cbr>本论文的主要贡献包括：在开源模型上微调不同大小和风格的指令数据集，评估微调模型在不同的评估范式下的表现，并且发现较少的样本（特别是当这些样本结合了不同来源和风格时）足以在不同类型的评估中获得良好的性能。这表明在培养LLMs的指令遵从能力时，“少即是多”，且通过精心选择微调样本，可以使模型在执行指令能力上得到显著提升。这一发现对于如何有效地微调LLMs以及如何评估它们的实用性具有重要意义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13133v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13133.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-22\u003C\u002Fspan> | **XAGen: 3D Expressive Human Avatars Generation**\u003Cbr>\u003Csub>机构: National University of Singapore, ByteDance\u003Cbr>研究提出了XAGen模型，它是首个能够生成全面可控3D人类化身的GAN模型。XAGen在细粒度属性控制上具有独立的能力，并通过多尺度和多部分的3D表示与渲染技术提升了面部和手部的生成质量。实验结果证明XAGen在外观质量、控制能力和数据利用率方面都超过了现有最先进的方法，推进了3D虚拟化身生成技术的发展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13574v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13574.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-21\u003C\u002Fspan> | **AcademicGPT: Empowering Academic Research**\u003Cbr>\u003Csub>机构: International Digital Economy Academy\u003Cbr>AcademicGPT针对学术研究的特定需求进行了优化，通过结合针对性强的训练数据和多方面的应用开发，为学术领域提供了实质性的支持和工具。它标志着大型语言模型个性化与专业化发展的一个重要步骤，并有望对学术社区产生深远的影响。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12315v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12315.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-21\u003C\u002Fspan> | **Do Smaller Language Models Answer Contextualised Questions Through Memorisation Or Generalisation?**\u003Cbr>\u003Csub>机构: University of Auckland\u003Cbr>本论文提出了一种新方法以评价小型语言模型在问答任务中答案的生成是否为记忆或概括能力的结果。通过语义相似度分析，确定了不太可能被模型记住答案的评估样本，并用增加额外训练数据集的方式，针对特定评估子集进行了模型性能的优化。最终，研究结果显示增加了数据集的模型在特定评估数据集上有了显著提升，并推断这种改善与模型的泛化能力有关。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12337v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12337.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-21\u003C\u002Fspan> | **A Survey on Multimodal Large Language Models for Autonomous Driving**\u003Cbr>\u003Csub>机构: Purdue University\u003Cbr>该论文全面回顾了MLLMs在自动驾驶领域的应用，表明MLLMs具备解析非文本数据和融合多种模态（如视觉、语言）的能力，这些能力对于行为预测和动作规划尤为重要。通过在不同的自动驾驶环节中部署MLLMs（如理解交通场景、规划控制、模式生成），可以改善决策流程，并实现类似人类的驾驶直觉和决策模式，同时提高车辆导航和规划的效率和安全性。此外，模型通过为多个任务的预训练提供了一种新的可能性，这可能会推动把智能系统推向人工普遍智能（AGI）的发展路径。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12320v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.1232.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-21\u003C\u002Fspan> | **Oasis: Data Curation and Assessment System for Pretraining of Large Language Models**\u003Cbr>\u003Csub>机构: Chinese Academy of Sciences\u003Cbr>本文提出的Oasis系统是针对大型语言模型预训练的数据整理和评估问题的解决方案。Oasis通过其交互式的自定义数据整理模块、针对偏差的模型过滤器和全面的数据评估系统，旨在提高数据集的质量和多样性，同时降低内存需求和资源消耗。系统的实现立足于提升数据处理的灵活性和评估的准确性，填补了现有工作在全面性和多维度评估方面的空白。通过综合使用人类评估、启发式度量和最新的大型语言模型如GPT-4进行质量评估，Oasis展现了对预训练数据集进行全方位优化的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12537v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12537.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-21\u003C\u002Fspan> | **Mechanistically analyzing the effects of fine-tuning on procedurally defined tasks**\u003Cbr>\u003Csub>机构: University of Cambridge\u003Cbr>本文针对微调对预定义能力的影响开展了一项全面的分析和评估。通过Tracr编译式的能力设计和基于PCFG的学习式能力设计，文章详细探讨了微调过程中嵌入特征的相关性，提出了reFT来强化分析微调影响的深度。本研究的发现改进了对微调影响机理的理解，并为后续的模型设计和微调策略提供了实证支持。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12786v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12786.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-21\u003C\u002Fspan> | **How Capable Can a Transformer Become? A Study on Synthetic, Interpretable Tasks**\u003Cbr>\u003Csub>机构: University of Pennsylvania, MIT\u003Cbr>本文通过设计合成数据生成过程和系统性实验，以评估和理解自回归Transformer模型在组合其原始能力方面的潜力。研究结果突显了模型学习组合结构的能力，揭示了训练数据对此能力的影响以及模型内部注意力层在组合学习过程中的重要性。这或许为评估和提高现代神经网络对真实世界数据的理解和应用，特别是在其可能面临前所未见的任务时，提供了新的见解。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12997v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12997.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-21\u003C\u002Fspan> | **Latent Lab: Large Language Models for Knowledge Exploration**\u003Cbr>\u003Csub>机构: Department of Electrical Engineering and Computer Science, MIT\u003Cbr>Latent Lab作为一种探索大型数据集中相互联系关系的创新和强大工具，通过利用LLMs和视觉引人注目的接口，它超越了常规搜索的局限性，提供了一个语义上有意义和情境感知的体验。强调探索的价值和迭代设计，在直观地访问大量相互连接的信息方面实现了信息技术专家的长期追求，并通过AI辅助探索将这一愿景变为现实，为未来人工智能共创系统的发展奠定了基础，并促进了更直观和高效的合作，有能力产生新颖和有影响力的创造物。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.13051v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.13051.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-21\u003C\u002Fspan> | **Prompting Frameworks for Large Language Models: A Survey**\u003Cbr>\u003Csub>机构: Zhejiang University\u003Cbr>这项研究提供了一个框架，它通过实现新的技术手段来增强与LLMs的交互，包括改善与编程语言的兼容性，使能LLMs使用外部工具，并维护历史交互信息，并以此指导未来的研究方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12785v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12785.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Flxx0628\u002FPrompting-Framework-Survey)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-21\u003C\u002Fspan> | **Advancing Transformer Architecture in Long-Context Large Language Models: A Comprehensive Survey**\u003Cbr>\u003Csub>机构: Nanjing University\u003Cbr>文章为了解决LLMs在应对长上下文时的挑战，提出了一系列方法和综合分类体系，提高了LLMs在注意力机制、记忆效率和最大长度处理上的性能。通过综合回顾和分类学界最近的进展，本文为未来的LLMs架构设计和优化提供了清晰的指导方向。。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12351v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12351.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FStrivin0311\u002Flong-llms-learning)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-20\u003C\u002Fspan> | **GPQA: A Graduate-Level Google-Proof Q&A Benchmark**\u003Cbr>\u003Csub>机构: New York University\u003Cbr>GPQA 数据集提供了一个用于测试 AI 系统在处理需深度理解和推理能力的复杂问题上的能力的基准。通过严格的问题质量控制和专家级别的难度，它可能促进人类专家与 AI 系统合作的方法发展，并推动 AI 系统设计的进步。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12022v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12022.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-20\u003C\u002Fspan> | **Igniting Language Intelligence: The Hitchhiker's Guide From Chain-of-Thought Reasoning to Language Agents**\u003Cbr>\u003Csub>机构: Shanghai Jiao Tong University\u003Cbr>本文作为首篇系统性探讨CoT基步机制、范式转变，以及CoT与代理间复杂交互的工作，提供了一些关键见解。文章揭示了CoT在特定条件下显示出的有效性，指出了使CoT工作的多个条件，以及理论和实证研究为其成功提供了何种解释。文章还对CoT理论进行了深入分析，提出了CoT对于LLMs在多个领域的优化和革新可能具有重要的贡献，并指出尽管LLMs、CoT推理和语言代理快速发展，但仍存在未解决的挑战，如对未见领域的泛化、提高交互效率、代理定制化、代理扩展及代理安全性等【10†源】。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.11797v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.11797.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FZoeyyao27\u002FCoT-Igniting-Agent)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-20\u003C\u002Fspan> | **Continual Learning: Applications and the Road Forward**\u003Cbr>\u003Csub>机构: KU Leuven\u003Cbr>论文综述了当前的持续学习研究现状，指出了其在记忆限制条件下研究较多而忽视计算成本的问题，并提出了四个有前途的研究方向。这些方向包括：1) 真实世界数据处理的挑战，2) 计算成本的考虑，以及其他如何获取数据和理论理解方面的关注点。论文主张未来的CL算法应在减少对完全标记和封闭世界假设的依赖上做出实质性的进展，以使CL成为解决实际机器学习问题的一个有效工具。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.11908v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.11908.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-20\u003C\u002Fspan> | **Assessing Prompt Injection Risks in 200+ Custom GPTs**\u003Cbr>\u003Csub>机构: Northwestern University\u003Cbr>该论文着重研究了自定义GPT模型中的安全风险，尤其是提示注入攻击。研究者们提出了一个包含扫描、注入敌意提示和提取目标信息三个步骤的攻击方法，并通过实施评估发现自定义GPT模型存在严重的系统提示提取和文件泄露漏洞。这些发现突出了自定义GPT模型中的关键安全缺陷，并指出了提升这些模型安全性结构的必要性。此外，红队评估清楚地显示出，现有防护措施并不足够强大，甚至有时候明确指出不应该分享的信息也能被提取出来，这表明亟需进一步加强对抗提示注入攻击的防御机制。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.11538v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.11538.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-19\u003C\u002Fspan> | **TPTU-v2: Boosting Task Planning and Tool Usage of Large Language Model-based Agents in Real-world Systems**\u003Cbr>\u003Csub>机构: SenseTime Researc\u003Cbr>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.11315v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.11315.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-18\u003C\u002Fspan> | **An Embodied Generalist Agent in 3D World**\u003Cbr>\u003Csub>机构: Beijing Institute for General Artificial Intelligence \u003Cbr>LEO是一个新型的身体化、多模态、多任务的通用型智能体，专注于在3D世界中的感知、基础、推理、规划和行动。通过对3D视觉-语言对齐和视觉-语言-动作指令调优的训练，LEO能在3D世界中执行一系列任务。文章通过一系列严格实验和消融实验的结果，证实了LEO在一系列任务上的高效性能，并为未来身体化通用型智能体的发展提供了宝贵洞见。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.12871v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.12871.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-18\u003C\u002Fspan> | **Adapters: A Unified Library for Parameter-Efficient and Modular Transfer Learning**\u003Cbr>\u003Csub>机构: Technical University of Darmstadt, University of Cambridge\u003Cbr>论文提出了一个统一的库——Adapters，它整合并扩展了参数高效和模块化迁移学习方法，实现了与Transformers库的紧密整合，通过多个NLP任务的对比实验，展示了其有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.11077v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.11077.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-18\u003C\u002Fspan> | **Orca 2: Teaching Small Language Models How to Reason**\u003Cbr>\u003Csub>机构: Microsoft Research\u003Cbr>文章通过介绍一个新的小型语言模型Orca 2，并展示其在多种推理任务上能够与更大的模型相匹敌或超越它们的性能，对当前小型语言模型在复杂推理任务中表现不佳的问题提出了有效的解决方案。Orca 2的开发依赖于对训练数据和训练策略的精心设计，证明了即使是小型模型，也可以通过改进训练方法来增强其理解和推理能力。文章还提供了Orca 2在各种标准测试中的卓越性能结果，验证了其方法论在实际应用中的有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.11045v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.11045.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-18\u003C\u002Fspan> | **RecExplainer: Aligning Large Language Models for Recommendation Model Interpretability**\u003Cbr>\u003Csub>机构: University of Science and Technology of China\u003Cbr>文章针对推荐模型解释性的研究提出了一种新型的方法，即通过大型语言模型进行对齐，以提高解释的质量和准确性。文章介绍了三种不同的对齐方法，并通过一系列任务训练LLM以模仿推荐模型的逻辑。论文采用了多种评估策略和评分体系，包括使用最新的GPT-4模型和人类评分来验证所提出方法的有效性，并在三个不同的数据集上进行了测试，显示出其在提高推荐模型解释性方面的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.10947v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.10947.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-17\u003C\u002Fspan> | **Camels in a Changing Climate: Enhancing LM Adaptation with Tulu 2**\u003Cbr>\u003Csub>机构: Allen Institute for AI \u003Cbr>TÜLU 2通过采用新的基础模型和调整策略，在多个性能指标上实现了突破，对进一步理解和改进预训练语言模型的适配具有重要意义。通过引入新的数据混合物和先进的训练方法（如DPO），TÜLU 2提高了模型在各种推理和知识探测任务上的性能，并在开放式生成指标上取得了显著的提升。此外，研究者们通过公开相关模型、数据和代码，推动了语言模型适配方法的开放研究和发展。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.10702v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.10702.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-17\u003C\u002Fspan> | **Exploring the Relationship between In-Context Learning and Instruction Tuning**\u003Cbr>\u003Csub>机构: HKUST\u003Cbr>论文提供了ICL与IT之间密切相关的实证证据，即使ICL中不更改模型参数，二者所使用的指令和示例都驱动模型朝着收敛的隐藏状态前进。这一发现对于如何设计高效的数据集和任务以推进基础模型在下游应用的发展和对齐具有启示作用。研究结果还可以帮助理解示例在ICL和IT中的作用，以及如何利用这些见解来设计有效的示例任务和数据集，从而提升LLM的性能。论文中申明将会提供实验代码以供复现。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.10367v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.10367.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-16\u003C\u002Fspan> | **MacGyver: Are Large Language Models Creative Problem Solvers?**\u003Cbr>\u003Csub>机构: University of California, Princeton University\u003Cbr>本研究通过创造MACGYVER数据集，探索了LLMs在解决非传统问题上的能力，并通过人类评估员对GPT-4的表现进行了评价。研究结果展示了LLMs在这类任务上的局限性，同时提出了提高其表现的新方法。研究强调了创造性问题解决能力在日常生活中的重要性，并尝试通过LLMs补充人类的创造性思维，以期提高解决问题的能力和效率。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.09682v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.09682.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-16\u003C\u002Fspan> | **Crafting In-context Examples according to LMs' Parametric Knowledge**\u003Cbr>\u003Csub>机构: The University of Texas at Austin\u003Cbr>本文的重点研究是如何根据LM的参数知识有效地创建上下文示例：选择最优的示例（已知与未知的比较）以及在上下文示例中如何排序答案。实验结果支持了半已知示例的有效性以及基于参数知识的答案排序方法，这些发现为提高大型语言模型在多答案生成任务中的性能提供了可行的技术途径。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.09579v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.09579.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-16\u003C\u002Fspan> | **Predictive Minds: LLMs As Atypical Active Inference Agents**\u003Cbr>\u003Csub>机构: Charles University\u003Cbr>本论文将活动推断的概念应用于大型语言模型（LLMs），从一个新的视角分析了LLMs的行为和学习机制。论文提出，尽管LLMs在物理上无法直接与环境互动，但它们通过生成文本在虚拟环境中的“行动”间接影响世界，并有可能将这些影响反馈到模型的训练中。研究指出，增强LLMs与用户交互的反馈循环，将有助于提升模型的自我意识，让其更好地适应和响应环境变化，这将带来重大的社会影响和潜在的风险。论文为理解和改进LLMs在实际部署时的行为提供了重要的理论基础，预测了这些系统未来可能的发展方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.10215v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.10215.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-16\u003C\u002Fspan> | **Automatic Engineering of Long Prompts**\u003Cbr>\u003Csub>机构: Google\u003Cbr>本文针对语言模型长指令工程中存在的问题，提出了一种新的算法框架，并解决了贪婪算法易陷入局部最优和遗传算法初期收敛慢的问题。通过对指令的每个句子进行语义保持重述，并利用波束搜索来维护和优化候选指令集合，使算法在有限训练数据上表现出良好的性能和较快的收敛速度。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.10117v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.10117.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-15\u003C\u002Fspan> | **Contrastive Chain-of-Thought Prompting**\u003Cbr>\u003Csub>机构: DAMO Academy, Alibaba Group\u003Cbr>本论文提出了对比式链式思维方法，以解决传统链式思维中存在的问题，即缺乏对错误避免的指导以及实现推理效果的不确定性。通过提供有效和无效的推理示例，新方法旨在引导模型减少推理错误并一步步推理，同时该方法提供了自动化构建对比示例的技术以便泛化到各种任务。实验结果证实，该方法能够作为一种通用增强手段，显著提升链式思维的性能。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.09277v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.09277.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-15\u003C\u002Fspan> | **Chain-of-Note: Enhancing Robustness in Retrieval-Augmented Language Models**\u003Cbr>\u003Csub>机构: Tecent AI Lab\u003Cbr>论文提出的CHAIN-OF-NOTE（CON）框架旨在提高RALMs的鲁棒性，主要通过引入结构化的阅读笔记过程来批判性地评估检索到的文档。实验结果表明，该框架提高了模型在噪声数据和未知情况下的健壮性，改善了整体QA性能，并在检索文档失败还是成功时均提高了模型的性能。CON框架通过生成读取笔记和最终回答，提高了模型对噪声的鲁棒性，并在缺乏信息时能够给出“未知”的回答，增强了模型的适应性和可靠性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.09210v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.0921.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-15\u003C\u002Fspan> | **Exponentially Faster Language Modelling**\u003Cbr>\u003Csub>机构: ETH Zurich\u003Cbr>本文介绍了UltraFastBERT，这是一个大规模语言模型的变种，它显著减少了在推理时需要使用的神经元数量，并通过使用快速前馈网络来提高计算效率。尽管不具备原生的高效实现，但该模型提供了一个能够显著加速推理过程的CPU代码实现，并在标准下游任务中表现良好。这一工作展示了条件神经执行在语言建模领域巨大的潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.10770v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.1077.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-15\u003C\u002Fspan> | **ToolTalk: Evaluating Tool-Usage in a Conversational Setting**\u003Cbr>\u003Csub>机构: Microsoft Corporation\u003Cbr>ToolTalk 是一个致力于评估和提高 LLM 在对话环境中使用多步骤外部工具性能的基准。它通过创新的评估方法和真实场景模拟，挑战和扩展了现有 LLMs 的能力边界，并为未来的研究指出了方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.10775v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.10775.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fmicrosoft\u002FToolTalk)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-15\u003C\u002Fspan> | **Memory Augmented Language Models through Mixture of Word Experts**\u003Cbr>\u003Csub>机构: Google Research\u003Cbr>本论文提出了一个称为MoWE的新型架构，它通过融合稀疏模型的效率和大型语言模型的性能，出色地处理了性能与计算成本之间的平衡。通过采取创新的设计原则，并且在NLP多种任务中验证了其超越传统模型如T5和MoE的性能，MoWE展示了在学术和实际应用领域的潜力，尤其是在处理知识密集型任务时。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.10768v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.10768.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-14\u003C\u002Fspan> | **Instruction-Following Evaluation for Large Language Models**\u003Cbr>\u003Csub>机构: Google, Yale University\u003Cbr>本文提出了一种评估大型语言模型的指令遵循能力的新方法——IFEval，它通过合成逻辑一致的指令和计算指令遵循准确性的新准则来解决评估过程中的挑战。此方法为自动化且无偏见，它通过多步骤过程避免指令间的潜在冲突，并引入了严格和宽松的准确性评价标准来减少误判，同时认为未来可以通过增加多样化和使用多模态指令来改进该方法。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.07911v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.07911.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fgoogle-research\u002Fgoogle-research\u002Ftree\u002Fmaster\u002Finstruction_following_eval)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-14\u003C\u002Fspan> | **Learning to Filter Context for Retrieval-Augmented Generation**\u003Cbr>\u003Csub>机构: Carnegie Mellon University\u003Cbr>本文提出的FILCO方法针对开放领域问答和事实验证等知识密集型任务，通过改善提供给生成模型的上下文质量来解决生成输出时面临的问题。通过结合词汇和信息论方法来识别有用上下文，并训练模型以在测试时过滤检索上下文，很好地解决了以前方法的局限性。实验结果显示，相比传统方法，FILCO在多个知识密集型任务上都取得了显著的性能改进，并且在上下文过滤训练上显示出其有效性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.08377v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.08377.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-14\u003C\u002Fspan> | **KTRL+F: Knowledge-Augmented In-Document Search**\u003Cbr>\u003Csub>机构: KAIST AI, Samsung Research\u003Cbr>文章提出了一个新的问题——KTRL+F，以解决文献搜索中的实时、准确性、引入外部知识的需求。通过分析现有基线，文章发现它们存在局限性，在此基础上提出了Knowledge-Augmented Phrase Retrieval模型。该模型有效地在短语检索中整合了外部知识，通过简单的扩展保持了快速响应，无需额外训练。通过用户研究，证明了该模型能够提升用户搜索体验，减少搜索时间和外部信息检索量。作者鼓励研究社区关注KTRL+F这一独特挑战，提高文献信息访问的效率和效果。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.08329v3)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.08329.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-13\u003C\u002Fspan> | **Can LLMs Patch Security Issues?**\u003Cbr>\u003Csub>机构: School of Computer Science Atlanta\u003Cbr>本文介绍了一种新型的代码修正方法FDSS，通过与静态代码分析工具Bandit集成，能显著提高LLMs解决代码中安全问题的能力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2312.00024v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2312.00024.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FKamel773\u002FLLM-code-refine)\u003C\u002Fdiv> |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-13\u003C\u002Fspan> | **In-context Learning Generalizes, But Not Always Robustly: The Case of Syntax**\u003Cbr>\u003Csub>机构: NYU, Microsoft\u003Cbr>本论文揭示了大型语言模型在理解和泛化句法结构时可能存在的局限性，这对于改进语言模型处理复杂语法任务的方式具有重要意义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.07811v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.07811.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-11\u003C\u002Fspan> | **In-context Vectors: Making In Context Learning More Effective and Controllable Through Latent Space Steering**\u003Cbr>\u003Csub>机构: Stanford University\u003Cbr>本论文提出的ICV方法为大型语言模型的上下文学习提供了一种新颖且更加有效的替代方案。通过将演示示例的关键信息集成到一个可以控制的向量中，ICV方法提高了任务指导的精确度和效果，并显著优于现有的方法。实验结果表明，ICV在多项任务中展现了较高的性能，包括在不同的LLMs上进行语言模型解毒、风格转换和角色扮演。ICV方法的计算开销低，并且易于控制，有助于提升语言模型在实际应用中的适用性和弹性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.06668v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.06668.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-10\u003C\u002Fspan> | **Making LLMs Worth Every Penny: Resource-Limited Text Classification in Banking**\u003Cbr>\u003Csub>机构: Helvia.ai\u003Cbr>论文首次将多种在资源受限环境下的方法进行了全面评估，包括成本分析、RAG方法和利用GPT-4的数据增强，为金融行业提供了新的方法用以应对数据和预算限制的挑战。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.06102v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.06102.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-05\u003C\u002Fspan> | **ChaTA: Towards an Intelligent Question-Answer Teaching Assistant using Open-Source LLMs**\u003Cbr>\u003Csub>机构: Cornell University, Microsoft Research\u003Cbr>本文提供了一个使用开源LLMs增强在线教育QA平台的新方案，并对其进行了广泛的评估和测试。通过将RAG、SFT和DPO等技术结合应用，确保了回答质量的显著提升和数据隐私的保护，对于开发智能QA助手具有重要的意义。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.02775v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.02775.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>11-01\u003C\u002Fspan> | **LLMRec: Large Language Models with Graph Augmentation for Recommendation**\u003Cbr>\u003Csub>机构: University of Hong Kong, Baidu\u003Cbr>LLMRec作为开创性的工作，它引入LLMs来增强图推荐系统，成功地解决了交互数据的稀疏性和低质量侧信息的问题，并通过强化用户-项目交互边、项目节点属性以及用户画像等手段提升了推荐系统的性能，确保了推荐质量的同时降低了数据噪声的影响。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2311.00423v5)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-11\u002F2311.00423.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002FHKUDS\u002FLLMRec.git)\u003C\u002Fdiv> |\n\n---\n\n\n\n### 10月\n\n|  日期   | 论文 | 链接与摘要 |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>10-20\u003C\u002Fspan> | **强化学习与人类反馈的历史及风险**\u003Cbr>\u003Csub>机构: 伯克利\u003Cbr>\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2310.13595v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-10\u002F2310.13595.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>10-17\u003C\u002Fspan> | **Self-RAG：通过自我反思学习检索、生成与批判**\u003Cbr>\u003Csub>机构: 华盛顿大学\u003Cbr>论文推出了SELF-RAG，这是一种新的框架，通过按需检索和自我反思来增加LLMs的质量和事实性。它通过生成反思标记让LM在推理阶段变得可控，可以满足多样化的任务要求。SELF-RAG在多个任务上显著超越了现有LLMs和RAG模型，并通过定制的解码算法和反思标记，为模型自我评估和定制提供了新的方案。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2310.11511v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-10\u002F2310.11511.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>10-11\u003C\u002Fspan> | **OpsEval：面向大型语言模型的综合性任务导向型AIOps基准测试**\u003Cbr>\u003Csub>机构: 清华大学、中国科学院\u003Cbr>OpsEval 作为一个全面的 AIOps 任务导向型基准测试，不仅评估了大型语言模型的综合性能、推理和实际应用能力，还可能改变未来大规模质量评估中使用的评价指标。它提供了一个用于持续研究和优化AIOps领域大型语言模型的坚实基础。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2310.07637v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-10\u002F2310.07637.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>10-10\u003C\u002Fspan> | **GPT-4能否作为农艺师助手？利用大型语言模型解答农业考试题**\u003Cbr>\u003Csub>机构: 微软研究院\u003Cbr>本研究展示了在农业领域使用LLMs进行问题回答的新方法，特别是通过Ensemble Refinement策略，大幅提升了LLMs在多选题目上的表现，并显示出在处理专业领域问题时的广泛潜力。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2310.06225v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-10\u002F2310.06225.md)  |\n\n---\n\n### 09月\n\n|  日期   | 论文 | 链接与摘要 |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>09-04\u003C\u002Fspan> | **检索增强生成中的大型语言模型基准测试**\u003Cbr>\u003Csub>机构: 中国信息处理实验室 \u003Cbr>本论文提出了一种新的基于实际新闻文章的检索增强生成基准测试，用以彻底评估大型语言模型在复杂信息环境中的多项能力，并通过实验结果展现了现有LLMs在这些方面的局限性。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2309.01431v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-09\u002F2309.01431.md)  |\n\n---\n\n### 08月\n\n|  日期   | 论文 | 链接与摘要 |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>08-18\u003C\u002Fspan> | **面向AIOps的日志表示学习**\u003Cbr>\u003Csub>机构: IBM研究院\u003Cbr>本文提出的BERTOps模型通过使用LLMs中的通用表示，并结合专门针对AIOps日志数据的预训练，有效地提高了自动化日志分析任务的性能，并展示了显著的改进。BERTOps不仅优于现有模型，在多个下游任务中也表现出卓越的性能，有助于加速AIOps的实践应用。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2308.11526v1)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-08\u002F2308.11526.md)  |\n\n---\n\n### 07月\n\n|  日期   | 论文 | 链接与摘要 |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>07-11\u003C\u002Fspan> | **借助对比示例与显著性图理解上下文学习**\u003Cbr>\u003Csub>机构: 马里兰大学\u003Cbr>本研究使用对比示例和显著图分析法来探究大型语言模型中上下文学习的内在机制，揭示了标签翻转、输入变化、和补充性解释对预测的不同影响，并为实践者提供了如何策划示例的洞见。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2307.05052v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-07\u002F2307.05052.md) \u003Cdiv style='min-width:85px;'>[![GitHub](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FGitHub-View-brightgreen?logo=github)](https:\u002F\u002Fgithub.com\u002Fpaihengxu\u002FXICL)\u003C\u002Fdiv> |\n\n---\n\n### 06月\n\n|  日期   | 论文 | 链接与摘要 |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>06-07\u003C\u002Fspan> | **PromptRobust：评估大型语言模型对对抗性提示的鲁棒性**\u003Cbr>\u003Csub>机构: 微软研究院\u003Cbr>PromptRobust是一个全新的、开放性的基准测试，旨在评估LLMs如何对待可能在现实世界中自然发生的输入错误，如错别字和同义词替换。这一工具的开源将有助于未来的稳健性研究。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2306.04528v5)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-06\u002F2306.04528.md)  |\n\n---\n\n### 05月\n\n|  日期   | 论文 | 链接与摘要 |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-24\u003C\u002Fspan> | **基于交叉熵差异的上下文示例选择**\u003Cbr>\u003Csub>机构: 微软认知服务研究\u003Cbr>文章提出了一种新的基于交叉熵差异（CED）的上下文示例选择方法，并提供了理论上的解释，实现了对不同大小和类型的大型语言模型性能的提升。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2305.14726v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-05\u002F2305.14726.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-23\u003C\u002Fspan> | **标签词是锚点：理解上下文学习的信息流视角**\u003Cbr>\u003Csub>机构: Lean Wang, Lei Li, Damai Dai, Deli Chen, Hao Zhou, Fandong Meng, Jie Zhou, Xu Sun\u003Cbr>本论文通过信息流视角研究了大型语言模型进行上下文学习（ICL）的内部机制，发现了标签词在信息流中作为锚点的现象，提出了新假设，并通过实验验证了其有效性。此外，使用所得洞见提出了提高ICL性能的方法，为未来相关研究提供了理论基础和实践指导。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2305.14160v2)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-05\u002F2305.1416.md)  |\n| \u003Cspan style='display: inline-block; width: 42px;'>05-19\u003C\u002Fspan> | **如何提示大型语言模型进行文本到SQL转换：零样本、单领域与跨领域设置下的研究**\u003Cbr>\u003Csub>机构: 俄亥俄州立大学\u003Cbr>本研究揭示出有效提示构造的关键数据库知识和最优表述，为LLMs在text-to-SQL任务中的应用提供指导，并指出在跨域设置中对于提示长度存在一个“甜蜜点”。本研究的发现可能对于特定数据库不总是适用，特别是如果该数据库与Spider数据库显著不同。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2305.11853v3)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-05\u002F2305.11853.md)  |\n\n---\n\n### 03月\n\n|  日期   | 论文 | 链接与摘要 |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>03-31\u003C\u002Fspan> | **大型语言模型综述**\u003Cbr>\u003Csub>机构: 中国人民大学\u003Cbr>总的来说，这篇综述文章介绍了LLMs领域的最新进展，特别是OpenAI推出的ChatGPT和GPT-4模型，并强调了这些产品对人工智能研究的重大影响，特别指出了它们在人机交流、多模态理解和生成、以及人工智能对齐和安全性方面的突破。同时，文章认识到尽管取得了巨大的技术进展，但在安全性、生成质量和多模态性功能方面仍面临挑战，并提出了一系列的技术和策略来缓解这些问题。通过这篇文章，我们可以更好地理解LLMs的发展方向以及对未来人工智能应用和研究的潜在影响。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2303.18223v13)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-03\u002F2303.18223.md)  |\n\n---\n\n### 02月\n\n|  日期   | 论文 | 链接与摘要 |\n| --- | --- | --- |\n| \u003Cspan style='display: inline-block; width: 42px;'>02-08\u003C\u002Fspan> | **ChatGPT在推理、幻觉与交互性方面的多任务、多语言、多模态评估**\u003Cbr>\u003Csub>机构: 人工智能研究中心\u003Cbr>文章通过更细粒度的方式评估了ChatGPT的推理能力，并且找到了LLMs中的一个关键问题，即在非文本语义理解方面的不足。这一发现对于未来LLMs的改进和推理能力的研究提供了重要的方向。\u003C\u002Fsub>| \u003Cdiv style='min-width:85px;'>[![arXiv](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FarXiv-Paper-%23D2691E?logo=arxiv)](http:\u002F\u002Farxiv.org\u002Fpdf\u002F2302.04023v4)\u003C\u002Fdiv>\u003Cdiv style='min-width:85px;'>[![Summary](https:\u002F\u002Fimg.shields.io\u002Fbadge\u002FSum.-Read-blue?logo=dependabot)](summary\u002F2023-02\u002F2302.04023.md)  |\n\n---\n\n\n## 星标历史\n\u003Cpicture>\n\u003Csource\n    media=\"(prefers-color-scheme: dark)\"\n    srcset=\"\n    https:\u002F\u002Foss.gittoolsai.com\u002Fimages\u002Fxianshang33_llm-paper-daily_readme_ecea10038452.png&theme=dark\n    \"\n\u002F>\n\u003Csource\n    media=\"(prefers-color-scheme: light)\"\n    srcset=\"\n    https:\u002F\u002Foss.gittoolsai.com\u002Fimages\u002Fxianshang33_llm-paper-daily_readme_ecea10038452.png\n    \"\n\u002F>\n\u003Cimg\n    alt=\"星标历史图表\"\n    src=\"https:\u002F\u002Foss.gittoolsai.com\u002Fimages\u002Fxianshang33_llm-paper-daily_readme_ecea10038452.png\"\n\u002F>\n\u003C\u002Fpicture>","# llm-paper-daily 快速上手指南\n\n`llm-paper-daily` 并非一个需要安装运行的软件工具，而是一个**每日更新的 LLM 研究论文精选仓库**。它通过 GitHub 托管，提供最新的 arXiv 论文链接、代码仓库地址以及由 GPT-4 生成的中文\u002F英文摘要。\n\n开发者无需配置本地环境，直接通过浏览器访问或克隆仓库即可使用。\n\n## 环境准备\n\n本项目无特殊的系统要求或前置依赖，仅需满足以下条件之一：\n*   **网络环境**：能够访问 GitHub 和 arXiv（若访问受限，建议配置科学上网或使用国内镜像加速）。\n*   **基础工具**（可选）：若需本地浏览 Markdown 摘要，建议使用支持 Markdown 预览的编辑器（如 VS Code）或直接使用 GitHub 网页版。\n\n## 获取方式\n\n### 方式一：在线浏览（推荐）\n直接访问 GitHub 仓库页面，查看每日更新的论文列表和分类摘要。\n*   **仓库地址**：[https:\u002F\u002Fgithub.com\u002FIAAR-Shanghai\u002Fllm-paper-daily](https:\u002F\u002Fgithub.com\u002FIAAR-Shanghai\u002Fllm-paper-daily) (注：根据 README 内容推断的组织地址，若失效请直接搜索项目名)\n*   **主要内容**：\n    *   **最新论文**：按日期排序的表格，包含论文标题、机构、简短介绍。\n    *   **直达链接**：每篇论文提供 `arXiv` 原文链接和 `Summary` 摘要链接。\n    *   **代码仓库**：部分论文附带 `GitHub` 代码实现链接。\n\n### 方式二：克隆到本地\n如果你希望离线阅读摘要或在本地构建知识库，可以克隆仓库。\n\n```bash\ngit clone https:\u002F\u002Fgithub.com\u002FIAAR-Shanghai\u002Fllm-paper-daily.git\ncd llm-paper-daily\n```\n\n> **提示**：国内用户若克隆速度慢，可使用国内代码托管平台（如 Gitee）的镜像源（如有），或配置 `git config --global http.proxy` 加速。\n\n## 基本使用\n\n### 1. 查找最新论文\n进入仓库根目录的 `README.md` 文件，查看 **\"最新论文\"** 表格。\n*   表格按日期倒序排列。\n*   点击 `[arXiv-Paper]` 按钮跳转至论文原文。\n*   点击 `[Sum.-Read]` 按钮在仓库内查看该论文的 AI 总结（位于 `summary\u002F` 目录下）。\n\n**示例路径**：\n若要查看 2024 年 7 月 29 日关于 `SeaLLMs 3` 的总结，可直接访问：\n`summary\u002F2024-07\u002F2407.19672.md`\n\n### 2. 按领域分类检索\n点击 README 中的 **\"分类\"** 目录，或直接访问 `CATEGORIES.md` 文件。项目将论文划分为以下核心领域，方便定向查找：\n\n*   💡 **Reasoning** (推理)\n*   🤖 **Agent** (智能体)\n*   🦉 **Knowledge and Retrieval** (知识与检索)\n*   👩‍🏫 **Alignment and Hallucination** (对齐与幻觉)\n*   🎨 **Application** (应用)\n*   📐 **Pre-training and Instruction Fine-tuning** (预训练与指令微调)\n*   📄 **Survey** (综述)\n\n### 3. 参与交流\n项目提供了讨论小组二维码（见 README 顶部图片），扫描即可加入社群，与大模型落地、论文研究的小伙伴进行交流。","某大厂算法团队正在研发面向东南亚市场的多语言客服大模型，急需追踪最新的跨语言推理与对齐技术以突破性能瓶颈。\n\n### 没有 llm-paper-daily 时\n- **信息滞后严重**：研究人员需每天手动刷 arXiv 多个分类，常错过像 SeaLLMs 3 这样针对特定区域语言的关键论文，导致技术选型落后竞品。\n- **筛选成本高昂**：面对每日数百篇新文，团队需耗费数小时阅读摘要才能判断相关性，严重挤占了核心代码开发时间。\n- **缺乏深度洞察**：仅看英文标题和抽象摘要难以快速把握核心创新点（如 Meta-Rewarding 机制），容易误判技术落地可行性。\n- **知识体系碎片化**：新发现的论文散落在不同书签中，缺乏按“推理”、“代理”或“对齐”等维度的系统整理，难以形成技术演进脉络。\n\n### 使用 llm-paper-daily 后\n- **资讯零时差获取**：每日自动推送最新精选，团队第一时间发现了阿里达摩院专为东南亚语言优化的 SeaLLMs 3，迅速调整了数据增强策略。\n- **决策效率倍增**：借助 GPT-4 生成的中文简明总结，工程师在 5 分钟内即可评估 QAEA-DR 框架对检索模块的提升潜力，无需通读全文。\n- **技术洞察精准**：通过分类导航直接定位到\"Alignment\"板块，快速理解 Meta-Rewarding 如何利用自改进流程减少人工标注依赖，明确了优化方向。\n- **知识管理有序**：所有论文按推理、应用等七大维度自动归档，团队成员可轻松回溯技术路线，高效构建起领域知识图谱。\n\nllm-paper-daily 将研究人员从繁琐的信息搜集工作中解放出来，使其能专注于将前沿理论转化为实际的生产力。","https:\u002F\u002Foss.gittoolsai.com\u002Fimages\u002Fxianshang33_llm-paper-daily_23485e9f.png","xianshang33","xs","https:\u002F\u002Foss.gittoolsai.com\u002Favatars\u002Fxianshang33_6747dab3.png","Network Researcher @Alibaba Cloud  ","Alibaba","Hangzhou","xianshang33@gmail.com",null,"https:\u002F\u002Fgithub.com\u002Fxianshang33",1238,53,"2026-04-18T04:04:23","","未说明",{"notes":88,"python":86,"dependencies":89},"该项目是一个每日更新 LLM 研究论文的资讯聚合仓库（README），主要提供论文列表、ArXiv 链接、代码库链接及基于 GPT-4 生成的论文总结。它不是一个需要本地安装运行环境、依赖特定硬件或 Python 库的可执行 AI 工具，因此 README 中未包含任何操作系统、GPU、内存、Python 版本或依赖库的安装需求。用户只需通过浏览器访问网页或查看 Markdown 文件即可使用。",[],[13,14,35],[92,93,94,95,96],"agent","large-language-models","llm","rag","chatgpt","2026-03-27T02:49:30.150509","2026-04-18T22:54:44.427620",[],[]]