开放式问答需要模型找到合适的证据来形成有理有据、全面且有帮助的答案。在实际应用中，模型还需要参与与问题密切相关的潜在场景的扩展讨论。通过检索模块的增强，开源大型语言模型 (LLMs) 可以生成连贯的答案，通常具有不同的关注点，但在可靠的证据选择和深入的问题分析方面仍然不够理想。本文提出了一种新颖的链式讨论框架，利用多个开源 LLMs 之间的协同作用，旨在为开放式问答提供更准确和更全面的答案，尽管它们本身并不足够强大。我们的实验表明，多个 LLMs 之间的讨论在提高答案质量方面起着至关重要的作用。我们发布了我们的数据和代码，地址为 \url{https://github.com/kobayashikanna01/Chain-of-Discussion}。