我们可以在本地服务器上部署 Phi-3。用户可以选择 Ollama 或 LM Studio 解决方案，或者他们可以编写自己的代码。你可以通过 Semantic Kernel 或 Langchain 连接 Phi-3 的本地服务来构建 Copilot 应用程序。
在 Copilot 应用程序中，我们通过 Semantic Kernel / LangChain 创建应用程序。这种应用程序框架通常兼容 Azure OpenAI Service / OpenAI 模型，也可以支持 Hugging Face 上的开源模型和本地模型。如果我们想使用 Semantic Kernel 访问 Phi-3-mini 该怎么办？以 .NET 为例，我们可以将其与 Semantic Kernel 中的 Hugging Face Connector 结合使用。默认情况下，它可以对应 Hugging Face 上的模型 id（第一次使用时，模型将从 Hugging Face 下载，这需要很长时间）。你也可以连接到自建的本地服务。相比之下，我们推荐使用后者，因为它具有更高的自主性，特别是在企业应用中。
从图中可以看出，通过 Semantic Kernel 访问本地服务可以轻松连接到自建的 Phi-3-mini 模型服务器。以下是运行结果：
示例代码 https://github.com/kinfey/Phi3MiniSamples/tree/main/semantickernel
免责声明： 本文件是使用机器翻译服务翻译的。尽管我们努力确保准确性，但请注意，自动翻译可能包含错误或不准确之处。应将原始语言的文件视为权威来源。对于关键信息，建议使用专业人工翻译。对于因使用本翻译而产生的任何误解或误读，我们概不负责。