微软官方出品：GPT大模型编排工具，支持C#、Python等多个语言版本

news2024/12/24 2:17:44

随着ChatGPT的火热，基于大模型开发应用已经成为新的风口。虽然目前的大型模型已经具备相当高的智能水平，但它们仍然无法完全实现业务流程的自动化，从而达到用户的目标。

微软官方开源的Semantic Kernel的AI编排工具，就可以很好的满足我们自定义开发。

01 项目简介

Semantic Kernel是一个轻量级的SDK，最基本的功能就是帮我们完成与OpenAI、Azure OpenAI和Hugging Face大模型的API的对接，并且支持C#、Python、Java版本。

Semantic Kernel提供自定义插件、编排计划、信息存储至数据库（如SQLite、MongoDB、Redis、Postgres等）。

总的来说，Semantic Kernel就是可以把用户输入的prompt，经过分解为多个步骤、获取外部数据、执行自定义操作等，转换为一个更好的prompt，再调用大模型API，从而获取结果。

02 使用示例

以下是C#使用示例：

using Microsoft.SemanticKernel;
using Microsoft.SemanticKernel.Connectors.OpenAI;

var builder = Kernel.CreateBuilder();

//OpenAI模型
builder.AddOpenAIChatCompletion(
         "gpt-3.5-turbo",
         "...your OpenAI API Key...");

var kernel = builder.Build();

//等待用户输入
Console.Write("用户：");
var input = Console.ReadLine();

//循环对话
while (input != "quit")
{
    var prompt = @$"<message role=""user"">{input}</message>";
    var summarize = kernel.CreateFunctionFromPrompt(prompt, executionSettings: new OpenAIPromptExecutionSettings { MaxTokens = 100 });
    var result = kernel.InvokeStreamingAsync(summarize);
    Console.Write("OpenAI：");
    await foreach (var item in result)
    {
        Console.Write(item.ToString());
    }
    Console.WriteLine();
    Console.WriteLine();
    Console.Write("用户：");
    input = Console.ReadLine();
}