百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 热门文章 > 正文

C#如何编程接入Ollama部署的本地大模型

bigegpt 2025-06-10 13:12 8 浏览

#deepseek#-r1发布之后很多网友利用 Ollama 进行本地大模型的部署。若个人、团队或企业有相关需求,并且硬件配置条件允许,建议安装 DeepSeek-R1:7b 、14b及更高参数的大模型。本地部署使用大模型对于隐私数据、重要数据的安全比较有保障,用户可以通过使用个人数据对模型进行微调和优化,使其更好地适配特定领域和任务,例如作业数据分析、医疗病历解读、法律合同审查等专业场景。此外,还可以自定义模型的功能,并将其与知识库系统、Web UI 等其他工具进行集成,从而拓展应用场景,如构建个人知识库、开发定制化的问答系统等。为了使本地部署的大模型能够在更多应用场景中发挥关键作用,开发人员可以调用 Ollama API,通过编程方式与本地部署的大模型进行高效交互。

近期本人用Ollama本地部署了deepseek-r1:14b大模型,下面以一个简单的控制台程序,阐述C#如何接入这个大模型。

前提条件和准备:

1、Ollama 已部署并运行:

确保我已在本地安装 Ollama 并成功运行 DeepSeek-R1:14b 模型(例如通过命令 ollama run deepseek-r1:14b)在实际开发中你可以替换成你自己部署的大模型及其版本。

默认情况下,Ollama 的服务运行在 http://localhost:11434。

2、开发环境:

使用 Visual Studio 或其他支持 C# 的 IDE。

项目需引用 System.Net.Http 和 Newtonsoft.Json(如需解析 JSON)。

3、NuGet 包:

如果未安装 Newtonsoft.Json,通过 NuGet 安装:

右键项目 -> "管理 NuGet 包" -> 搜索 Newtonsoft.Json -> 安装。

//以下是相关C#代码和详细的注释:

using System;
using System.Net.Http;//提供用于发送HTTP请求和接收HTTP响应的类
using System.Text;//包含用于编码和解码字符串的类
using System.Threading.Tasks;//包含支持异步编程模式的类
using Newtonsoft.Json;//用于JSON序列化和反序列化

// 命名空间 OllamaAPI_Call 包含了调用 Ollama API 的相关代码
namespace OllamaAPI_Call
{
    // Program 类包含了调用 Ollama API 的主程序逻辑
    internal class Program
    {
        // 定义一个静态的 HttpClient 实例,用于提高性能
        private static readonly HttpClient client = new HttpClient();

        // 主函数,异步调用 Ollama API
        static async Task Main(string[] args)
        {
            // 设置 Ollama API 的基础地址
            client.BaseAddress = new Uri("http://localhost:11434/");

            // 调用模型并获取响应
            string prompt = "请模仿唐朝张九龄的《望月怀远》写一首诗,题目自拟";
            string response = await CallOllamaModel(prompt);

            // 输出结果(不显示 "模型响应: " 提示)
            Console.WriteLine(response);
            Console.ReadLine();
        }

        /// <summary>
        /// 调用 Ollama 模型生成文本。
        /// </summary>
        /// <param name="prompt">输入给模型的提示。</param>
        /// <returns>模型生成的文本。</returns>
        static async Task<string> CallOllamaModel(string prompt)
        {
            try
            {
                // 构造请求数据
                var requestData = new
                {
                    model = "deepseek-r1:14b",  // 指定模型名称
                    prompt = prompt,            // 输入的提示
                    stream = false              // 是否流式输出,设为 false 返回完整响应
                };

                // 将数据序列化为 JSON
                string jsonContent = JsonConvert.SerializeObject(requestData);
                var content = new StringContent(jsonContent, Encoding.UTF8, "application/json");

                // 发送 POST 请求到 Ollama API
                HttpResponseMessage response = await client.PostAsync("api/generate", content);
                response.EnsureSuccessStatusCode();

                // 读取并解析响应
                string responseBody = await response.Content.ReadAsStringAsync();
                var result = JsonConvert.DeserializeObject<OllamaResponse>(responseBody);

                // 返回模型生成的文本
                return result.response;
            }
            catch (Exception ex)
            {
                           return "调用模型时出错: " + ex.Message;
            }
        }

        // 定义一个类来解析 Ollama 的响应
        class OllamaResponse
        {
            public string response { get; set; }
        }

    }
} 

程序运行结果:

可以进一步修改代码,把大模型的思考过程给省略掉,直接输出结果。通过编程方式与本地部署的大模型进行高效交互。这一过程就像是为大模型搭建了一座与外界沟通的桥梁,让其能够与其他系统和应用无缝对接。

相关推荐

数据中台与业务中台总体技术架构设计方案

《数据中台与业务中台总体技术架构设计方案》提出**“开放、稳定、滋养”三原则**,强调通过统一技术架构与框架破除烟囱式系统,构建**“业务中台+数据中台”闭环体系**。方案主张从单体架...

三分钟摸清楚什么叫前后端分离(什么是前后端分离架构?)

什么叫前后端分离?其实,前后端分离的初衷是为了分离前后端开发人员的职责,解决开发模式的问题。说到底,前后端分离就是将前端视图和后端数据进行分离,这样,后端只需要提供接口(后端数据)给前端,而前端也可以...

刚刚,给学妹普及了登录的两大绝学

今天跟大家聊一个比较基础的话题,就是实现登录的方式有哪些?适合刚入行的朋友。华山之Session绝学Session我们称之为会话控制,是一种在服务器端保持会话状态的解决方案。通俗点来讲就是客户...

6种微服务RPC框架,你知道几个?(grpc是微服务框架吗)

开源RPC框架有哪些呢?一类是跟某种特定语言平台绑定的,另一类是与语言无关即跨语言平台的。跟语言平台绑定的开源RPC框架主要有下面几种。Dubbo:国内最早开源的RPC框架,由阿里巴巴公司...

微服务中,Spring Cloud 有哪些注册中心?

SpringCloud是微服务架构中经常使用的一个框架,它提供了一系列工具来帮助开发者构建和管理分布式系统,而服务注册中心又是微服务架构中一个关键组件。那么,SpringCloud支持哪些注册...

Eureka的自我保护机制(eureka自我保护机制原理)

最近遇到一个问题,服务之间调用报错,显示无法路由到指定服务,但是对应的服务是启动的,查询eureka,结果eureka上显示如下,所有实例均消失,我个人对注册中心并没有什么研究,进行正好借此机会简单总...

eureka、zookepeer、nacos的区别(eureka和nacos哪个更好)

前言随着微服务被各大企业应用在项目中,微服务的框架也被更多人学习和使用,但是大部分情况下都是停留在应用层。一、演变过程1.1服务注册和发现基本概念服务注册:将某个或者某些服务的信息(模块的ip和...

40K+Star!Mall电商实战项目开源,附源码、教程合集

最近看了下我的Github,发现mall项目已经突破40K+Star,有点小激动!记得去年8月的时候mall项目刚过20K+Star,时隔1年多已经增长到了40K+Star。今天跟大家聊聊mall项目...

SpringCloud 常见注册中心的比较(springcloud注册过程)

一、概述springcloud是一个非常优秀的微服务框架,要管理众多的服务,就需要对这些服务进行治理,也就是我们说的服务治理,服务治理的作用就是在传统的rpc远程调用框架中,管理每个服务与每个服务之间...

简单介绍Nacos服务注册中心(nacos注册中心有什么用)

Nacos是阿里开源的一个新框架,在分布式的架构中,Nacos同时扮演着服务注册中心和配置中心的角色。今天主要讲的是Nacos作为服务注册中心。分布式中著名的CAP理论,任何一种服务注册中心都只能实现...

入门注册中心——consul(注册中心怎么注册)

基础概念什么是注册中心随着微服务理论发展的成熟,越来越多互联网公司采用微服务架构来支持业务发展。各个微服务之间都需要通过注册中心来实现自动化的注册和发现。注册中心主要有三种角色:服务提供者(RPCS...

08 Eureka的基础知识(eureka replication)

Eureka是Netflix开发的服务发现框架,SpringCloud将它集成在自己的子项目spring-cloud-netflix中,实现SpringCloud的服务发现功能。上图简要描述了Eur...

微服务架构中的服务注册与发现有哪些?Zookeeper、Eu

“大家好,我是码哥,《Redis高手心法》作者,本章节选自《Java面试高手心法58讲》专栏。随着单体应用的拆分,我们面临的首要问题就是采用哪种方式实现服务间的调用,像之前单体应用可能直接在配...

Eureka 都挂了,微服务还能调通吗?

如果你做过微服务开发,这个面试题应该能够立马答出来,如果你没做过微服务开发,但是学过一些SpringCloud组件的用法,这个问题可能要稍微想一下,但是也应该能够答出来。今天就来和大家说说这个问...

ZooKeeper、Eureka、Consul 、Nacos微服务注册中心对比

注册中心前言服务注册中心本质上是为了解耦服务提供者和服务消费者。对于任何一个微服务,原则上都应存在或者支持多个提供者,这是由微服务的分布式属性决定的。更进一步,为了支持弹性扩缩容特性,一个微服务的提供...