当前位置: 首页 > news >正文

C# WPF本地Deepseek部署

在这里插入图片描述
在这里插入图片描述
模型下载地址

using LLama;
using LLama.Common;
using System;
using System.IO;
using System.Threading.Tasks;
using System.Windows;
using System.Windows.Input;namespace YF_Talk
{public partial class MainWindow : Window{private LLamaWeights _model;private LLamaContext _context;private InteractiveExecutor _executor;private bool _isInitialized = false;public MainWindow(){InitializeComponent();Loaded += MainWindow_Loaded;}private async void MainWindow_Loaded(object sender, RoutedEventArgs e){await InitializeModelAsync();}private async Task InitializeModelAsync(){try{ChatBox.Text = "正在加载模型,请稍候...\n";// 模型路径 - 确保模型文件放在项目Assets文件夹中var modelPath = Path.Combine(AppDomain.CurrentDomain.BaseDirectory, "Assets", "C:\\Users\\Administrator\\Downloads\\DeepSeek-R1-Distill-Qwen-7B-Q4_K_M.gguf");// 模型参数 - 更新为最新APIvar parameters = new ModelParams(modelPath){ContextSize = 2048, // 上下文大小GpuLayerCount = 20, // 使用GPU层数(根据你的GPU调整)};// 加载模型_model = await Task.Run(() => LLamaWeights.LoadFromFile(parameters));_context = await Task.Run(() => new LLamaContext(_model, parameters));_executor = new InteractiveExecutor(_context);_isInitialized = true;ChatBox.Text += "模型加载完成!现在可以开始聊天了。\n\n";InputBox.Focus();}catch (Exception ex){ChatBox.Text += $"初始化失败: {ex.Message}\n";MessageBox.Show($"模型加载失败: {ex.Message}", "错误", MessageBoxButton.OK, MessageBoxImage.Error);}}private async void SendButton_Click(object sender, RoutedEventArgs e){await ProcessInputAsync();}private async void InputBox_KeyDown(object sender, KeyEventArgs e){if (e.Key == Key.Enter){await ProcessInputAsync();}}private async Task ProcessInputAsync(){if (!_isInitialized){ChatBox.Text += "模型尚未加载完成,请稍候...\n";return;}var input = InputBox.Text.Trim();if (string.IsNullOrWhiteSpace(input))return;// 显示用户输入ChatBox.Text += $"你: {input}\n";InputBox.Clear();try{// 准备推理参数 - 更新为最新APIvar inferenceParams = new InferenceParams{//Temperature = 0.6f,AntiPrompts = new[] { "你:", "User:" },MaxTokens = 512,};// 显示AI正在思考ChatBox.Text += "AI: ";// 执行推理await foreach (var text in _executor.InferAsync(input, inferenceParams)){// 逐步显示结果ChatBox.Text += text;ChatBox.ScrollToEnd();}ChatBox.Text += "\n\n";ChatBox.ScrollToEnd();}catch (Exception ex){ChatBox.Text += $"发生错误: {ex.Message}\n";}}protected override void OnClosed(EventArgs e){_context?.Dispose();_model?.Dispose();base.OnClosed(e);}}
}
<Window x:Class="YF_Talk.MainWindow"xmlns="http://schemas.microsoft.com/winfx/2006/xaml/presentation"xmlns:x="http://schemas.microsoft.com/winfx/2006/xaml"xmlns:d="http://schemas.microsoft.com/expression/blend/2008"xmlns:mc="http://schemas.openxmlformats.org/markup-compatibility/2006"xmlns:local="clr-namespace:YF_Talk"mc:Ignorable="d"Title="YF Talk - DeepSeek Chat" Height="450" Width="800"><Grid><Grid.RowDefinitions><RowDefinition Height="*"/><RowDefinition Height="Auto"/></Grid.RowDefinitions><ScrollViewer Grid.Row="0" VerticalScrollBarVisibility="Auto"><TextBox x:Name="ChatBox" IsReadOnly="True" TextWrapping="Wrap" VerticalScrollBarVisibility="Auto" FontSize="14" Padding="10"/></ScrollViewer><Grid Grid.Row="1" Margin="5"><Grid.ColumnDefinitions><ColumnDefinition Width="*"/><ColumnDefinition Width="Auto"/></Grid.ColumnDefinitions><TextBox x:Name="InputBox" Grid.Column="0" Margin="0,0,5,0" VerticalContentAlignment="Center" FontSize="14" KeyDown="InputBox_KeyDown"/><Button x:Name="SendButton" Grid.Column="1" Content="发送" Width="80" Click="SendButton_Click"/></Grid></Grid>
</Window>
http://www.xdnf.cn/news/1290637.html

相关文章:

  • 集成电路学习:什么是CV计算机视觉
  • IPA1299至为芯替代TI ADS1299的脑机接口芯片
  • 网络安全合规6--服务器安全检测和防御技术
  • 高级IO(五种IO模型介绍)
  • Spring、Spring MVC、Spring Boot与Spring Cloud的扩展点全面梳理
  • Spring Boot 集成 机器人指令中枢ROS2工业机械臂控制网关
  • 从“存得对”到“存得准”:MySQL 数据类型与约束全景指南
  • 算法题打卡力扣第11题:盛最多水的容器(mid)
  • 音视频处理新纪元:12款AI模型的语音转录和视频理解能力横评
  • 洛谷 P2607 [ZJOI2008] 骑士-提高+/省选-
  • 从钢板内部应力视角,重新认识护栏板矫平机
  • 猫头虎AI分享| 智谱开源了为 RL scaling 设计的 LLM post‑training 框架用于GLM-4.5强化学习训练:slime
  • 深入解析C语言嵌套结构体的内存管理与操作实践
  • 基于CNN与Transformer的无人机应急救援网络异常流量检测
  • 在前端js中使用jsPDF或react-to-pdf生成pdf文件时,不使用默认下载,而是存储到服务器
  • SQL详细语法教程(一)--数据定义语言(DDL)
  • Android SurfaceView TextureView
  • 【Qt开发】常用控件(三) -> geometry
  • kernel pwn 入门(四) ret2dir详细
  • 大模型推理框架vLLM 中的Prompt缓存实现原理
  • GitHub分支保护介绍(Branch Protection)(git分支保护)(通过设置规则和权限来限制对特定分支的操作的功能)
  • 嵌入式系统学习Day17(文件编程-库函数调用)
  • AuthController类讲解
  • SQL 合并两个时间段的销售数据:FULL OUTER JOIN + COALESCE
  • 测试环境下因网络环境变化导致集群无法正常使用解决办法
  • SQL注入学习笔记
  • LeetCode Day5 -- 栈、队列、堆
  • 前后端分离项目中Spring MVC的请求执行流程
  • 肖臻《区块链技术与应用》第十讲:深入解析硬分叉与软分叉
  • 用 Spring 思维快速上手 DDD——以 Kratos 为例的分层解读