介绍 随着ChatGPT的横空出世,国内互联网大厂、创业公司纷纷加了AIGC赛道,不断推出各种大模型...【查看原文】
书接上文,我在 ollama 中部署 qwen1_5-14b-chat-q4_k_m.gguf 预量化模型,在非 Stream 模式下需要 89 秒才完成一轮问答,响应速度实在是太慢,后续想办法优化
AIGC
Kida的技术小屋 2024-05-13
忙里偷闲在本地部署了一套 stable-diffusion 来玩玩,虽然 Mac 还是使用 CPU 来生图,但是整体效果(生成时间、生成效果)还是能够接受的。
Stable Diffusion
kida_yuan 2024-02-06
转:NVIDIA 的朋友和我说他们内部一律都是 ubuntu,cuda 生产环境不建议用 debian、ubuntu 之外的任何系统,只会徒增烦恼。操作系统建议Ubuntu22,长期维护版本。这个是浪潮NF5568M4,超微7048同款安装显卡驱动这里点击附加驱动选择上面这个驱动后,点击应用更改驱动安装成功后,可以看到这watch nvidia-smi安装CUDA:https://developer.nvidia.com/cuda-downloads只需要执行Base Install命令如果已经通过图形安
AI大模型
门的耳朵 2024-03-24
本文介绍了使用ollama在本地部署大模型,通过本地部署的客户端与大模型交互,并且简单体验了RAG。最后简单介绍了在本地搭建chatgpt 3.5的代理,可以免密钥的方式访问openai的api。
ChatGPTOpenAI
小豪11 2024-04-19
玩转 AIGC:仅需三步,在 Mac 电脑部署本地大模型,打造私人 ChatGPT 你好,欢迎来到运维有术。 今天分享的内容是 玩转 AIGC「2024」 系列文档中的 仅需三步,在 Mac 电脑打造
AIGCChatGPT
运维有术 2024-05-02
36氪 2024-12-30
IT之家 2024-12-30
黑科技老黄 2024-12-30
科技狐 2024-12-30
钛媒体APP 2024-12-30
人人都是产品经理 2024-12-30
腾讯科技 2024-12-30
Copyright © 2025 aigcdaily.cn 北京智识时代科技有限公司 版权所有 京ICP备2023006237号-1