coefuqin 最近的时间轴更新
coefuqin

coefuqin

V2EX 第 616381 号会员,加入于 2023-02-28 17:15:35 +08:00
今日活跃度排名 6359
根据 coefuqin 的设置,主题列表被隐藏
二手交易 相关的信息,包括已关闭的交易,不会被隐藏
coefuqin 最近回复了
老弟你运气不错,刚才我搜了下方案,还真被我找到了。
https://github.com/intel/ipex-llm/blob/main/docs/mddocs/DockerGuides/vllm_cpu_docker_quickstart.md
鸟领导很难伺候啊,就这硬件成本还挑三拣四,能搞出来就不错了。
searxng+firecrawl 完全本地部署,不需要 online key ,searxng 最新版本攘括了国内搜索厂商,不需要再部署在 gwf 之外。唯一的短板就是 firecrawl 在大并发量的情况下容易被搜索引擎 ban ip ,但是可以设置 proxy ,但是稳定的 proxy 不好找。不过好消息是,仅自己个人使用的情况下,被 ban ip 的概率还是很低的。
@YuanJiwei 因为讲实际的,你自己认为你们要做的这个赛道有什么护城河级别的技术含量?它的技术难度系数和 web 前后端有什么区别? web 前后端能罩住那么多人就业是因为可以绑定不同的应用场景真正发挥威力的是那些真实的生活场景,而不是 web 前后端的技术,web 前后端的技术只是锦上添花,技术的高低在低量级来说并不是决定因素。现在类似于 mcp server 的这种中间件都是苦力活儿,每一个场景的同质化竞争都很激烈,并且做一个少一个。真正的 super/killer app 是利用新技术在某个场景的发力,如同当年 QQ 之于通信,微信之于即时通讯,淘宝之于电商...当然这是当前都能看到的问题。至于好赛道,我也母鸡。😄
4 天前
回复了 xiniu 创建的主题 Local LLM 跑 AI 模型,显卡的购买咨询
华南 6 卡平台+6 张 2080ti 22g ,你就可以凑到 132g vram ,2080ti 支持 nvlink 。那么就相当于有 3 张 44g 的现代卡(起码支持 vllm )了。
2080ti 22g 现在海鲜大概 2600(去年年底有到 2200),1.56w,华南 6 卡准系统大概 2600 ,内存( 1000 )+cpu ( 400 ). 超了 5k 左右,不过这已经是当下你可以接受的配置了。也是非 geek 的能接受的了。
当然还有更 geek(垃圾佬)的配置就不推荐了。
4 天前
回复了 runninghipp 创建的主题 程序员 传统开发如何入门 ai
我为什么先推荐历史,因为我觉得要搞清楚这些学问和技术,必须要对这些学问和技术的创作者有个了解,他经历了什么为什么就会想到这些,这比上来就是公式定理生动一些,并且让这些算法公式更有温度。
4 天前
回复了 runninghipp 创建的主题 程序员 传统开发如何入门 ai
每个人都有每个人的学习方法,我推荐的路径就是主动学习,主动找资料看,我从 2018 年开始接触和了解 ML ,那时候也是觉得很屌,但是我那个领路人虽然是硕士,但是他也没有一个宏观的理解,他自己给我们分享的时候讲的也不是很好,讲线性回归逻辑回归这些,甚至讲的还很一般,但是我很感激他能让我对 ML 有一个认知的机会。自此之后,就各种买书看,我先看了 《人工智能简史》尼克写的那本,后面又看了《创新者》沃尔特 · 艾萨克森写的那本,顺便推荐一本《超越时空》加来道雄写的(纯粹因为太屌了)。为什么不先推荐 西瓜书+花书圣经+统计学习方法+南瓜书 这个组合呢?因为我觉得,一来就上公式定理证明,真的很劝退,我们的教材就喜欢这么搞(当然不排除一些学霸就喜欢一来就先搞公式推导定理证明)。如果要我推荐一本书的话,我会推荐 《 python 神经网络编程》 Tariq Rashid 写的,因为西瓜书我也看了,花书也看了,《动手学深度学习》也看了,讲真,我还是觉得能我推荐的那本对我胃口。当你能搞出点东西来运行,并且你还知道为什么你搞出来的这个东西能运行的时候(其实就是艰难的从 0 到 1 ),剩下的就是各种看书看论文(从 1 到 100 ( ML,DL,RL,....)到 100000 ),当然要真的搞深入了 ,微积分+线性代数+概率论+离散数学,是肯定免不了的。
4 天前
回复了 hoky 创建的主题 问与答 请教技术问题,关于 AI 商品图
@maajor 二维图片的话,这个思路确实可行。
@huluhulu 就像 DBA 审计 sql 语句一样的过滤器不知道有没有搞头。
@kaichen 在中间加一个审计的过滤器咯。
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1306 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 10ms · UTC 17:40 · PVG 01:40 · LAX 10:40 · JFK 13:40
Developed with CodeLauncher
♥ Do have faith in what you're doing.