V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  lesismal  ›  全部回复第 18 页 / 共 56 页
回复总数  1114
1 ... 14  15  16  17  18  19  20  21  22  23 ... 56  
2023-06-12 16:00:51 +08:00
回复了 iovekkk 创建的主题 生活 今天见到一个新词,我觉得造的挺好
塔尖以下共同富裕
中产失业拿出积蓄
人口太少鼓励生育
回到原形家徒四壁
2023-06-12 15:56:51 +08:00
回复了 iovekkk 创建的主题 生活 今天见到一个新词,我觉得造的挺好
你们这些年轻人啊,这样下去是要亡国灭种的!这样的态度要不得!
再这样下去,就只能修改计划生育政策内容了,把以前的的”旧计划”改成“新计划”:
以前不让多生,以后强制多生!以前给你们发免费的套套和避孕药以及上其他配套手段,以后免费发维生素片、壮阳催情药!妇联的大姐和阿姨们每天下班去你家里催你们圆房!按照年龄段、身体素质综合情况为每家指定频率,排好家访的 schedule ,每天去今日需要交任务的家庭、隔着门听你们完成今天的业务后在小本本上记录下来才肯离开!
2023-06-12 12:30:28 +08:00
回复了 javak 创建的主题 程序员 看到有大神用 Swift 做后端,坚定了我用 Java 之路
@jimages
以前对陈皓不熟悉,他去世了才去看了他的主页,看到那几个抵制资本家之类的观点,觉得他人很好。但偶尔看到他的一些技术观点,我不认同。

比如只喜欢 go 的小伙子不该被技术限制这个故事:
1. 很多老手都有同样的观点,技术只是工具。但一个年轻人在技术积累期间,深挖一个方向是很有必要的,钻研一下精深一些,积累到实例之后再去扩展技能点,能让自己做到博而精,而且多数人经历几年钻研后也基本都会自己体会到技术只是工具,根本不需要年长者们提前来指导。这种指导,更多概率是造成这些年轻人博而不精,都成了 CURD 工具人。所以其实是两个不同阶段的人,年长者的建议初衷是好的、效果可能是差的。我身边就有这种例子,大专肄业的小伙子,刚工作技术很菜,拿着不够生活费的低工资只为求学习转行的机会,然后坚持了几年硬啃 c++、数据库相关的领域,现在是他们公司开发里的大拿,代码能力超过很多他的名校专业硕士同事。他几年前也是在各种技术群里问各种问题,很多老手给他说技术只是工具,幸亏他自己有坚持,没有盲从那些建议。就像罗永浩说的,不是每只鸟来到世上都是为了躲枪子的。
2. 虽然语言只是工具。但不同语言解决问题的能力,确实大不相同。最简单的方法,整体思维,如果学什么语言不重要,那也就意味着随便哪个语言都可以解决所有问题了,然而并不是,所以才会有 go 、rust 的再次横空出世并且大火。
2023-06-09 14:04:36 +08:00
回复了 chaleaochexist 创建的主题 Go 编程语言 golang 高级语法 求推荐 pdf 书籍均可
直接看标准库源码,或者找个代码比较好的 repo ,结合 repo 看标准库源码,比看书强多了
2023-06-09 13:05:51 +08:00
回复了 leimao 创建的主题 美酒与美食 中国鳗鱼的食品安全问题和信任危机
提示:
国产鳗鱼:国内生产的添加剂导致问题的带包装鳗鱼
日本鳗鱼:从中国进口的无包装鳗鱼
2023-06-06 22:02:04 +08:00
回复了 chen0520 创建的主题 Go 编程语言 跨网服务器间通信问题
2023-06-06 15:12:54 +08:00
回复了 lesismal 创建的主题 程序员 4C-2G 来战 [ Golang Websocket 百万连接测试 ]
2023-06-06 15:10:15 +08:00
回复了 lesismal 创建的主题 程序员 4C-2G 来战 [ Golang Websocket 百万连接测试 ]
@ruanimal @lysS #18 回复忘记 at 了,请查看 #18
2023-06-06 15:09:33 +08:00
回复了 lesismal 创建的主题 程序员 4C-2G 来战 [ Golang Websocket 百万连接测试 ]
> 好奇什么业务会用到百万链接,看测试 echo 都 500ms 以上了
> 这么大的连接,几乎做不了重的任务,一般都是简单的 ping-pong ;比如说广告计数、上线通知之类的

低配硬件:高在线、低频的功能,比如推送业务
高配硬件:高在线、高频的也可以做。主帖已经说明过了,测试用的 4C-2G "只是作为一个参考指标,用不是特别高的配置更能体现框架的承载力",实际业务可以根据业务需要来部署硬件规格


> 话说怎么测的? 100w 连接端口不够吧?而且 loopback 肯定有优化的

套接口对四元组包括:server ip, server port, client ip, client port ; port 是 short int 2 字节 64k ,加上系统 port range 配置项这些限制,这四元组在 server ip 、client ip 各只有 1 个的情况下,每个 server port 可以建立小于 64k 个连接,N 个 server port 可以建立 64k*N 个连接。测试为了省去虚拟网络或者 docker 方式的麻烦、使用了 50 个端口:
https://github.com/lesismal/go-websocket-benchmark/blob/main/config/config.go#L27
2023-06-05 17:23:53 +08:00
回复了 lesismal 创建的主题 程序员 4C-2G 来战 [ Golang Websocket 百万连接测试 ]
@blankmiss

帖子前置条件里我也说了,绝大多数人没这个扣内存的需求,但是确实也有少量比例的团队需要去扣这里,因为这部分人面临的在线量很大,扣这个能省的成本、对服务稳定性的提高也是很客观的

早几年 uber 就对海量并发各种 手动 gc 优化,甚至去改 go 源码。但其实如果用 nbio ,可能比他们的这些方式更有效一些

> 可能现在硬件条件已经很好,动态扩容,不是非常需要说对内存扣扣省省

动态扩容确实能解决一些问题,但成本也是不小,我知道的一些团队的一些服务,用的 java ,上百个云节点,而且这种公司还不是头部企业的业务量级。如果改成 nbio 这种,往多了说能省 95% 的成本,往少了说,也能省 80%

nbio 关注的用户里,估计大概三分之一是外国人吧,早期就有外国人是来用 nbio 处理高在线量的业务的
2023-06-05 16:57:47 +08:00
回复了 leeggco 创建的主题 职场话题 XDM,遇到 SB 同事怎么破
联排桌子抖腿才是大杀器
大家一起抖腿才是欢乐多

打不过就加入,你会发现工作变得有趣了
2023-06-05 16:55:05 +08:00
回复了 dusu 创建的主题 问与答 高中的班花结婚了,参加婚礼有感与忠告
说好的男生永远专一永远喜欢 18-25 岁的女生呢
2023-06-05 16:54:18 +08:00
回复了 vaaagle 创建的主题 程序员 “农夫与蛇,卸磨杀驴”为何已然成为常态
程序员太老实,老实人太容易被坑。支持 OP 刚它们!
2023-06-05 16:51:22 +08:00
回复了 lesismal 创建的主题 程序员 4C-2G 来战 [ Golang Websocket 百万连接测试 ]
@blankmiss 欢迎来杠。

我想问一下,那 c/cpp 也都性能杠杠的,为啥还搞 rust ?
rust 解决 c/cpp 的安全问题

为啥 go 成为并发、云各种场景下的宠儿?因为它除了性能还不错,更重要的是开发效率高。

java 开发效率高,但是它对于性能场景和硬件消耗实在太不堪入目了,所以 go 替换 java 可以实现节能环保,并且开发效率也高。
别给我杠说什么 java 开发功能快,java 发展了多少年积累了多少轮子?而且很多说 go 开发效率低的真的熟悉 go 吗?而且时间久了 go 的轮子也越来越多越来越完善。如果为了当下谁轮子最多就用谁,那性能、占用之类的各种问题永远没法优化,甚至 java 社区自己都不需要进化、因为现在已经能做功能只是消耗高一些罢了。

你用 rust 更节能环保,你有 go 的这种开发效率吗?再说句不好听的,100 个人学 rust ,有几个能短时间玩熟练的?
c/cpp 三年不出门,go 三天 curd ,你 rust 学多久能快速开发?
2023-06-05 16:45:31 +08:00
回复了 lesismal 创建的主题 程序员 4C-2G 来战 [ Golang Websocket 百万连接测试 ]
> 唉...C1M 问题很久就有各种方案了(几乎是 10 年前),似乎重要的不是同时多少连接在线(一般只和内存大小相关),而是保持大链接下的高 QPS (调度能力),个人经验 4c 配置 QPS 很容易到达 30w 左右的(小报文)

@wslzy007

epoll 异步非阻塞早就解决 C1M 了,这没错,c/cpp 里也早就不是问题了。

但这个帖子说的不是 c/cpp/rust 或者 java netty 或者其他脚本语言那些基于 c/cpp 这些底层,而是 go ,搞 go 的 poller 目的是解决 go 标准库方案每个连接一个协程导致的内存爆炸 OOM 、GC 负担过重 STW 的问题,主要是针对 go 自己,而不是说用 go 解决了其他语言解决不了的 C1M 问题。
2023-06-05 12:09:26 +08:00
回复了 lesismal 创建的主题 程序员 4C-2G 来战 [ Golang Websocket 百万连接测试 ]
@byte10
嗯嗯,欢迎多来交流,java 只是社区积累的框架多,但性能相关的实在是太不友好了

平时少把 java 搞,内存杀手不环保
重心多往 golang 转,护发节能走得远
2023-06-05 11:18:55 +08:00
回复了 lesismal 创建的主题 程序员 4C-2G 来战 [ Golang Websocket 百万连接测试 ]
@buffzty 66666
2023-06-05 11:18:34 +08:00
回复了 lesismal 创建的主题 程序员 4C-2G 来战 [ Golang Websocket 百万连接测试 ]
@byte10
但如果想基于 poller 4 层 TCP 去自己实现 7 层框架比如 HTTP/Websocket ,那没什么好办法了,还是需要异步。但 nbio 提供的 http/websocket 并不需要用户全去写异步!不需要!不需要!不需要!我都给你说了好多次了而且这个帖子里也写了 “以前很多次遇到很多人先入为主地以为异步框架就是要写回调、golang 框架也如此。 为了避免误解”

你先看明白了,别再回复我说要异步了!
我快成复读机了快被你们逼疯了!!!
😇😇😇😇😇😇😇😇
2023-06-05 11:13:57 +08:00
回复了 lesismal 创建的主题 程序员 4C-2G 来战 [ Golang Websocket 百万连接测试 ]
@byte10 之前好多次没回复我,还以为你把我 block 了 :joy: ,感谢回复!

> 但还是保持一些观点,如果放在业务层去使用,大部分开发人员还是会用 协程去写同步代码,那么就跟你省内存的初衷违背了。

其实你还是误解了,我解释过好多次了,框架本身是提供了逻辑协程池的,用户仍然是同步代码,比如 http handler ,这个跟使用标准库写同步代码没什么区别:
https://github.com/lesismal/nbio-examples/blob/master/http/server/server.go#L19

nbio 里,每个 http 请求到来时取一个协程处理,这个请求处理完了这个协程可以继续服务其他请求,并不是每个连接固定、持续占用一个协程。

c/cpp 那些框架,线程太贵,所以线程池数量少,很多框架是逻辑单线程,所以需要各种回调。
但 golang 协程不一样,协程便宜,百万链接那是协程数量太大了,但是 1-10w 协程压力不大,所以逻辑协程池 size 弄个几千几万个协程是可以的。而且 golang 其他的 io ,比如到数据库,也是有连接池限制的。即使 100w 个逻辑协程也是可能被数据库连接池卡着等待,所以太大逻辑协程数量也意义不大,反倒是几千几万这种协程池数量,已经足够动态均衡了。

总结下就是,逻辑协程数量多但是可配置、不好过硬件能力:
1. 如果是快业务,每次请求处理很快、协程能很快释放给其他请求去复用
2. 如果是慢业务,逻辑协程再多也是要被阻塞,但逻辑协程数量通常远多余下游(比如数据库)的限制,所以仍有足够的空闲协程处理其他请求


所以对于通用需求,根本不存在你先入为主地以为的那种用了 nbio 就要写回调的问题。

而有一些需求,即使是用标准库,也可能是需要写回调的。特殊问题,特殊处理就可以了。

比较均衡的并发模式是:
1. 纵向的不同分层上(比如网络库、框架、业务层),各层限制好自己的资源使用,比如协程池、buffer pool
2. 横向的不同模块上(比如 A 功能 B 功能 C 功能),各模块限制好自己的资源使用,比如协程池、buffer pool


架构是灵活的,人也应该灵活,欢迎来试试 nbio
1 ... 14  15  16  17  18  19  20  21  22  23 ... 56  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2930 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 35ms · UTC 12:58 · PVG 20:58 · LAX 05:58 · JFK 08:58
Developed with CodeLauncher
♥ Do have faith in what you're doing.