做了个二次元低配数字人口语对话应用

[margoxlive]

一直想做一个基于 LLM 和 TTS 的口语学习 App ，市面上确实也有不少，但是总感觉同质化很严重，想自己亲自开发一款更酷的产品，试试和二次元纸片人老婆聊天学口语? 开搞！花了几个月，调研各种技术方案，终于上架啦！

特点：

• 视频连线 支持英式英语、美式英语、日语、法语等，目前可以和 5 个二次元角色“视频连线”
• 情景对话 IM 聊天式的交互，上百种真实场景模拟，还可以一句话创建即兴情景
• 实用工具 啊这，设想过要做很多口语学习相关的小工具，不过一个人精力有限，慢慢上吧，暂时只有单词本、自然翻译、听故事这仨工具～，后面争取一周上一个看看吧

产品名字叫好说，目前上架了 App Store ，安卓版还在开发中(主要是需要准备软著等资质会需要一些时间之类的)。

• AppStore 链接
• 简陋官网首页

欢迎各位安装体验～

[margoxlive]

对了，各位在邀请好友界面绑定邀请人，输入 88888888 ，可以得到一大波点数～

[Mantext1989]

好有意思，居然连总结都有哦，这个是怎么做到的

[margoxlive]

@Mantext1989 把聊天记录塞给 chatgpt 之类的，LLM 天生就是干这事儿的哈哈

[Tyler1989]

期待 Android 版

[IvanLi127]

看起来不错，等 android 版本+1

[Seria]

期待 Android 版+1

[ifzm]

看起来很不错啊 👍

[SlYyWc]

不错，做的比我司的好～
纠正个错别字，回复建议里，"长安发送" -> "长按发送"

[Billdex]

好棒的感觉，期待安卓版

[Symbo1ic]

刚刚下载，晚上回家试试！

[margoxlive]

@SlYyWc 啊哈，感谢感谢～

[huzhizhao]

三次元人路过，有没有御姐啥的😍😍

[margoxlive]

@huzhizhao 有一个叫 Zoe 的角色是国风御姐形象，而且她的配音应该是所有角色里面最自然的一个

[huzhizhao]

@margoxlive good 我去下一个支持一下😎😎

[cnyballk]

强啊哥们，这是用什么技术栈？我之前也想整一个数字人到手机上，不过不会，哈哈

[margoxlive]

@cnyballk ChatGPT + 自然语音合成 + Live2D ，App 是 RN 做的

[cnyballk]

@margoxlive 谢谢

[drymonfidelia]

和我想做的东西一样，不过最近公司出了一些问题快倒闭了裁了一堆人，我要干好几个人的活，一直没时间开始做
感觉你这个有戏
建议加入养成系统提高用户粘性

[margoxlive]

@drymonfidelia 嗯，这个其实也只能算是一个技术验证 Demo ，最终目标是做一个泛二次元 AI 社交应用，细化人设，增加交互性和表现力，增加装扮和场景等，应该要比现在市面上一大堆纯文字 + AI 静态图片的虚拟社交应用更有产品力～ 不过我这个也是业余兼职做，精力实在是太不够用了

[DevHuaJi]

看起来不错，有计划上 Android 版么？

[margoxlive]

@DevHuaJi 正在开发中，技术问题不大，不过要准备软著那些，很头疼哈哈

[teaegglove]

Android +1

[teaegglove]

请问自然语音合成部分用的什么软件?

[mistsobscure]

老哥这个项目，可以开一个根据项目的空 rn 项目结构放到 github 吗 0.0 最近在学 rn ，项目结构有点小纠结

[margoxlive]

@teaegglove 用的微软的 tts

[margoxlive]

@mistsobscure 这个和个人习惯相关，没有什么严格的规范，一般来说，我会分下面这些目录来存放文件:
pages 、components 、helpers 、store 、utils 、api

[on1snow]

用起来非常丝滑啊，一个人搓出来真厉害！
请教个技术问题：音频对口型是怎么做的 @margoxlive ，我搞了个数字人是用 sd 重绘头部，可慢了啊

[margoxlive]

@on1snow 其实就是计算音频的 RMS ，使用绝对音量来控制嘴型大小～比较 Low ，所以也只能用在二次元的角色上面，哈哈哈哈