activivity / Lan-daoLinks
基于WebSocket协议实现实时弹幕信息爬取与信息通信。通过MaxKB容器训练直播互动模型,具备智能互动能力,通过微调预训练的语言模型来适应特定的直播场景需求,提升数字人的交互体验。基于TTS和Wav2lip开发语音克隆和唇形同步算法,通过预训练数字人模型的方式压缩生成时间,并根据多模态数据(如表情、语言等)进行微调,优化模型的计算性能,保证数字人在高并发环境下的实时响应,使数字人交互速度达到实时交互水平(5s)。
☆13Updated last year
Alternatives and similar repositories for Lan-dao
Users that are interested in Lan-dao are comparing it to the libraries listed below
Sorting:
- 基于Linly-Talker数字人改版的教育系统,包含网课总结、数字人对话、Chatbot对话,项目可在autodl部署☆35Updated last year
- 数字人授课录制系统——全新的微课视频的生成方案——API☆80Updated last year
- app会常驻手机后台,你可以随时随地保持与Fay数字人的沟通。☆51Updated last year
- 小智同学测试工具(websocket)☆47Updated 11 months ago
- NextHuman 3D写实/次写实/卡通/异型数字人WebGL SDK☆62Updated last year
- offline 2d digitalhuman demo for edge devices (android/ios/etc.)☆83Updated last year
- NextHuman 3D超写实/卡通/异型数字人UESDK☆20Updated 10 months ago
- Простое WebUI на Flask для EasyWav2Lip☆27Updated last year
- 在DH_live项目基础上修改,添加webui界面☆75Updated 9 months ago
- 数字人开源项目 (Digital human project)☆158Updated 3 years ago
- 张艺谋(国师)一键声音克隆和恶搞文本生成项目☆16Updated 2 years ago
- 数字人授课录制系统——全新的微课视频的生成方案——UI☆44Updated last year
- ☆25Updated 4 years ago
- 洛曦 数字人视频播放器,带HTTP API,使用gradio api对接Easy-Wav2Lip、Sadtalker、GeneFacePlusPlus、MuseTalk,也可以用于播放本地视频☆175Updated last year
- 基于腾讯云Iot explorer物联网平台、腾讯连连小程序的3D打印控制系统开发☆11Updated 2 years ago
- 这是一个用于连接小智AI服务的Python客户端库。它提供了简单的接口来进行语音对话 和文本交互。☆26Updated 10 months ago
- 小智的视觉对话☆32Updated 9 months ago
- Real-time video understanding and interaction through text,audio,image and video with large multi-modal model. 利用多模态大模型的实时视频理解和交互框架,通过文本…☆26Updated 2 years ago
- 星搭低代码AI助手插件,使用 StableDiffusion 和 ChatGPT 生成插画和文案☆11Updated 2 years ago
- picture search by picture,resnet,milvus☆35Updated 2 years ago
- 获取bilibili直播弹幕,使用WebSocket协议☆37Updated last year
- 小伴智能体(代号:ben)是一款可采用数字人、虚拟人、UE、Live2D、具身硬件为形象的智能体AI Agent项目☆18Updated last year
- 数字人直播方案☆15Updated last year
- 数字人训练☆20Updated 2 years ago
- 帮助视觉障碍者识别物品,障碍物提醒☆93Updated 10 months ago
- 物联网平台,智能家居、智慧办公、智慧社区、农业监测、水利监测、工业控制等。☆40Updated last year
- 本项目为xiaozhi-esp32提供C++后端服务,帮助您快速搭建ESP32设备控制服务器。Backend C++ service for xiaozhi-esp32, helps you quickly build an ESP32 device control ser…☆32Updated 9 months ago
- CosyVoice语音合成简易API☆14Updated last year
- TalkX,一个开源的AI大模型聊天平台,支持编程插件、小智设备连接使用。☆94Updated 3 months ago
- 阿里SenseVoice的fastpi封装,采用onnx发布,体积更小,附带量化模型,支持GPU。支持从URL文件进行语音识别。☆104Updated last year