|
CR-AI-1.5
一个基于 Mix of Experts(MoE) 架构的多模态大型语言模型
CRAI V2.0(预训练):DOWN
我们正在开发:
CRWaf - 干飞雷池Waf【重构.png】
Github注册机【滞留中】
Github Star机【滞留中】
CR DNS管理【滞留中】
CR IDC【废弃中】

点击直达 GitHub 下载
简介 Introduction
CR-AI-V1.5 是一个先进的开源多模态大语言模型,融合了当代人工智能领域的前沿技术。该模型采用了混合专家(Mixture of Experts, MoE)架构,并辅以可选的 Longformer 注意力机制 或稀疏注意力技术,使其能够高效处理长文本和多模态信息,同时保持高性能。
CR-AI-V1.5 不仅继承了大型语言模型出色的语言理解与生成能力,还进一步扩展了其处理包括图像和音频在内的多种模态数据的能力,为用户提供了一个真正的多模态AI助手。无论是在学术研究还是实际应用场景中,CR-AI-V1.5 都展现了卓越的表现。
我们相信,开源 CR-AI-V1.5 代表了人工智能普及化的重要一步。通过开放源代码,我们期待见证更多创新应用的诞生,并欢迎全球开发者和研究人员参与模型的改进和优化。
应用场景 Application Scenarios
- 智能内容创作与编辑
- 图像描述与视觉问答
- 多模态数据分析
- 科学研究与教育辅助
- 个性化智能助手
- 垂直领域知识服务
安装要求 Installation Requirements
- Python 3.8+
- PyTorch 1.12+
- CUDA 11.6+(推荐使用GPU运行,CPU也可运行)
- 最低内存需求:16GB
- 推荐GPU显存:24GB+
温馨提示 Prompts
可用内存<16GB内存会溢出(亲测)
快速开始 Quick Start
git clone https://github.com/wangyccn/CR-AI-V1.5
cd CR-AI-V1.5
python app.py
模型训练与微调 Model Training and Fine-tuning
你可以运行 train.py 文件进行训练和微调。
模型部署 Model Deployment
你可以运行 app.py 文件来部署模型。
致谢 Acknowledgments
CR-AI-V1.5 的开发受到了众多开源项目和研究成果的启发。我们对这些项目的贡献者表示衷心感谢。特别感谢所有为开源AI社区做出贡献的研究人员和开发者们。
许可证 License
CR-AI-V1.5 采用 MIT 许可证。
|
|