香侬科技将迁移学习、模型压缩与端云协同技术结合，长期致力于在有限算力条件下的大规模语言模型的低成本训练与高性能推理。依靠高性能计算技术搭建众核多擎的弹性加速的分布式预训练平台，高效分配算力资源完成大规模语言模型训练。通过结构搜索、知识蒸馏、RLHF的联合进化寻优机制，完成预训练模型在不同自然语言处理领域任务的模型轻量化能力涌现，大幅度提升推理效率。