探索下一代大模型预训练范式,从模型结构、训练策略、数据策略、算力利用率等角度切入,打造具有更强能力和更高潜力的基座模型。1)设计更高效的模型结构,提高给定数据量、计算量、硬件型号、输出序列长度等约束下的模型能力,如长序列能力、记忆能力等。2)探索更科学的训练策略,对影响training…
732 jobs found
探索下一代大模型预训练范式,从模型结构、训练策略、数据策略、算力利用率等角度切入,打造具有更强能力和更高潜力的基座模型。1)设计更高效的模型结构,提高给定数据量、计算量、硬件型号、输出序列长度等约束下的模型能力,如长序列能力、记忆能力等。2)探索更科学的训练策略,对影响training…
本课题探索大模型垂直领域知识高效增强方法,包括数据策略、训练策略以及scaling law友好的训练方法,打造适配实际应用所需的基座能力。研究内容包括但不限于:1) 大模型基座知识能力增强,通过大规模continue…
原生多模旨在统一理解与生成,从而用同一套范式处理文本、视觉、语音等各个模态的数据,从而更加自然地进行模态融合,以及通过scaling友好的训练范式,解锁模型智能的新维度。本课题研究内容包括:1)Pre-train:借助更好的tokenizer架构 / 数据表达 /…
该课题聚焦于利用语音多模态大模型以及深度推理大模型构建对话Agent,通过实时全双工交互,精准理解和感知用户情绪,凭借高情商为用户提供极具价值的回复,旨在为用户打造温暖、贴心且高度智能的对话Agent。研究内容:1)参与语音多模态大模型在客服、销售、C端助理等场景应用技术研究,通过文本-语音的对齐机制等措施,提升模型对语音中包含的语义以…
本课题专注于大模型前沿压缩技术探索,通过压缩技术降低大模型的推理部署成本。课题研究内容包括但不限于:1) 探索多种模态(文本、语音、视觉)的模型压缩技术,不限剪枝、蒸馏、稀疏、量化、低秩化。2) 探索新轻量化结构,不限 MoE、Mamba、Sparse-Attention、MTP,实现训练和推理的协同优化。3)…
Reasoning(推理)是大模型理解和处理信息的核心能力,是通用智能水平逼近的重要观测维度。课题聚焦于探究生成式模型的高级推理发生机制,提升大模型在复杂任务上的推理表现。研究内容包括但不限于:1)复杂任务推理应用效果优化,诸如逻辑推理、数学推理、代码推理、跨模态推理、多模型决策等。2) RL…
随着AI技术的突破,代码大模型正成为软件开发领域的核心驱动力。基于LLM的代码生成工具已实现从自然语言描述到高质量代码的自动化生成,带来开发效率的大幅提升。本课题旨在打造行业的代码大模型,并推动Coding Agent在实际应用场景落地。 研究内容:1)通过代码pretrain、continue…
ByteIntern:面向2027届毕业生(2026年9月-2027年8月期间毕业),为符合岗位要求的同学提供转正机会。团队介绍:架构与工程团队负责为中国交易与广告产品和业务打造大规模、可扩展、高效和稳定的工程架构支撑。团队职责包括抖音、今日头条、番茄视频等各APP端的广告架构和工程、抖音商城架构、广告创意平台等。加入我们,可以直面超大流…
团队介绍:推荐架构团队支撑字节跳动旗下多款APP产品,如抖音、今日头条、番茄小说、西瓜视频、剪映等推荐系统架构的设计和开发,保障系统的稳定和高可用,致力于抽象系统通用组件和服务,建设推荐中台、数据中台;关于在线服务,在这里你有机会参与大规模机器学习在线预估框架的研发与优化,也有机会参与模型训练与调度等相关问题的研究与突破,解决系统瓶颈,降…
团队介绍:作为字节跳动核心业务的技术引擎,搜索架构部门致力于构建全球领先的大规模智能搜索架构,支撑抖音、电商等业务的飞速发展。在抖音等短视频生态与电商业务,我们直面千亿级数据规模下的复杂工程挑战。团队深耕检索架构、分布式系统、模型工程与特征工程四大核心领域。我们通过技术创新驱动人与信息的高效连接,服务全球数亿用户的大规模搜索需求,打造极致…
团队介绍:国际化内容安全平台团队致力于为字节跳动国际化产品的用户维护安全可信赖环境,通过开发、迭代机器学习模型和信息系统以更早、更快发掘风险、监控风险、响应紧急事件,以人工智能技术支持业务发展,力求更高效、更敏捷、更全能地维护站内生态安全。…
ByteIntern:面向2027届毕业生(2026年9月-2027年8月期间毕业),为符合岗位要求的同学提供转正机会。团队介绍:商业化信任与安全研发团队致力于构建业界领先的智能审核系统,通过前沿 AI 技术保障商业内容安全与合规,提升用户客户的信任。团队通过研发大模型基座、先进的审核大模型和审核系统,持续提升大模型系统对复杂商业化内容的…
We are looking for talented individuals to join our team in 2027. As a graduate, you will get opportunities to pursue bold ideas, tackle complex challenges, and unlock…
ByteIntern:面向2027届毕业生(2026年9月-2027年8月期间毕业),为符合岗位要求的同学提供转正机会。团队介绍:推荐架构团队支撑字节跳动旗下多款APP产品,如抖音、今日头条、番茄小说、西瓜视频、剪映等推荐系统架构的设计和开发,保障系统的稳定和高可用,致力于抽象系统通用组件和服务,建设推荐中台、数据中台;关于在线服务,在这…
We are looking for talented individuals to join our team in 2027. As a graduate, you will get opportunities to pursue bold ideas, tackle complex challenges, and unlock…
ByteIntern:面向2027届毕业生(2026年9月-2027年8月期间毕业),为符合岗位要求的同学提供转正机会。团队介绍:推荐架构团队支撑字节跳动旗下多款APP产品,如抖音、今日头条、番茄小说、西瓜视频、剪映等推荐系统架构的设计和开发,保障系统的稳定和高可用,致力于抽象系统通用组件和服务,建设推荐中台、数据中台;关于在线服务,在这…
日常实习:面向全体在校生,为符合岗位要求的同学提供为期3个月及以上的项目实践机会。团队介绍:字节跳动Seed团队成立于2023年,致力于寻找通用智能的新方法,追求智能上限,为科技和社会发展作出贡献。Seed团队在AI领域拥有长期愿景与决心,团队研究方向涵盖MLLM、GenMedia、AI for…
团队介绍:字节跳动 Seed 团队成立于 2023 年,致力于寻找通用智能的新方法,追求智能上限,为科技和社会发展作出贡献。Seed 团队在 AI 领域拥有长期愿景与决心,团队研究方向涵盖 MLLM、GenMedia、AI for…
ByteIntern:面向2027届毕业生(2026年9月-2027年8月期间毕业),为符合岗位要求的同学提供转正机会。团队介绍:国际化内容安全平台团队致力于为字节跳动国际化产品的用户维护安全可信赖环境,通过开发、迭代机器学习模型和信息系统以更早、更快发掘风险、监控风险、响应紧急事件,以人工智能技术支持业务发展,力求更高效、更敏捷、更全能…
AML-MLsys combines system engineering and the art of machine learning to develop and maintain massively distributed ML training and Inference system/services around the…
Page 34 of 37