直播多模态内容理解算法工程师 - 中国交易与广告
团队介绍:中国交易与广告,基于个性化推荐、深度学习和大模型技术,依托抖音、今日头条、红果短剧、西瓜视频、番茄小说等多元产品,构建抖音电商、生活服务、广告营销等核心营收业务的算法策略和工程架构。部门运用领先的算法能力,精准连接海量用户与商家,通过推荐、广告和搜索算法精准匹配需求并促进交易达成,保障用户体验与商家权益,实现营收业务可持续增长;基于深厚的技术积累,构建高效、智能、可靠的交易与广告产品,全面提升多行业收入变现与市场占有。在这里,你将直面超大规模流量与复杂业务场景的技术挑战,深度应用业界领先的商业模型与算法技术,投身面向未来的数字营销能力建设,持续探索前沿技术。
1、研究方向:提升视频、音频、图像、文本及多模态的大模型基础能力,在业务领域与通用领域取得行业领先的效果,建设体系化的模型能力提升方法论;探索理解大模型与生成大模型能力结合互补模式,探索并落地一体化模型并取得更高的模型效果;推动多模态内容理解能力在推荐场景的落地应用;
2、负责抖音直播业务场景下的内容理解工作,建设多模态大模型、生成式模型等前沿模型技术能力,接近人类感知认知模型能力,产出相应的研究成果;
3、跟进行业最新技术进展,探索多模态方向的新技术研究与落地。
1、2027届获得本科及以上学历,计算机/软件/人工智能/数学等相关专业的优先;
2、具有扎实的机器学习基础,对深度学习、大语言模型、多模态模型、生成式模型等内容理解与生成技术有深入的理解,数理功底扎实,自学能力强;
3、有扎实的编码能力,熟练使用相关机器学习框架和工程框架;
4、在多模态大模型领域有经验,在短视频、图文算法领域有经验者优先;
5、在计算机科学高水平会议和期刊如NIPS、ICML、CVPR、ICCV、ECCV、IJCAI、AAAI、KDD、SIGIR、WWW、ACL、PAMI、IJCV等发表过论文或有竞赛经验者优先。