前不久,第三届字节跳动奖学金方案现已正式发动。

自 2021 年起,字节跳动奖学金方案现已完成了两届评选,共有 19 位优异学子荣获每人 10 万元人民币的奖学金。

在奖学金支撑下,他们取得了新的科研项目费用、学术沟通时机,让自己的才调和尽力有了更进一步的发挥空间。

现在,往届获奖者中,除了依然在攻读博士/硕士学位的同学之外,已有 2 位同学取得了教职,2 位同学正式入职国内一线互联网公司。在字节跳动,也有 3 位奖学金得主以正式或实习的身份开端了新的科研生涯。

拿到字节跳动奖学金,入职字节跳动做科研,他们经历了什么?

任同学

  • 浙江大学 2022 届硕士结业生
  • 首届字节跳动奖学金获奖者
  • 字节跳动火山语音团队算法科学家

“语音组成方面,从组成作用上看,字节跳动相关技能是国内榜首队伍的。”

浙江大学结业的任同学是榜首届字节跳动奖学金获奖者之一。他长期研讨语音组成等相关范畴,是业界普遍运用的语音组成模型 FastSpeech 和 PortaSpeech 的榜首作者,光 FastSpeech 和 FastSpeech 2 两篇论文的引证加起来高达 1400+。硕士期间,任同学以一作身份宣布的顶会论文就超过了 10 篇。

2021 年,正在读研讨生三年级的他由于优异的科研作用取得了字节跳动奖学金,尔后也一直作用频出。硕士结业才一年的任同学在 Google Scholar 上的 h-index 就达到了 21,也就是说,有 21 篇论文被引证了至少 21 次。

本年年初,在字节跳动火山语音团队的邀约下,任同学正式入职,成为了一名算法科学家,担任语音组成相关的前沿研讨作业。

“字节事务范围非常广,像我做的语音组成这类生成式 AI 技能在字节跳动会有许多使用远景。而且咱们团队是科研部门,能够发论文,也能够落地实践,这对我非常有吸引力。”

他的确取得了许多落地时机。几个月前,任同学想做一个「音效生成」的技能,生成脚步声、开门声等各种作用,落地在影视、游戏、有声小说等场景。Leader 立刻帮他找到了可能会有需求的事务部门,大家敏捷清晰意向,现在这些音效都现已能够用 AI 组成出来了。

来到字节跳动之后,任同学很认可团队的技能能力:“拿我了解的语音方面来说,从组成作用上看,字节跳动相关技能是国内榜首队伍的;CV 做得也很好,我能够便利地调用 CV 团队的 SDK。由于有实在的使用场景、有足够的数据与算力支撑,字节跳动的算法同学们都在尽力追求最棒的作用。”

现在,任同学正在研讨新的语音组成模型 PortaSpeech 2,逐步将它落地到火山引擎上;一起也在研讨语音驱动人脸——简略来讲,就是语音现已组成好了,怎么让数字人对上这段语音的口型。他相信,在字节跳动,这些 AI 技能的立异能够让语音组成取得更大的落地时机,让数字人服务不同职业。

拿到字节跳动奖学金,入职字节跳动做科研,他们经历了什么?

刘同学

  • 上海交通大学博士生
  • 第二届字节跳动奖学金取得者
  • ByteDance Research 实习研讨员

“从办理 GPU 集群到请求显示器,在字节做各种事情都很便利。”

上海交通大学博士生刘同学首要研讨数据驱动的强化学习方向,2022 年,正在就读博士四年级的他靠着 8 篇 NeurIPS、ICML 等顶会的一作论文成为了字节跳动奖学金得主之一。

2022 年的奖学金评选仅仅曩昔半年,刘同学仍在为各种强化学习问题寻觅新的、更有用的方案。他研讨了最新前沿的生成分散模型在决策任务中的使用投稿到了 NeurIPS;宣布了一篇 ICLR 论文 《visual imitation with patch rewards》 ,让 AI 从视频中仿照学习,这也正是机器人范畴的首要方针之一;此外,他还在尝试运用最新的语言模型构建德扑 AI 系统;一起借着奖学金的时机认识了不少跨范畴的优异同行,参与学术会议,和国际最前沿的学术研讨者沟通磕碰想法。

凭借字节跳动奖学金评选的时机,刘同学结识了 ByteDance Research 的一位团队 Leader,就直接加入了团队,成为了一名实习研讨员,研讨用强化学习处理机器人杂乱操控问题。

敏捷高效是刘同学入职字节后最深的感触。优质的研制工具链,让办理 GPU 集群、请求资源都变得非常便利。“不只是研制环境,哪怕是请求显示器、或许在飞书上反映任何方面的问题,都会得到很快的反应。”

机器人团队让他感触到了浓浓的立异气氛:“尽管我的作业目前仍是在模拟环境中进行机器人的强化学习研讨,但是能感觉到字节跳动真的非常重视在实在环境中落地,咱们办公区邻近都摆着各种机器人产品,比如导航机器人、机械臂等等,由于许多同学需要在实机上进行算法调试。尽管机器人团队现在还不大。但我相信,在高效的团队作业下,咱们的相关技能积累、迭代和产品使用指日可待。”

现在,刘同学正在研讨在模拟环境中操控机器人移动物体的相关研讨,“实习到 9 月应该就能够取得一些作用,让咱们团队的机器人技能方案愈加老练。”

拿到字节跳动奖学金,入职字节跳动做科研,他们经历了什么?

秦同学

  • 北京航空航天大学博士生
  • 第二届字节跳动奖学金取得者
  • 火山语音团队实习研讨员

“字节的研讨接近实践落地,咱们期待在将来的研讨中取得更有影响力的作用。”

秦同学是北京航空航天大学的博士生,首要研讨模型紧缩和量化神经网络范畴,是 2022 年字节跳动奖学金的十位获奖者者之一。

本年博士四年级的秦同学研讨的一个要点方向是硬件友爱深度学习。他的作业一方面是把体积巨大的神经网络极限紧缩,这样在边际硬件上也能够运行,在 CVPR 等顶会顶刊提出了 IR-Net 等二值量化方案,并在 ICML 2023 提出国际首个二值量化基准;另一方面,他继续探究低成本的量化方案,在 TPAMI 等顶刊顶会提出了无数据量化系列办法。

其实,在取得奖学金的一年前,秦同学就现已经过学术合作项目开端在字节跳动火山语音团队实习,展开智能语音算法相关的研讨作业。

入职之前,尽管没有做过任何语音模型相关的作业,但并不耽误秦同学研讨怎么在实在的边际硬件上让语音模型实现十数倍的紧缩作用。2022 年,他以一作身份宣布在 IJCAI 上的二值化神经网络 BiFSMN 的体现现已超过了职业其他公司的模型作用,前不久还在 TNNLS 上宣布了更高性能的 BiFSMNv2。

现在,在字节跳动实习的一起,秦同学也在瑞士的 ETH Zrich 访学。有了字节奖学金支撑,他也得以趁此时机前往不同国家参与国际学术沟通会议,“前不久我去参与了阿卜杜拉国王科技大学(KAUST)举行的 Rising Stars AI 研讨会,见到了 LSTM 之父 Jurgen Schmidhuber,还认识了许多闻名学者,我和他们一起沟通量化方向的研讨进展。也成为了德国学术沟通中心(DAAD)的 AInet Fellow”

在字节学术合作项目中,秦同学能够取得学校导师与字节 Mentor 双方的辅导。所产出的技能作用也能够落地在字节跳动的抖音、PICO 等事务上。现在,秦同学正在探究大模型布景下的硬件友爱深度学习,“字节会更接近工业界、接近实践落地,咱们期待在将来的研讨中取得更有影响力的作用”。

拿到字节跳动奖学金,入职字节跳动做科研,他们经历了什么?

2023 年,第三届字节跳动奖学金方案已于本月发动,方案支撑 10 余位具有立异精力的科技人才,期待优异的同学们积极报名,与字节跳动一起探究新奇。

咱们相信,对优异科研学子的支撑与鼓励不仅能促进个人的立异创造、学术开展,更能经过个人的开展促进科技进步,探究人类认知前沿,让技能回馈社会,引领未来可继续开展。