简历: 2020.11-2021.5 声音场景识别项目 手机、耳机类 关 键 词:CNN、模型的量化部署、Pytorch 项目背景:开发基于深度学习的声音场景识别算法,将神经网络模型落地TWS耳机。 个人职责: ① 牵头组织声音场景数据的采集和清洗,进行分类模型的搭建和训练,完成基 于DCASE和自建数据集的算法测试; ② 主导模型量化工具开发,实现模型的INT8量化。基于CMSIS NN完成模型 的部署。模型内存降低60%; 难点解决: ① 基于开源数据集训练的模型无法泛化实际环境下的噪声情况,需要基于国 内声音场景数据进行finetune。 ② Pytorch无成熟模型量化工具。开发用于Pytorch的模型量化工具包。  2021.3-2022.6 耳机ANC项目 TWS耳机类 关 键 词:声音场景识别、计权声压级SPL、风噪检测算法 项目背景:为TWS耳机的ANC功能提供自适应模式切换、风噪等级检测等功能。解决风噪场景下ANC增噪的痛点问题,为TWS耳机的ANC功能保驾护航。 个人职责:① 负责耳机自适应ANC噪声场景检测算法的调研、选型以及部署落地。 ② 承担风噪检测算法的实现和落地,输出风噪强度等级,优化ANC功能在风噪 场景下的使用体验。 难点问题:① 解决场景检测算法输出结果在阈值附近时的模式振荡切换问题。 ② 提出级联型双阶段检测方案,优化双麦风噪检测算法,耳机待机时间提高1h。 项目产出:耳机ANC算法从0到1,方案落地Xiaomi Buds 3/4 Pro等产品。 15b7eb78ffd685c01n182dy1FVpUwJG7UviXR-Ojmw~~ 15b7eb78ffd685c01n182dy1FVpUwJG7UviXR-Ojmw~~  2021.8-2022.8 耳机智能免摘项目 TWS耳机类 关 键 词:VAD、回声消除AEC、骨传导语音传感器(VPU) 项目介绍:设计算法实时检测TWS耳机佩戴者是否处于讲话状态。当检测到耳机佩戴者处于讲话状态时,自动将耳机切换至人声增强或通透模式,达到不摘取耳机与他人沟通交流的目标。 个人职责:① 基于耳机通话Mic和VPU,牵头开发智能免摘算法backbone, 输出Demo和项目规划书并完成答辩通过项目评审; ② 算法方案评估和性能优化,保障算法的交付和落地。 难点解决:① 解决运动、咳嗽以及耳机敲击等场景的误触问题; ② 基于AEC算法解决耳机放歌时对VPU信号的干扰问题; 项目产出:对标Sony Wh1000mx4, 落地Xiaomi Buds4 Pro耳机,成果撰写发明专利2篇。  2022.3-至今 车内主动路噪消除项目 汽车类 关 键 词:开放声场、有源噪声控制、前反馈控制系统、智能座舱 项目介绍:设计算法降低高速行驶汽车的各座位处轮胎噪声,提高智能座舱的静谧度。 个人职责:① 负责加速度计布点分析:协助完成加速度计各点位数据采集,进行听音点Mic 信号的相干性分析,为NVH团队提供布点位置的建议。 ② 完成可行性分析和Demo开发:搭建消声室测试环境,开发基于FxLMS 的前馈ANC算法,基于TI DSP28335完成Demo演示和可行性报告。 ③ 独立承担ADI DSP多通道反馈ANC算法的开发和调试,协助同事完成算法性能验证。消声室测量降噪量2dB(A)。 ④ 跟进与武大、中科院声学所的RNC技术交流合作。 难点解决:① RME等声卡采集数据时延较大,无法进行算法的仿真和验证。 ② 设计学习率衰减和滤波器freeze策略,解决运行或在复杂工况下发散问题。 项目产出:完成算法调试,效果验证和交付进行中。  2020.8-2021.3 电视声清晰度增强 电视类 关 键 词:噪声检测、均衡器EQ 项目背景:正在播放的电视设备采集到外界噪声时,通过对噪声类型及强度的分析,调整音源的均衡器以及响度,达到播放出的声音清晰度和可懂度提高的目的,从而使得用户在噪声环境下摆脱遥控器的束缚。 个人职责:① 开发噪声检测算法,主要检测如吹风机、扫地机、豆浆机等噪声。 ② 输出基于人声增强方案的EQ调音策略。 难点解决:① 交付的设备具有低音炮等,会带动壳体振动,前端AEC效果不理想,拿到的 音频信号夹杂了大量非线性残余。 ② 检测到噪声持续存在的情况下,单纯的提高电视音量并不能本质上调高声音 的清晰度。 项目产出: 对标三星电视AVA控声技术,算法交付并上线小米电视6。

2023-04-06by@yyd19948-8fJzb&@Interviewer.Model: gpt-3.5
yyd19948-8fJzb

你是一个面试机器人,我会用 职位:<职位名称>的格式输入职位名称,你首先要判断<>里的内容是不是一个职位, 如果是就返回考察维度及维度说明, 如果不是, 就提示没有这个职位。返回的维度数量为6到10个之间
我还会用 简历:< 简历内容 >的格式输入简历内容,你要分析简历内容后, 给出有针对性的面试问题,问题数量在3到5个之间

你可以回答收到表示明白我的命令,并等待我的输入

Avatar
yyd19948-8fJzb

简历: 2020.11-2021.5
声音场景识别项目
手机、耳机类
关 键 词:CNN、模型的量化部署、Pytorch
项目背景:开发基于深度学习的声音场景识别算法,将神经网络模型落地TWS耳机。
个人职责: ① 牵头组织声音场景数据的采集和清洗,进行分类模型的搭建和训练,完成基
于DCASE和自建数据集的算法测试;
② 主导模型量化工具开发,实现模型的INT8量化。基于CMSIS NN完成模型
的部署。模型内存降低60%;
难点解决: ① 基于开源数据集训练的模型无法泛化实际环境下的噪声情况,需要基于国
内声音场景数据进行finetune。
② Pytorch无成熟模型量化工具。开发用于Pytorch的模型量化工具包。
 2021.3-2022.6
耳机ANC项目
TWS耳机类
关 键 词:声音场景识别、计权声压级SPL、风噪检测算法
项目背景:为TWS耳机的ANC功能提供自适应模式切换、风噪等级检测等功能。解决风噪场景下ANC增噪的痛点问题,为TWS耳机的ANC功能保驾护航。
个人职责:① 负责耳机自适应ANC噪声场景检测算法的调研、选型以及部署落地。
② 承担风噪检测算法的实现和落地,输出风噪强度等级,优化ANC功能在风噪
场景下的使用体验。
难点问题:① 解决场景检测算法输出结果在阈值附近时的模式振荡切换问题。
② 提出级联型双阶段检测方案,优化双麦风噪检测算法,耳机待机时间提高1h。
项目产出:耳机ANC算法从0到1,方案落地Xiaomi Buds 3/4 Pro等产品。 15b7eb78ffd685c01n182dy1FVpUwJG7UviXR-Ojmw~~
15b7eb78ffd685c01n182dy1FVpUwJG7UviXR-Ojmw~~
 2021.8-2022.8
耳机智能免摘项目
TWS耳机类
关 键 词:VAD、回声消除AEC、骨传导语音传感器(VPU)
项目介绍:设计算法实时检测TWS耳机佩戴者是否处于讲话状态。当检测到耳机佩戴者处于讲话状态时,自动将耳机切换至人声增强或通透模式,达到不摘取耳机与他人沟通交流的目标。
个人职责:① 基于耳机通话Mic和VPU,牵头开发智能免摘算法backbone, 输出Demo和项目规划书并完成答辩通过项目评审;
② 算法方案评估和性能优化,保障算法的交付和落地。
难点解决:① 解决运动、咳嗽以及耳机敲击等场景的误触问题;
② 基于AEC算法解决耳机放歌时对VPU信号的干扰问题;
项目产出:对标Sony Wh1000mx4, 落地Xiaomi Buds4 Pro耳机,成果撰写发明专利2篇。
 2022.3-至今
车内主动路噪消除项目
汽车类
关 键 词:开放声场、有源噪声控制、前反馈控制系统、智能座舱
项目介绍:设计算法降低高速行驶汽车的各座位处轮胎噪声,提高智能座舱的静谧度。
个人职责:① 负责加速度计布点分析:协助完成加速度计各点位数据采集,进行听音点Mic
信号的相干性分析,为NVH团队提供布点位置的建议。
② 完成可行性分析和Demo开发:搭建消声室测试环境,开发基于FxLMS
的前馈ANC算法,基于TI DSP28335完成Demo演示和可行性报告。
③ 独立承担ADI DSP多通道反馈ANC算法的开发和调试,协助同事完成算法性能验证。消声室测量降噪量2dB(A)。
④ 跟进与武大、中科院声学所的RNC技术交流合作。
难点解决:① RME等声卡采集数据时延较大,无法进行算法的仿真和验证。
② 设计学习率衰减和滤波器freeze策略,解决运行或在复杂工况下发散问题。
项目产出:完成算法调试,效果验证和交付进行中。
 2020.8-2021.3
电视声清晰度增强
电视类
关 键 词:噪声检测、均衡器EQ
项目背景:正在播放的电视设备采集到外界噪声时,通过对噪声类型及强度的分析,调整音源的均衡器以及响度,达到播放出的声音清晰度和可懂度提高的目的,从而使得用户在噪声环境下摆脱遥控器的束缚。
个人职责:① 开发噪声检测算法,主要检测如吹风机、扫地机、豆浆机等噪声。
② 输出基于人声增强方案的EQ调音策略。
难点解决:① 交付的设备具有低音炮等,会带动壳体振动,前端AEC效果不理想,拿到的
音频信号夹杂了大量非线性残余。
② 检测到噪声持续存在的情况下,单纯的提高电视音量并不能本质上调高声音
的清晰度。
项目产出: 对标三星电视AVA控声技术,算法交付并上线小米电视6。

Avatar
Avatar

这是一个音频领域的工程师职位,考察的维度包括:深度学习算法、模型量化部署、声音场景识别、信号处理、算法优化、电子硬件应用等。

yyd19948-8fJzb

提问?

Avatar
Avatar

当然,请问有什么问题我可以帮您解答吗?

yyd19948-8fJzb

简历:

Avatar
Avatar

非常抱歉,您需要提供完整的简历内容,才能让我为您提供有针对性的面试问题。请您重新输入格式为“简历:<简历内容>”的命令,并在尖括号中填写您的简历内容。

yyd19948-8fJzb

简历: 2020.11-2021.5
声音场景识别项目
手机、耳机类
关 键 词:CNN、模型的量化部署、Pytorch
项目背景:开发基于深度学习的声音场景识别算法,将神经网络模型落地TWS耳机。
个人职责: ① 牵头组织声音场景数据的采集和清洗,进行分类模型的搭建和训练,完成基
于DCASE和自建数据集的算法测试;
② 主导模型量化工具开发,实现模型的INT8量化。基于CMSIS NN完成模型
的部署。模型内存降低60%;
难点解决: ① 基于开源数据集训练的模型无法泛化实际环境下的噪声情况,需要基于国
内声音场景数据进行finetune。
② Pytorch无成熟模型量化工具。开发用于Pytorch的模型量化工具包。
 2021.3-2022.6
耳机ANC项目
TWS耳机类
关 键 词:声音场景识别、计权声压级SPL、风噪检测算法
项目背景:为TWS耳机的ANC功能提供自适应模式切换、风噪等级检测等功能。解决风噪场景下ANC增噪的痛点问题,为TWS耳机的ANC功能保驾护航。
个人职责:① 负责耳机自适应ANC噪声场景检测算法的调研、选型以及部署落地。
② 承担风噪检测算法的实现和落地,输出风噪强度等级,优化ANC功能在风噪
场景下的使用体验。
难点问题:① 解决场景检测算法输出结果在阈值附近时的模式振荡切换问题。
② 提出级联型双阶段检测方案,优化双麦风噪检测算法,耳机待机时间提高1h。
项目产出:耳机ANC算法从0到1,方案落地Xiaomi Buds 3/4 Pro等产品。 15b7eb78ffd685c01n182dy1FVpUwJG7UviXR-Ojmw~~
15b7eb78ffd685c01n182dy1FVpUwJG7UviXR-Ojmw~~
 2021.8-2022.8
耳机智能免摘项目
TWS耳机类
关 键 词:VAD、回声消除AEC、骨传导语音传感器(VPU)
项目介绍:设计算法实时检测TWS耳机佩戴者是否处于讲话状态。当检测到耳机佩戴者处于讲话状态时,自动将耳机切换至人声增强或通透模式,达到不摘取耳机与他人沟通交流的目标。
个人职责:① 基于耳机通话Mic和VPU,牵头开发智能免摘算法backbone, 输出Demo和项目规划书并完成答辩通过项目评审;
② 算法方案评估和性能优化,保障算法的交付和落地。
难点解决:① 解决运动、咳嗽以及耳机敲击等场景的误触问题;
② 基于AEC算法解决耳机放歌时对VPU信号的干扰问题;
项目产出:对标Sony Wh1000mx4, 落地Xiaomi Buds4 Pro耳机,成果撰写发明专利2篇。
 2022.3-至今
车内主动路噪消除项目
汽车类
关 键 词:开放声场、有源噪声控制、前反馈控制系统、智能座舱
项目介绍:设计算法降低高速行驶汽车的各座位处轮胎噪声,提高智能座舱的静谧度。
个人职责:① 负责加速度计布点分析:协助完成加速度计各点位数据采集,进行听音点Mic
信号的相干性分析,为NVH团队提供布点位置的建议。
② 完成可行性分析和Demo开发:搭建消声室测试环境,开发基于FxLMS
的前馈ANC算法,基于TI DSP28335完成Demo演示和可行性报告。
③ 独立承担ADI DSP多通道反馈ANC算法的开发和调试,协助同事完成算法性能验证。消声室测量降噪量2dB(A)。
④ 跟进与武大、中科院声学所的RNC技术交流合作。
难点解决:① RME等声卡采集数据时延较大,无法进行算法的仿真和验证。
② 设计学习率衰减和滤波器freeze策略,解决运行或在复杂工况下发散问题。
项目产出:完成算法调试,效果验证和交付进行中。
 2020.8-2021.3
电视声清晰度增强
电视类
关 键 词:噪声检测、均衡器EQ
项目背景:正在播放的电视设备采集到外界噪声时,通过对噪声类型及强度的分析,调整音源的均衡器以及响度,达到播放出的声音清晰度和可懂度提高的目的,从而使得用户在噪声环境下摆脱遥控器的束缚。
个人职责:① 开发噪声检测算法,主要检测如吹风机、扫地机、豆浆机等噪声。
② 输出基于人声增强方案的EQ调音策略。
难点解决:① 交付的设备具有低音炮等,会带动壳体振动,前端AEC效果不理想,拿到的
音频信号夹杂了大量非线性残余。
② 检测到噪声持续存在的情况下,单纯的提高电视音量并不能本质上调高声音
的清晰度。
项目产出: 对标三星电视AVA控声技术,算法交付并上线小米电视6。

Avatar
Avatar

An error occurred with your deployment

EDGE_FUNCTION_INVOCATION_TIMEOUT

yyd19948-8fJzb

简历: 2020.11-2021.5
声音场景识别项目
手机、耳机类
关 键 词:CNN、模型的量化部署、Pytorch
项目背景:开发基于深度学习的声音场景识别算法,将神经网络模型落地TWS耳机。
个人职责: ① 牵头组织声音场景数据的采集和清洗,进行分类模型的搭建和训练,完成基
于DCASE和自建数据集的算法测试;
② 主导模型量化工具开发,实现模型的INT8量化。基于CMSIS NN完成模型
的部署。模型内存降低60%;
难点解决: ① 基于开源数据集训练的模型无法泛化实际环境下的噪声情况,需要基于国
内声音场景数据进行finetune。
② Pytorch无成熟模型量化工具。开发用于Pytorch的模型量化工具包。
 2021.3-2022.6
耳机ANC项目
TWS耳机类
关 键 词:声音场景识别、计权声压级SPL、风噪检测算法
项目背景:为TWS耳机的ANC功能提供自适应模式切换、风噪等级检测等功能。解决风噪场景下ANC增噪的痛点问题,为TWS耳机的ANC功能保驾护航。
个人职责:① 负责耳机自适应ANC噪声场景检测算法的调研、选型以及部署落地。
② 承担风噪检测算法的实现和落地,输出风噪强度等级,优化ANC功能在风噪
场景下的使用体验。
难点问题:① 解决场景检测算法输出结果在阈值附近时的模式振荡切换问题。
② 提出级联型双阶段检测方案,优化双麦风噪检测算法,耳机待机时间提高1h。
项目产出:耳机ANC算法从0到1,方案落地Xiaomi Buds 3/4 Pro等产品。 15b7eb78ffd685c01n182dy1FVpUwJG7UviXR-Ojmw~~
15b7eb78ffd685c01n182dy1FVpUwJG7UviXR-Ojmw~~
 2021.8-2022.8
耳机智能免摘项目
TWS耳机类
关 键 词:VAD、回声消除AEC、骨传导语音传感器(VPU)
项目介绍:设计算法实时检测TWS耳机佩戴者是否处于讲话状态。当检测到耳机佩戴者处于讲话状态时,自动将耳机切换至人声增强或通透模式,达到不摘取耳机与他人沟通交流的目标。
个人职责:① 基于耳机通话Mic和VPU,牵头开发智能免摘算法backbone, 输出Demo和项目规划书并完成答辩通过项目评审;
② 算法方案评估和性能优化,保障算法的交付和落地。
难点解决:① 解决运动、咳嗽以及耳机敲击等场景的误触问题;
② 基于AEC算法解决耳机放歌时对VPU信号的干扰问题;
项目产出:对标Sony Wh1000mx4, 落地Xiaomi Buds4 Pro耳机,成果撰写发明专利2篇。
 2022.3-至今
车内主动路噪消除项目
汽车类
关 键 词:开放声场、有源噪声控制、前反馈控制系统、智能座舱
项目介绍:设计算法降低高速行驶汽车的各座位处轮胎噪声,提高智能座舱的静谧度。
个人职责:① 负责加速度计布点分析:协助完成加速度计各点位数据采集,进行听音点Mic
信号的相干性分析,为NVH团队提供布点位置的建议。
② 完成可行性分析和Demo开发:搭建消声室测试环境,开发基于FxLMS
的前馈ANC算法,基于TI DSP28335完成Demo演示和可行性报告。
③ 独立承担ADI DSP多通道反馈ANC算法的开发和调试,协助同事完成算法性能验证。消声室测量降噪量2dB(A)。
④ 跟进与武大、中科院声学所的RNC技术交流合作。
难点解决:① RME等声卡采集数据时延较大,无法进行算法的仿真和验证。
② 设计学习率衰减和滤波器freeze策略,解决运行或在复杂工况下发散问题。
项目产出:完成算法调试,效果验证和交付进行中。
 2020.8-2021.3
电视声清晰度增强
电视类
关 键 词:噪声检测、均衡器EQ
项目背景:正在播放的电视设备采集到外界噪声时,通过对噪声类型及强度的分析,调整音源的均衡器以及响度,达到播放出的声音清晰度和可懂度提高的目的,从而使得用户在噪声环境下摆脱遥控器的束缚。
个人职责:① 开发噪声检测算法,主要检测如吹风机、扫地机、豆浆机等噪声。
② 输出基于人声增强方案的EQ调音策略。
难点解决:① 交付的设备具有低音炮等,会带动壳体振动,前端AEC效果不理想,拿到的
音频信号夹杂了大量非线性残余。
② 检测到噪声持续存在的情况下,单纯的提高电视音量并不能本质上调高声音
的清晰度。
项目产出: 对标三星电视AVA控声技术,算法交付并上线小米电视6。模拟面试

Avatar