个性化推荐的技术挑战
某中心庞大的商品目录使得个性化购物体验的实现存在无数可能。当某中心商店预测到用户返回购买宠物喜爱的零食时,主页会前置显示相关选项——但同时也会推荐值得考虑的相似品牌。系统还会提醒补货洗面奶、愿望清单商品促销信息,以及匹配用户近日搜索的牛仔裤选项。
某机构研究科学总监张任及其团队运用科学方法为用户提供最相关的商品推荐。作为个性化战略计划(包括重复购买、生鲜配送、企业采购、宠物用品和美妆等板块)的研究科学负责人,张任应用深度学习技术实现定制化的实时推荐。
“核心目标是理解用户的实时意图并提供相关体验和产品,“她表示,“我们所解决的技术复杂性和产生的影响,使团队成为科学家的理想研究环境。”
噪声环境下的算法优化
在用户决策受多重因素影响的嘈杂环境中,理解用户偏好存在显著挑战。例如当商品位置影响决策时,就会产生位置偏差——某些商品仅因放置在更显眼位置就更可能被用户选择。这正是张任团队致力解决的技术难题之一。
“在高度嘈杂的环境中存在各种有趣的科学问题,“张任指出,“如何在多重干扰因素下设计实验并确保学到正确的规律?”
团队已发表关于优化推荐系统的研究成果。在论文《不要推荐明显项:估计概率比率》中,他们论证了流行度采样指标更适合个性化推荐,因为这些指标能直接衡量系统识别用户专属物品而非通用物品的能力。
深度学习可解释性突破
另一项技术挑战是提升推荐系统的透明度。虽然深度学习算法性能超越传统方法,但默认不提供决策依据。
“当用户知晓推荐原因时,其参与度通常更高。但系统需要处理数百万条记录才能生成响应,如何为用户解读这些数据?“张任解释道,“方法的复杂性、海量数据和预期的低延迟要求使该问题极具挑战性。”
团队与某机构学者Iain Murray等合作解决此类问题。爱丁堡大学机器学习与推理教授Murray不仅参与团队研究,还带来创新思路。张任表示与Murray的合作包含大量头脑风暴会议,这种合作不仅推动技术进步,也成为吸引高端人才的磁石。
技术研发体系构建
张任确保团队将20%-30%的时间投入探索性研究,这些研究短期内可能没有直接商业影响,但代表未来方向。“对此类研究的失败容忍度要高得多,“她强调,“科学家需要这种探索自由和兴奋感,这种能量是打造高绩效团队和正确文化的基础。”
张任强调行业科学家必须具备实践思维:“需要运用数据科学解决商业问题。最难觅的人才通常是能跨领域搭建桥梁的专业人士。”
她本人深入参与每个科学主题的商业和工程层面,以前美国运通首席风险官Ash Gupta为榜样——即使作为高管,Gupta也经常深入研究系统、流程和政策细节,在驱动愿景的同时保持对风险管理领域的深度认知。
“无论处于什么领导层级,都不应脱离自身领域之外的实际进展,“张任总结道,“若没有吸引人的用户体验设计和稳健的工程系统,科学就无法产生实际影响。”