第一次观看我文章的朋友,可以关注、点赞、转发一下,每天分享各种干货技术和程序猿趣事 前言 职场的金三银四跳槽季又来了,不同的是今年比往年「冷」一些,形式更加严峻一些,大家多多少少可能都听到或看到一些信息,就是好多公司在优化裁员,作为求职者来说,面试是一道坎,很多人会恐惧面试,即使是工作很多年的老鸟, ...
分类:
移动开发 时间:
2021-02-22 12:04:27
阅读次数:
0
摘要:本篇主要介绍了项目中用于商业兴趣建模的DSSM双塔模型。作为推荐领域中大火的双塔模型,因为效果不错并且对工业界十分友好,所以被各大厂广泛应用于推荐系统中。通过构建user和item两个独立的子网络,将训练好的两个“塔”中的user embedding 和item embedding各自缓存到内... ...
分类:
其他好文 时间:
2020-05-13 12:20:31
阅读次数:
104
好久没有更新博客了,前段时间实在是太懒。过年后从老家到工作地方只更新了一篇与技术无关的文章。接下来时间,期望自己多多写博客,技术博客中也适当增加些逸闻趣事(例如这几天隔壁金三胖子手术后生死成谜),生活类博客中加些技术性东西,以增加博客的可读性和趣味性。让亲爱的读者们在快乐中就把知识学习了😄😄 趁 ...
分类:
移动开发 时间:
2020-04-26 01:07:40
阅读次数:
88
摘要:实际项目中需要将BERT线上化需要使模型又快又好的训练,所以经过调研使用目前BERT最新的派生产品ALBERT。ALBERT通过因式分解和共享层与层之间的参数减少了模型参数量,提升了参数效率;通过SOP替代NOP,增强了网络学习句子的连续性的能力,提升了自监督学习任务的能力;通过去掉dropo... ...
分类:
其他好文 时间:
2020-03-08 19:20:58
阅读次数:
83
参加工作以来,这个假期是最长的一次。快赶上了上学时候的寒暑假了,生活节奏和学习节奏变得非常的慢,为了共同抵制疫情,户外运动都变得非常的少。在老家的时候,自家庭院里陪着家人玩玩羽毛球,吃过晚饭了,戴上口罩陪着媳妇到村里转悠转悠,讲一下哪些是同宗,同门,哪些是我同学家,当时小的时候在这一片所发生的趣事等 ...
分类:
其他好文 时间:
2020-03-06 15:00:44
阅读次数:
61
摘要:上一篇广告行业中那些趣事系列3:NLP中的巨星BERT,从理论的角度讲了下NLP中有里程碑意义的BERT模型。BERT具有效果好和通用性强两大优点,其中效果好最主要的原因就是使用了Transformer作为特征抽取器。本篇主要详解下这个从配角到C位出道的Transformer,主要从宏观和微观... ...
分类:
其他好文 时间:
2020-03-01 12:52:50
阅读次数:
134
摘要:这是广告系列的第一篇。广告的核心是服务广告主,为广告主圈定对应的人群从而达到好的广告转化效果。而在其中起到桥梁作用的就是标签。广告主会根据自身的性质选定一类或几类有明显特点的人群,这里用标签表示。而我们要做的就是给用户打上标签,然后提供给广告主使用。广告主选择标签,而标签后面则代表人群。本文基... ...
分类:
其他好文 时间:
2020-03-01 12:47:55
阅读次数:
75
摘要:上一篇广告中那些趣事系列1:广告统一兴趣建模流程,我们了解了如何为广告主圈人群以及如何刻画用户的兴趣度。要想给用户打标签,我们需要构建数据源和标签的关联,也就是item-tag。针对数量较少的app数据源我们可以使用人工打标的方式来识别,但是对于news、用户query等数量较多的数据源则需要... ...
分类:
其他好文 时间:
2020-03-01 12:39:38
阅读次数:
63
摘要:上一篇广告行业中那些趣事系列2:BERT实战NLP文本分类任务(附github源码)通过项目实战讲解了如何使用BERT模型来完成文本分类任务。本篇则从理论的角度讲解BERT模型的前世今生。BERT虽然在模型创新的角度来说并不是非常出色,但它是近几年NLP领域杰出成果的集大成者。BERT大火最重... ...
分类:
其他好文 时间:
2020-03-01 12:12:00
阅读次数:
94
经过这次在公司实习中获取到的经历,我发现确实有时候书本上的知识发挥的作用微乎其微,好像是被问题打了太极拳一样,你明明想去攻克这个地方,他却给你报了其他地方的错误。 平常的一些小项目根本就不能匹配到企业级别的开发经验尤其我也不是ACM得奖的大佬,更是觉得尤为不适应,还好经过4个月左右的实习时间,我渐渐 ...
分类:
编程语言 时间:
2020-02-12 00:33:28
阅读次数:
80