2017.4.20 刘海峰(京东总架构师)、陈恩红讲座,个人总结如下。
一、电商技术点(非ML)
1. 用户浏览网页时:静态内容使用 CDN;动态内容(如不同地区存量)使用内存数据库(memory is new disk),关系数据库基本上只用于备份;分布式存储要求高实时性、高并发。
2. 下单过程:强一致性。
3. 最近配送站选择:文本分类、运筹学
二、电商技术点(ML)
1. 商品ranking:ML、DL
2. 上架产品的合规检查:DL(文本与图片匹配时,分别DL再匹配)
3. 预测消费,提前配送
京东的各个系统:
JDOS(data center OS):一个用于分布式集群的OS,管理机器的分配,对不同的需求分配最合适的资源,并管理数据交互
JSF(service framework):Java RPC
JIMB(不清楚全称):管理所有动态内容的分布式内存数据库,参见上面的memory is new disk
JMQ(message queue)
三、陈恩红老师做的一些点
1. 情境数据挖掘
2. 考虑attention的挖掘技术
3. 视频标注(利用弹幕,再对弹幕内容按情感等分类,提取出标注)
4. 试题难度预测(每太听懂)
5. 自动写诗(第一步,解析用户对诗的要求,比如“写一首春天的诗”,利用百度丰富的语料,得到4个关键词,涉及到语义和联想;第二部,作诗,这一步似乎是调用现成别人成果的,如果不是则具体不清楚)
阅读(340) | 评论(0) | 转发(0) |