博客
关于我
推荐系统项目实战一(推荐业务架构介绍)
阅读量:215 次
发布时间:2019-02-28

本文共 358 字,大约阅读时间需要 1 分钟。

架构与业务流

  • 基础数据层:
    • 包括业务数据和用户行为日志数据。
      • 业务数据主要包含用户数据和文章数据,用户数据即某头条注册用户的基础数据,文章数据在自媒体平台上传的文章的基本信息
      • 用户行为日志数据来源于前端埋点
    • 业务批量存储在HDFS上以用作离线分析
    • 日志数据实时流向Kafka以用作实时计算
  • 数据处理层:
    • 基础计算:基于离线和实时数据,对各类基础数据计算成用户画像、文章画像
    • 召回与排序
      • 召回环节使用各种算法逻辑从海量的文章中筛选出用户感兴趣的文章候选集合,集合大小:上千级别。排序即对候选集合中的文章进行用户相对的模型结果排序,生成一个排序列表。
      • 召回
      • 排序
        • 点击率预估模型
        • 特征处理、模型评价
  • 推荐业务层:通过对外提供rpc接口来实现推荐业务的接入
    • Feed流推荐:今日推荐场景,用户可以在这些页面中不断下拉刷新

转载地址:http://jvxp.baihongyu.com/

你可能感兴趣的文章
Netty 高性能架构设计
查看>>
Netty+Protostuff实现单机压测秒级接收35万个对象实践经验分享
查看>>
Netty+SpringBoot+FastDFS+Html5实现聊天App详解(一)
查看>>
netty--helloword程序
查看>>
netty2---服务端和客户端
查看>>
【Flink】Flink 2023 Flink易用性和稳定性在Shopee的优化-视频笔记
查看>>
Netty5.x 和3.x、4.x的区别及注意事项(官方翻译)
查看>>
netty——bytebuf的创建、内存分配与池化、组成、扩容规则、写入读取、内存回收、零拷贝
查看>>
netty——Channl的常用方法、ChannelFuture、CloseFuture
查看>>
netty——EventLoop概念、处理普通任务定时任务、处理io事件、EventLoopGroup
查看>>
netty——Future和Promise的使用 线程间的通信
查看>>
netty——Handler和pipeline
查看>>
Vue输出HTML
查看>>
netty——黏包半包的解决方案、滑动窗口的概念
查看>>
Netty中Http客户端、服务端的编解码器
查看>>
Netty中使用WebSocket实现服务端与客户端的长连接通信发送消息
查看>>
Netty中实现多客户端连接与通信-以实现聊天室群聊功能为例(附代码下载)
查看>>
Netty中的组件是怎么交互的?
查看>>
Netty中集成Protobuf实现Java对象数据传递
查看>>
netty之 定长数据流处理数据粘包问题
查看>>