推荐系统项目实战一(推荐业务架构介绍)

阅读量：215 次

发布时间：2019-02-28

本文共 358 字，大约阅读时间需要 1 分钟。

架构与业务流

基础数据层：
- 包括业务数据和用户行为日志数据。
  - 业务数据主要包含用户数据和文章数据，用户数据即某头条注册用户的基础数据，文章数据在自媒体平台上传的文章的基本信息。
  - 用户行为日志数据来源于前端埋点
- 业务批量存储在HDFS上以用作离线分析
- 日志数据实时流向Kafka以用作实时计算

数据处理层：
- 基础计算：基于离线和实时数据，对各类基础数据计算成用户画像、文章画像
- 召回与排序
  - 召回环节使用各种算法逻辑从海量的文章中筛选出用户感兴趣的文章候选集合，集合大小：上千级别。排序即对候选集合中的文章进行用户相对的模型结果排序，生成一个排序列表。
  - 召回
  - 排序
    - 点击率预估模型
    - 特征处理、模型评价

推荐业务层：通过对外提供rpc接口来实现推荐业务的接入
- Feed流推荐：今日推荐场景，用户可以在这些页面中不断下拉刷新

转载地址：http://jvxp.baihongyu.com/

你可能感兴趣的文章

MySql中mvcc学习记录

mysql中null和空字符串的区别与问题！

MySQL中ON DUPLICATE KEY UPDATE的介绍与使用、批量更新、存在即更新不存在则插入

MYSQL中TINYINT的取值范围

MySQL中UPDATE语句的神奇技巧，让你操作数据库如虎添翼！

Mysql中varchar类型数字排序不对踩坑记录

MySQL中一条SQL语句到底是如何执行的呢？

MySQL中你必须知道的10件事，1.5万字！

MySQL中使用IN（）查询到底走不走索引？

Mysql中使用存储过程插入decimal和时间数据递增的模拟数据

MySql中关于geometry类型的数据_空的时候如何插入处理_需用null_空字符串插入会报错_Cannot get geometry object from dat---MySql工作笔记003

mysql中出现Incorrect DECIMAL value: '0' for column '' at row -1错误解决方案

mysql中出现Unit mysql.service could not be found 的解决方法

mysql中出现update-alternatives: 错误: 候选项路径 /etc/mysql/mysql.cnf 不存在 dpkg: 处理软件包 mysql-server-8.0的解决方法（全）

Mysql中各类锁的机制图文详细解析（全）

MySQL中地理位置数据扩展geometry的使用心得

Mysql中存储引擎简介、修改、查询、选择

Mysql中存储过程、存储函数、自定义函数、变量、流程控制语句、光标/游标、定义条件和处理程序的使用示例

mysql中实现rownum，对结果进行排序

mysql中对于数据库的基本操作