推荐系统项目实战一(推荐业务架构介绍)

阅读量：215 次

发布时间：2019-02-28

本文共 358 字，大约阅读时间需要 1 分钟。

架构与业务流

基础数据层：
- 包括业务数据和用户行为日志数据。
  - 业务数据主要包含用户数据和文章数据，用户数据即某头条注册用户的基础数据，文章数据在自媒体平台上传的文章的基本信息。
  - 用户行为日志数据来源于前端埋点
- 业务批量存储在HDFS上以用作离线分析
- 日志数据实时流向Kafka以用作实时计算

数据处理层：
- 基础计算：基于离线和实时数据，对各类基础数据计算成用户画像、文章画像
- 召回与排序
  - 召回环节使用各种算法逻辑从海量的文章中筛选出用户感兴趣的文章候选集合，集合大小：上千级别。排序即对候选集合中的文章进行用户相对的模型结果排序，生成一个排序列表。
  - 召回
  - 排序
    - 点击率预估模型
    - 特征处理、模型评价

推荐业务层：通过对外提供rpc接口来实现推荐业务的接入
- Feed流推荐：今日推荐场景，用户可以在这些页面中不断下拉刷新

转载地址：http://jvxp.baihongyu.com/

你可能感兴趣的文章

Mysql学习总结（69）——Mysql EXPLAIN 命令使用总结

Mysql学习总结（6）——MySql之ALTER命令用法详细解读

Mysql学习总结（70）——MySQL 优化实施方案

Mysql学习总结（71）——MySQL 重复记录查询与删除总结

Mysql学习总结（71）——数据库介绍（MySQL安装体系结构、基本管理）再回顾

Mysql学习总结（72）——MySQL 开发者开发，设计规范再总结

Mysql学习总结（73）——MySQL 查询A表存在B表不存在的数据SQL总结

Mysql学习总结（74）——慢SQL！压垮团队的最后一根稻草！

Mysql学习总结（75）——并发量大、数据量大的互联网业务数据库设计军规

Mysql学习总结（76）——MySQL执行计划（explain）结果含义总结

Mysql学习总结（77）——温故Mysql数据库开发核心原则与规范

Mysql学习总结（78）——MySQL各版本差异整理

Mysql学习总结（79）——MySQL常用函数总结

Mysql学习总结（7）——MySql索引原理与使用大全

Mysql学习总结（80）——统计数据库的总记录数和库中各个表的数据量

Mysql学习总结（81）——为什么MySQL不推荐使用uuid或者雪花id作为主键？

Mysql学习总结（82）——MySQL逻辑删除与数据库唯一性约束如何解决？

Mysql学习总结（83）——常用的几种分布式锁：ZK分布式锁、Redis分布式锁、数据库分布式锁、基于JDK的分布式锁方案对比总结

Mysql学习总结（84）—— Mysql的主从复制延迟问题总结

Mysql学习总结（85）——开发人员最应该明白的数据库设计原则