推荐系统项目实战一(推荐业务架构介绍)

阅读量：215 次

发布时间：2019-02-28

本文共 358 字，大约阅读时间需要 1 分钟。

架构与业务流

基础数据层：
- 包括业务数据和用户行为日志数据。
  - 业务数据主要包含用户数据和文章数据，用户数据即某头条注册用户的基础数据，文章数据在自媒体平台上传的文章的基本信息。
  - 用户行为日志数据来源于前端埋点
- 业务批量存储在HDFS上以用作离线分析
- 日志数据实时流向Kafka以用作实时计算

数据处理层：
- 基础计算：基于离线和实时数据，对各类基础数据计算成用户画像、文章画像
- 召回与排序
  - 召回环节使用各种算法逻辑从海量的文章中筛选出用户感兴趣的文章候选集合，集合大小：上千级别。排序即对候选集合中的文章进行用户相对的模型结果排序，生成一个排序列表。
  - 召回
  - 排序
    - 点击率预估模型
    - 特征处理、模型评价

推荐业务层：通过对外提供rpc接口来实现推荐业务的接入
- Feed流推荐：今日推荐场景，用户可以在这些页面中不断下拉刷新

转载地址：http://jvxp.baihongyu.com/

你可能感兴趣的文章

Mysql学习总结（48）——MySql的日志与备份还原

Mysql学习总结（49）——从开发规范、选型、拆分到减压

Mysql学习总结（4）——MySql基础知识、存储引擎与常用数据类型

Mysql学习总结（50）——Oracle，mysql和SQL Server的区别

Mysql学习总结（51）——Linux主机Mysql数据库自动备份

Mysql学习总结（52）——最全面的MySQL 索引详解

Mysql学习总结（53）——使用MySql开发的Java开发者规范

Mysql学习总结（54）——MySQL 集群常用的几种高可用架构方案

Mysql学习总结（55）——MySQL 语句大全再温习

Mysql学习总结（56）——MySQL用户管理和权限设置

Mysql学习总结（57）——MySQL查询当天、本周、本月、上周、本周、上月、距离当前现在6个月数据

Mysql学习总结（58）——深入理解Mysql的四种隔离级别

Mysql学习总结（59）——数据库分库分表策略总结

Mysql学习总结（5）——MySql常用函数大全讲解

Mysql学习总结（60）——并发量大、数据量大的互联网业务数据库设计规范总结

Mysql学习总结（61）——MySQL优化之DBA级优化整理汇总

Mysql学习总结（62）——MySQL连接com.mysql.jdbc.exceptions.jdbc4.CommunicationsException: Communications link问题

Mysql学习总结（63）——Mysql数据库架构方案选择与分析

Mysql学习总结（64）——Mysql配置文件my.cnf各项参数解读

Mysql学习总结（65）——项目实战中常用SQL实践总结