摘要： 本文整理自云邪、雪尽在 Flink Forward Asia 2020 的分享，该分享以 4 个章节来详细介绍如何利用 Flink SQL 构建流批一体的 ETL 数据集成， 文章的主要内容如下： 数据仓库与数据集成 数据接入(E) 数据入仓/湖(L) 数据打宽(T) 数据仓库与数据集成 [ ....

沈磊@有赞 Flink 中文社区 摘要： 今天主要分享的内容是 Flink 在有赞的实践和应用。 一、Flink 的容器化改造和实践 1. 有赞的集群演进历史 2014 年 7 月，第一个 Storm 任务正式上线； 2016 年，引入 Spark Streaming， 运行在 Hadoop Yar ....

作者： 梁尔舒 本文经授权转载，转载请联系原作者 序言 良好的用户体验是业务持续增长的基础，而稳定性又是服务的基石。试想如果用户在商城购物时发现展位白屏，用户在搜索框搜索时，3 秒后才返回结果，首先用户侧必然造成极差的用户体验，进而流失客户同时带来直接的企业损失。从产研侧，服务不稳定别说去“追求卓越 ....

[图片] 高丙寅 淘系技术 导读 上海外滩建筑群包括古典主义风格的亚细亚大楼（1915 年），英国古典式的上海总会大楼（1911 年），欧洲古典折中主义的海关大楼（1925 年），仿意大利文艺复兴风格的汇中饭店大楼（1906 年）等，这些建筑历经百年风雨，仍巍然屹立固若堡垒，保持其原本风貌，让今人得 ....

0. 导语 本论文题为《Real-time Attention based Look-alike Model for Recommender System》，作者 Yudan Liu, Kaikai Ge, Xu Zhang, Leyu Lin，已被 KDD 19 接收，原文见附录。 Look-al ....

文末彩蛋：七月在线干货组最新升级的《名企 AI 面试 100 题》免费送！ 问题 1 ：讲一下 xgb 与 lgb 的特点与区别 xgboost 采用的是 level-wise 的分裂策略，而 lightGBM 采用了 leaf-wise 的策略，区别是 xgboost 对每一层所有节点做无差别分裂 ....

作者： 翟佳@Pulsar 摘要： StreamNative 联合创始人翟佳在本次演讲中介绍了下一代云原生消息流平台 Apache Pulsar，并讲解如何通过 Apache Pulsar 原生的存储计算分离的架构提供批流融合的基础，以及 Apache Pulsar 如何与 Flink 结合，实现批 ....

桑强 2018 年 11 月 5 日 [图片] 目录 背景 2 设计目标 2 2.1 用户交互的产品功能 2 2.2 后台调度功能 3 2.3 任务执行器功能 4 2.4 任务运维功能 5 2.5 平台对外功能 6 平台价值 7 平台建设 7 4.1 用户功能实现说明 8 4.2 调度周期设计说明 ....

摘要： 本文由快手实时计算负责人董亭亭分享，主要介绍快手基于 Flink 的持续优化与实践的介绍。内容包括： Flink 稳定性持续优化 Flink 任务启动优化 Flink SQL 实践与优化 未来的工作 一、Flink 稳定性持续优化 第一部分是 Flink 稳定性的持续优化。该部分包括两个方面 ....

Next Scientist 是一个专门帮助博士生获取并保持动力、实现毕业和指导在业界求职的网站。本文作者 Julio Peironcely 就是 Next Scientist 的创始人和编辑，曾在荷兰莱顿大学的 PhD 期间做代谢组学和代谢产物鉴定的研究。在这篇文章中，Julio 结合自己的亲身经 ....

零售通是阿里巴巴 B 类事业群针对线下零售店推出的解决方案，通过与品牌商、本地经销商紧密合作，为零售店提供品质好货，升级社区零售店的便民服务能力，肩负着“共建智能分销平台”和“让百万小店拥抱 DT 时代”的重要使命。在这种 B2b2c 新型的分销模式中，智能导购推荐不仅提供一站式 APP 进货方式， ....

[图片]

作者：Robbe Sneyders 编译：ronghuaiyang 给大家介绍一下如何在生产中部署基于嵌入的机器学习模型。 由于最近大量的研究，机器学习模型的性能在过去几年里有了显著的提高。虽然这些改进的模型开辟了新的可能性，但是它们只有在可以部署到生产应用中时才开始提供真正的价值。这是机器学习社区 ....

作者：Mihajlo Grbovic 编译：ronghuaiyang 英文原文：https://medium.com/airbnb-engineering/listing-embeddings-for-similar-listing-recommendations-and-real-time-per ....

网易游戏资深开发工程师林小铂为大家带来网易游戏基于 Flink 的流式 ETL 建设的介绍。内容包括： 业务背景 专用 ETL EntryX 通用 ETL 调优实践 未来规划 一。 业务背景 网易游戏 ETL 服务概况 网易游戏的基础数据主要日志方式采集，这些日志通常是非结构化或半结构化数据，需要经 ....

文章摘要：借用小厮的一句话“消息队列的本质在于消息的发送、存储和接收”。那么，对于一款消息队列来说，如何做到消息的高效发送与接收是重点和关键 一、RocketMQ 中 Remoting 通信模块概览 RocketMQ 消息队列的整体部署架构如下图所示：[图片]先来说下 RocketMQ 消息队列集群 ....

[图片] 文章作者：阿里 B2B 算法团队 内容来源：牛技 出品平台：DataFun 背景 以电商场景优化用户点击为例，推荐系统的任务是从海量的候选商品中选出用户最感兴趣且最可能点击的商品。为了提升检索的效率，通常分为两阶段来检索。召回/候选生成（Matching/Candidate Generat ....

深度语义匹配模型系列文章会向大家介绍几种经典的表示型和交互型模型原理及其优缺点，同时后续的实践篇将会介绍匹配模型在智能客服中的实践应用。 一、背景 工业界的很多应用都有在语义上衡量本文相似度的需求，直接目标就是判断两句话是否表达了相同或相似意思，我们将这类需求统称为“语义匹配”，nlp 中的许多任务 ....

工作岗位：调度算法工程师、运营数据算法工程师（搜索推荐） 工作地点：杭州、西安 [图片] 简历投递：haoxuetong@huawei.com