-
伴鱼基于 Flink 构建数据集成平台的设计与实现
A data warehouse is a subject-oriented, integrated, nonvolatile, and time-variant collection of data in support of management’s decisions. —— Bill Inm ....- 1年前
-
贝壳找房 | Flink 运维体系在贝壳的实践
来源： 何巨放 贝壳找房 稿 1. 背景 Flink作为新一代的实时计算引擎在贝壳越来越多的应用场景下被应用，比如实时指标、实时ETL、实时监控等。目前贝壳内部线上运行中Flink任务已经超过4K，日均处理数据量万亿级。如何提升大规模Flink任务的稳定性、资源利用率、运维效率是一个有挑战的问题。本 ....- 1年前
-
-
圣诞雪花js特效代码
先引入jquery，然后放上js代码就行了 <!DOCTYPE html> <html> <head> <meta charset="utf-8"> <script type="text/ja...- 1年前
-
九章云极 DataCanvas 荣获“2021 真榜•中国最具价值创新企业榜单”
近日，铅笔道发布了“2021真榜•中国最具价值创新企业榜单”，九章云极DataCanvas作为国内领先的AI基础软件提供商，凭借在数据科学领域不断的创新应用以及企业健康快速的发展成功入选“企业服务最具投资价值TOP30”。 [图片] 图片来源：铅笔道 本次榜单坚持以数据为依据、事实为标准，调研周期约 ....- 1年前
-
数据分析技术：数据差异的显著性检验
数据差异的显著性检验是数据分析的重要技术之一。然而，如何正确选择检验方法是很多初学者困惑和容易出现错误的地方。下面为大家总结一下数据差异显著性检验的方法及适用范围。- 1年前
-
3000字！5大SQL数据清洗方法！
公司的业务数据一般存储在数据仓库里面，数据量很大，主要用的是HiveSQL和MySql做处理。 基于此，写了一个常用数据清洗的SQL对比版，脚本很简单，重点是这些清洗场景和逻辑，大纲如图： 1、…- 1年前
-
数据达人养成记
文 | 谢佳标 近年来，身边越来越多朋友跟我请教，如何快速成长为数据分析人员。其实学习没有捷径，如何合格的数据分析人员，让我们先看摘自《数据科学实战》一书中的关于数据科学技能与自我认知的主要元素： 可见要想成为合格的数据分析师，我们需要具备一定的数学、统计学、计算机能力，还需要具备以下的数据处理、建模、可视化等扩展能力。 还需要熟练掌握一门工具，能将你的想法…- 1年前
-
美团点评前端无痕埋点实践
构建一个数据平台，大体上包括数据采集、数据上报、数据存储、数据计算以及数据可视化展示等几个重要的环节。其中，数据采集与上报是整个流程中重要的一环，只有确保前端数据生产的全面、准确、及时，最终产生的数据结果才是可靠的、有价值的。 为了解决前端埋点的准确性、及时性、开发效率等问题，业内各家公司从不同角度，提出了多种技术方案，这些方案大体上可以归为三类： 第一类是…- 1年前
-
复杂网络分析之数据准备篇
作者：邓旭东HIT 关系图之原始数据 我给大家编了下面两组原始数据，试图画出abcd四元素之间的关系 nodes_data = [‘a’, ‘b’, ‘c’, ‘d’] raw_data = [‘acW’, ‘aca’, ‘caE’, ‘ec’, ‘cd’, ‘dc’] 我们做关系网络前的最初始数据最好就是上面这样子，这种数据格式还是比较简单的。 nodes…- 1年前
-
为什么做了那么多的数据分析，还是无法让产品成功？
在这样一个「数据驱动」的时代，很多产品团队都选择在产品早期就引入或搭建数据分析平台，并希望能够通过数据驱动产品的快速成长，但即便如此，大多数的初创企业还是难逃失败的厄运。除去战略、经营等导致企业死亡的情况，数据分析的「深度不够」也是让产品铩羽的重要原因——大多数企业构建的数据分析平台仅仅能看一些统计指标——而这并不足以指导产品改进，并使之走向成功！ 01、产…- 1年前
-
淘系技术 | 端智能技术体系概述
相比云侧智能，端智能具有低延时、保护数据隐私、节省云端计算资源等显著优势。 背景 近年来，以深度学习为代表的新一代人工智能技术得到了快速发展和广泛应用，模型训练和模型推断基本都在云侧完成。但随着移动设备算力的提升、模型压缩技术的成熟，模型推断在终端设备运行成为可能，端智能（On-Device AI） ....- 1年前
-
TDM 到二向箔：阿里妈妈展示广告 Match 底层技术架构演进
作者：日涉、卓立、谨持 ▐ 1. 背景 随着整个互联网行业的发展，各大互联网公司作为服务提供商，积累了越来越多能够服务用户的优质内容，如电商领域的各类商品、视频领域丰富的视频、直播等。而随着信息量的爆炸，算法技术作为连接内容和用户的桥梁，在服务质量的提升上发挥着至关重要的作用。随着业界在搜索、推荐、 ....- 1年前
-
网易严选实时计算平台建设实践
[图片] 分享嘉宾：王杰瑞 (前)网易 资深服务端研发 编辑整理：宋灵城 出品平台：DataFunTalk 导读： 网易严选作为一家品牌电商，对数据实时驱动业务有较高要求。在严选，实时计算被广泛应用在实时数仓、风控、业务监控等场景中。本文将分享网易严选实时计算平台的建设思路和实践，并介绍平台后续的一 ....- 1年前
-
普渡大学李攀：好的图表示到底是什么？
[图片] 分享嘉宾：李攀博士 普渡大学 助理教授 编辑整理：吴祺尧 加州大学圣地亚哥分校 出品平台：DataFunTalk 导读： 图数据在现实生活中无处不在，社交媒体、互联网、生物科学领域以及知识图谱中都存在它的身影。图表示学习是最近一个相对而言比较热门并且重点研究的方向。今天，我想从信息理论的角 ....- 1年前
-
58 技术 | 推荐算法在商业化场景中的探索实践
[图片] 分享嘉宾：祝凯文 58集团 算法架构师 编辑整理：陆云卓 出品平台：DataFunTalk 导读： 58招聘业务商业化流量主要集中在推荐场景，招聘业务面向的C端求职者群体广泛，B端企业招聘职位类型丰富，由于蓝领招聘具备门槛低的特点，求职者求职意向普遍跨度较大，如何基于有限的商业候选职位做好 ....- 1年前
-
AutoML之自动化特征工程
1. 引言 个人以为，机器学习是朝着更高的易用性、更低的技术门槛、更敏捷的开发成本的方向去发展，且AutoML或者AutoDL的发展无疑是最好的证明。因此花费一些时间学习了解了Au…- 1年前
-
一、PC端与WAP端共存的情况下，PC端使用如下META（注意下面的网址要改成当前页面移动端的网址）。 <!DOCTYPE html> <html> <head> <meta http-equiv="Co...
- 1年前
-
-
TensorFlow 在推荐系统中的分布式训练优化实践
美团点评技术团队 稿 美团内部深度定制的TensorFlow版本，基于原生TensorFlow 1.x架构与接口，从大规模稀疏参数的支持、训练模式、分布式通信优化、流水线优化、算子优化融合等多维度进行了深度优化。在推荐系统场景中，分布式扩展性提升10倍以上，单位算力性能也有显著提升，并在美团内部业务 ....- 1年前
-
