QQ音乐:React v16 新特性实践

欢迎大家前往 "腾讯云+社区" ,获取更多腾讯海量技术实践干货哦~ 本文由 "QQ音乐技术团队" 发表于 "云+社区专栏" 自从去年9月份 React 团队发布了 v16.0 版本开始,到18年3月刚发布的 v16.3 版本,React 陆续推出了多项重磅新特性,并改进了原有功能中反馈呼声很高的一些 ... »

初探Kafka Streams

Kafka在0.10版本推出了Stream API,提供了对存储在Kafka内的数据进行流式处理和分析的能力。 本文将从流式计算出发,之后介绍Kafka Streams的特点,最后探究Kafka Streams的架构。 ... »

腾讯冯宇彦:基于大数据与人工智能的智慧交通云

欢迎大家前往 "腾讯云+社区" ,获取更多腾讯海量技术实践干货哦~ 演讲人:冯宇彦 腾讯云交通云总经理 背景:5月23 24日,以“焕启”为主题的腾讯“云+未来”峰会在广州召开,广东省各级政府机构领导、海内外业内学术专家、行业大咖及技术大牛等在现场共议云计算与数字化产业创新发展。 腾讯云交通云总经理 ... »

腾讯聂晶:数据资产助力企业发展

欢迎大家前往 "腾讯云+社区" ,获取更多腾讯海量技术实践干货哦~ 演讲人:聂晶 腾讯云大数据应用产品总经理 背景:5月23 24日,以“焕启”为主题的腾讯“云+未来”峰会在广州召开,广东省各级政府机构领导、海内外业内学术专家、行业大咖及技术大牛等在现场共议云计算与数字化产业创新发展。 腾讯云大数据 ... »

你想知道的大数据知识都在这里

欢迎大家前往腾讯云+社区,获取更多腾讯海量技术实践干货哦~ 毋庸置疑,现如今是属于大数据(Big Data)的,革命性的时代。从社交媒体到企业,每时每刻都在产生大量的数据。无所作为,从而把这样的宝藏白白浪费掉是及其愚蠢的。企业已经学会了收集大数据以获取更高的利润,并提供更好的服务以及更深入地了解其目 ... »

搭建Hadoop完全分布式

Centos7搭建hadoop完全分布式 虽然说是完全分布式,但三个节点也都是在一台机器上。拿来练手也只能这样咯,将就下。效果是一样滴。这个我自己都忘了步骤,一起来回顾下吧。 必备知识: Linux基本命令 vim基本命令 准备软件: VMware Workstation Pro Xshell(方便 ... »

从架构特点到功能缺陷,重新认识分析型分布式数据库

本文是分布式数据库的总纲文章的第一部分,列举了三类不同技术方案(MPP/Hadoop/Mesa),主要探讨分析性分布式数据库的发展和技术差异;后续的第二部分则是交易性数据库的一些关键特性分析。Ivan开始计划的分布式数据库是不含分析场景的,所以严格来说本篇算是番外篇,后续待条件具备将以独立主题的方式... ... »

MapReduce的架构及原理

MapReduce是一种分布式计算模型,是Hadoop的主要组成之一,承担大批量数据的计算功能。MapReduce分为两个阶段:Map和Reduce。 一、MapReduce的架构演变 客户端向JobTracker提交一个作业,JobTracker会把这个作业拆分成多份,然后分配给TaskTrack ... »

Apache 流框架 Flink,Spark Streaming,Storm对比分析(一)

本文由 网易云 发布。 1.Flink架构及特性分析 Flink是个相当早的项目,开始于2008年,但只在最近才得到注意。Flink是原生的流处理系统,提供high level的API。Flink也提供 API来像Spark一样进行批处理,但两者处理的基础是完全不同的。Flink把批处理当作流处理中 ... »

HBase最佳实践 - 集群规划

本文由 网易云 发布。 作者:范欣欣 本篇文章仅限本站分享,如需转载,请联系网易获取授权。 HBase自身具有极好的扩展性,也因此,构建扩展集群是它的天生强项之一。在实际线上应用中很多业务都运行在一个集群上,业务之间共享集群硬件、软件资源。那问题来了,一个集群上面到底应该运行哪些业务可以最大程度上利 ... »

玩转数据产品设计-小屏幕下的大数据

本文由 网易云 发布。 作者:魏辛逸(本篇文章仅限知乎内部分享,如需转载,请取得作者同意授权。) 在一些工作场合中,可能会发现这样一个场景: 老板甩了一份报表给视觉设计师,让他转换成一张美观的数据展示图方便做报告,看着这一堆数字,设计师犯了难,你让我对三五个数据进行艺术加工和表达没有问题,如何处理这 ... »

数据分析怎么更直观?十分钟构建数据看板

本文由 网易云 发布。 作者:王文开(本篇文章仅限知乎内部分享,如需转载,请取得作者同意授权。) 要说整车厂的核心业务是什么,说白了就是两个:一个是造车,一个是卖车;我今天想来聊一聊卖车,也就是整车厂的销售业务。 目前中国的汽车销售模式都是通过经销商的(暂时不考虑那些垂直的汽车电商,不是本文的重点) ... »

创蓝万数有哪些大数据技术接口?

一、空号检测:借助电信三大运营商数据接口,批量检测号码是否为空号或者无效号码。 二、防薅羊毛和全景风控:通过调用注册的手机号码的相关数据,包括流量、设备指纹、通话记录、通讯录信息、IP地址、地理位置、购物信息、APP下载信息等,利用算法筛选出羊毛党号和非羊毛党号,有效防御羊毛党。 三、银行四要素:调 ... »

BigData-‘基于代价优化’究竟是怎么一回事?

本文由 网易云 发布。 本文具体讨论了Join基础算法的一种优化方案 – Runtime Filter,在本文最后还引申地聊了聊谓词 下推技术。同时,在本文文章开头,笔者引出了两个问题,SQL执行引擎如何知晓参与Join的两波数据集大小?衡量两波数据集 大小的是物理大小还是纪录多少抑或两者都有?这关 ... »

Amazon新一代云端关系数据库Aurora(上)

本文由 网易云 发布。 在2017年5月芝加哥举办的世界顶级数据库会议SIGMOD/PODS上,作为全球最大的公有云服务提供商,Amazon首次系统的总结 了新一代云端关系数据库Aurora的设计实现。 Aurora是Amazon在2014 AWS re:Invent大会上推出的一款全新关系数据库, ... »

2017年网易有数用户定位和产品能力

本文由 网易云 发布。 一、商业智能行业分析 根据Gartner、Tableau等发布的行业权威报告,2017年BI行业的发展是:业务人员自助分析、可视化探索、产品的灵活+易用性 1、商业智能和分析平台市场的主流已经从IT主导分析报表转向商业主导分析 2、基于可视的探索模式已成为主流 3、市场对灵活 ... »

双11背后的黑科技:大数据实时计算如何为你量身定制?

本文由 网易云 发布。 数据时代,大数据计算已经渗透到了各行各业,业务沉淀数据,数据计算产生新的业务价值,大数据计算正不断地用这种方式推动业务向前发展。电商双11,商家与消费者狂欢的背后,同样离不开大数据计算带来的价值贡献,特别是应用越来越广泛的“实时计算”。 现实世界中,数据连续产生,并被实时采集 ... »

零基础大数据入门教程:Java调用阿里云短信通道服务

这里我们使用SpringBoot 来调用阿里通信的服务。 阿里通信,双11.收到短信,日发送达6亿条。保障力度非常高。 使用的步骤: 1.1. 第一步:需要开通账户 1.2. 第二步:阅读接口文档 1.2.1. 秘钥管理 1.2.2. 短信签名 1.2.3. 短信模板 1.3. SDK 这个由阿里云 ... »