数据分析

今天为大家重写一个美团美食板块小爬虫，说不定哪天做旅游攻略的时候也可以用下呢。废话不多说，让我们愉快地开始吧~ 开发工具 Python版本：3.6.4 相关模块： requests模块； argparse模块； pyquery模块； jieba模块； pyecharts模块； wordcloud模块 ... »

@ 了解json整体格式 这里有一段json格式的文件，存着全球陆地和海洋的每年异常气温(这里只选了一部分)：global_temperature.json { "description": { "title": "Global Land and Ocean Temperature Anomalie ... »

从17年毕业来，一直都在干数据分析的工作。和很多转行的小伙伴一样，没有对口的科班学习，摸不清数据分析具体情况，起初充满着很多迷茫。 在刚开始的1年半中，都是自己从淘宝买些课程，最多时，网盘放了4-5T的资料，说实话只看了一点点。除了一小部分视频课程，最终的学习都是通过看书。结果还好，也算磕磕绊绊成长 ... »

复活客户分析 什么是“复活客户”？如何进行“复活客户分析”呢？今天，我们借助DataFocus系统，来了解一种简单的复活客户分析。 1、何为复活客户 复活客户，指客户在规定的时间段之前有至少一次消费行为，且在N日内没再有任何消费行为，成为流失客户，而在规定的时间段内又发生了消费行为，这类客户则为在该 ... »

如果你比较熟悉JavaWeb应用开发，那么对Spring框架一定不陌生，并且JavaWeb通常是基于SSM搭起的架构，主要用Java语言开发。但是开发Spark程序，Scala语言往往必不可少。众所周知 ... »

尘归尘，土归土；基本功，见分晓。 时间过得的真快，还很清晰的记得2019年写年终总结的时候，还在试验一个人如何完成一个BI项目，在试验过程中验证《商业智能7B理论模型》的可行性。 201x年--2019年，对BI项目还处于爱好阶段。 2020年对BI及数据项目的成功已经有了一种信仰。 当对某一件事情 ... »

(Python实现疫情地图可视化) 一、 json模块 JSON（JavaScript Object Notation）是一种轻量级的数据交换格式，易于阅读和编写，同时也易于机器解析和生成，并有效地提升网络传输效率。 json.loads()：将json格式的str转化成python的数据格式； j ... »

一、简介 Apache Kylin™是一个开源的、分布式的分析型数据仓库，提供Hadoop/Spark 之上的 SQL 查询接口及多维分析（OLAP）能力以支持超大规模数据，最初由 eBay 开发并贡献至开源社区。之所以说它是国人之光，是因为它是首个由国人主导的Apache顶级开源项目，能在亚秒内查 ... »

数字营销产业链上最核心的角色就是就是受众人群，即浏览广告的用户，之所以称为受众人群，通常会把用户按照画像特点基于标签进行人群分类，根据广告的需求，可能是根据不同年龄段，地域，消费能力等各种标签。数字营销的基本就是广告主把营销内容传递到潜在的消费者，并触发用户交易动作。 ... »

前言 2020年是艰难的一年，但即使再难，也都过去了。 分析一下2020年的新闻热搜，可以大致了解网民都在关注什么。 微博热搜以娱乐为主，头条的热搜更偏向民生与时事。今天，我们先分析分析微博一整年的热搜。 数据抓取 由于微博平台不能查看历史热搜，本文所有的数据都是从云合数据旗下的一个热搜榜抓取的，具 ... »

用户画像，作为一种勾画目标用户、联系用户诉求与设计方向的有效工具，用户画像在各领域得到了广泛的应用。用户画像最初是在电商领域得到应用的，尤其在数字化营销范畴之内，核心的依赖依据就是描述用户画像的丰富标签。 ... »

推荐系统是根据用户的行为、兴趣等特征，将用户感兴趣的信息、产品等推荐给用户的系统，它的出现主要是为了解决信息过载和用户无明确需求的问题，根据划分标准的不同，又分很多种类别 ... »

聚类算法是机器学习中的一种无监督学习算法，它在数据科学领域应用场景很广泛，比如基于用户购买行为、兴趣等来构建推荐系统。核心思想可以理解为， ... »

基于标签对业务进行精准分析，从而影响运营思路和产品迭代的节奏，进而带来非常高的商业价值，但是这里需要对标签的质量进行评估，假设标签的覆盖场景非常低，而且准确度低，同样也会反向影响业务。 ... »

标签特点：精确描述定位和搜索，具有生命周期的特性，可以计算，配置和规则化处理。可以用标签来描述各种结构和非结构化[文档、图片、视频等]的数据，从而使这些内容被高效的管理。 ... »

智能数字时代，数据不论形态、格式和类型，已经迅速成为企业最有战略意义的资产；数据资产已经成为了可以形成业务洞察及优势的战略资源，数据的体量、多样性和复杂性也正以指数级增长。就像其他重要的企业资产，数据需要适当的管理和治理水平,以确保它的潜在价值得到认识和发挥作用。 ... »

最近在做Python职位分析的项目，做这件事的背景是因为接触Python这么久，还没有对Python职位有一个全貌的了解。所以想通过本次分析了解Python相关的职位有哪些、在不同城市的需求量有何差异、薪资怎么样以及对工作经验有什么要求等等。分析的链路包括： 数据采集 数据清洗 异常的创建时间 异常 ... »

更多精彩内容，欢迎关注公众号：数量技术宅。想要获取本期分享的完整策略代码，请加技术宅微信：sljsz01 我们先来回顾一下，一个真实数据集的完整机器学习解决方案（上篇）提到，一个完整的机器学习工程的实现步骤： 1. 数据预处理 2. 探索性数据特征统计 3. 特征工程与特征选取 4. 建立基线 5. ... »

更多精彩内容，欢迎关注公众号：数量技术宅。想要获取本期分享的完整策略代码，请加技术宅微信：sljsz01 价差计算的“误区” 我们在测试两个或多个金融资产相互运算产生的策略信号时，免不了需要涉及将不同的价格时间序列，按照时间轴进行对齐，套利策略就是其中之一。然而，大部分介绍套利策略、统计套利类的文章 ... »

1. 漏斗分析模型 漏斗分析是一套流程式数据分析，它能够科学反映用户行为状态以及从起点到终点各阶段用户转化率情况的重要分析模型。 运营人员可以通过观察不同属性的用户群体（如新注册用户与老客户、不同渠道来源的客户）各环节转化率，各流程步骤转化率的差异对比，了解转化率最高的用户群体，分析漏斗合理性，并针 ... »