-
Cloudera 拥抱云计算,深耕企业数据云平台
所属栏目:[大数据] 日期:2021-12-18 热度:67
数据湖、数据仓库、数据中台随着大数据技术的不断更新迭代,相关概念如雨后春笋般应运而生。对于这些概念,已经有了无数篇文章去科普,可以简单的总结如下: 数据湖是一个集中的存储库,可以在其中存储超大规模的、所有结构化和非结构化数据。在数据湖中,[详细]
-
记录一次 Hbase 线上问题的分析和解决
所属栏目:[大数据] 日期:2021-12-18 热度:196
大家好,我是明哥! 本篇文章,我们回顾一次 hbase 线上问题的分析和解决 - KeyValue size too large,总结下背后的知识点,并分享一下查看开源组件不同版本差异点的方法。 希望大家有所收获,谢谢大家! 01 Hbase 简介 Hbase 作为 hadoop database, 是一款开[详细]
-
建立数据策略的六个关键组成部分
所属栏目:[大数据] 日期:2021-12-18 热度:116
现如今,每个公司都是一个由数据业务包围的企业。从跟踪库存水平的街角小店,到预测市场趋势和全球运输成本的跨国制造商,我们都在依靠数据来运行。 更准确地说,我们在使用许多类型的数据。例如,所有类型的企业都有交易、引用和客户关系的数据。我们也可[详细]
-
数据驱动的电子邮件验证至关重要的六个原因
所属栏目:[大数据] 日期:2021-12-18 热度:113
大数据在电子邮件通信的未来中扮演着非常关键的角色。越来越多的公司正在寻找更具创新性的方法来使用数据技术来简化沟通并在各个利益相关者之间建立更加个性化的关系。 大数据最重要的好处之一在于电子邮件验证。数据驱动型公司正在寻找更智能的方法来使用[详细]
-
客户数据分析对于基于客户的营销的未来很关键
所属栏目:[大数据] 日期:2021-12-18 热度:112
人们详细讨论了数据分析在营销领域的重要性。数据分析为努力提高市场份额的公司提供了许多有用的见解。 数据分析的最佳应用之一是通过增强的基于帐户的营销。有很多方法可以使用大数据来更好地了解目标客户群,这是任何营销策略的重要组成部分。 将基于客户[详细]
-
聊聊为什么 IDL 只能拓展字段而非修改
所属栏目:[大数据] 日期:2021-12-18 热度:56
本文转载自微信公众号「董泽润的技术笔记」,作者董泽润 。转载本文请联系董泽润的技术笔记公众号。 前几年业界流行使用 thrift, 比如滴滴。这几年 grpc 越来越流行,很多开源框架也集成了,我司大部分服务都同时开放 grpc 和 http 接口 相比于传统的 http1[详细]
-
数据结构与算法之合并区间,如此贪
所属栏目:[大数据] 日期:2021-12-18 热度:65
合并区间 给出一个区间的集合,请合并所有重叠的区间。 示例 1: 输入: intervals = [[1,3],[2,6],[8,10],[15,18]] 输出: [[1,6],[8,10],[15,18]] 解释: 区间 [1,3] 和 [2,6] 重叠, 将它们合并为 [1,6]. 示例 2: 输入: intervals = [[1,4],[4,5]] 输出: [[1,[详细]
-
详解数据治理有关的七个术语和名词
所属栏目:[大数据] 日期:2021-12-18 热度:62
数据元 1. 名词解释 国标[GB/T 18391.12002]对数据元的定义为:用一组属性描述定义、标识、表示和允许值的数据单元。 数据元由三部分组成:对象、特性和表示。数据元是组成实体数据的最小单元,或称原子数据。例如个人信息中,手机号为数据元,135********[详细]
-
创建数据驱动的价值生态系统的三个步调
所属栏目:[大数据] 日期:2021-12-18 热度:156
事实证明,管理大量数据和颠覆性技术的关键在于建立一个能力中心。 尽管许多企业在其数据分析项目中使用人工智能和机器语言工具作为核心推动因素,并且全球人工智能支出持续增加,但事实上,大多数数据科学项目注定要失败。 导致这些失败的原因有很多,从人[详细]
-
大数据产业新风口,运营商优势在哪里?
所属栏目:[大数据] 日期:2021-12-18 热度:148
大数据产业是以数据生成、采集、存储、加工、分析、服务为主的战略性新兴产业。工信部近日发布《十四五大数据产业发展规划》(下称《大数据规划》)提出了十四五时期的总体目标,将成为大数据产业未来发展的基[详细]
-
手把手教你绘制数据治理实行路线图
所属栏目:[大数据] 日期:2021-12-18 热度:63
数据治理成熟度评估为企业提供了一个数据治理的切入点,通过发现企业数据治理中存在的问题,找到与业界领先企业的差距,绘制出符合企业现状和需求的数据治理路线图。 一数据治理路线图概述 1、数据治理路线图的定义 什么是路线图 路线图是指描述技术变化步[详细]
-
数据解析 VS 算法模型,如何高效分工合作?
所属栏目:[大数据] 日期:2021-12-18 热度:173
数据分析该如何与算法合作,是个老大难问题。一方面是业务方日益提高的,对模型的幻想。另一方面是大量企业里存在的,数据采集差,缺少足够数据人员,工作目标不清晰等等问题。到底该如何和分析与算法协同增效?今天系统分享一下。 01两种典型的错误做法 狗[详细]
-
如何应对繁杂的数据需求?
所属栏目:[大数据] 日期:2021-12-18 热度:74
大家好,我是一哥,最近有一位数据新人小伙伴私聊我:在平时的工作中会面临着大量的数据需求,不仅多,而且杂,请问如何处理面对这些问题?有没有什么好的提高工作效率的方法? 其实不止是作为数据新人会面临这样的困境,很多数据工程师都有着这样的困惑,干[详细]
-
手把手教你对文本文件实行分词、词频统计和可视化
所属栏目:[大数据] 日期:2021-12-18 热度:69
大家好!我是Python进阶者。 前言 前几天一个在校大学生问了一些关于词频、分词和可视化方面的问题,结合爬虫,确实可以做点东西出来,可以玩玩,还是蛮不错的,这里整理成一篇文章,分享给大家。 本文主要涉及的库有爬虫库requests、词频统计库collections[详细]
-
数据匹配在大数据业务战略中的用途
所属栏目:[大数据] 日期:2021-12-18 热度:148
在整合大数据的同时设计业务战略时,数据匹配和质量的作用势在必行。在这篇文章中阅读更多内容。 尽管大数据分析听起来很有希望,但公司对其数据的期望与现实之间仍然存在巨大差距。在公司喜欢大数据但缺乏有效使用大数据的策略的文章中,哈佛商学院分享了[详细]
-
在大数据时代,想成为赢家,关键要认清这八大发展趋向
所属栏目:[大数据] 日期:2021-12-18 热度:137
随着信息技术的发展,人们不仅交流也变得很密切,连日常生活也越来越方便,而促成这一切变化的产物,正是大数据。 大数据可以快速流通,也能对庞大的数据进行处理,并对有价值的数据进行归纳,检索,此外,它的应用范围广泛,在未来,大数据将会对经济发展[详细]
-
需要避开的七个数据治理错误
所属栏目:[大数据] 日期:2021-12-18 热度:169
如今的每个数据交易都是一种商业交易,这是构建一个强大、安全、适应性强且尽可能无错误的数据治理框架至关重要的原因。 大多数首席信息官都知道,处理不当的数据可能会导致财务、声誉、法律和其他问题。这就是企业需要拥有强大的数据治理策略的原因,也就[详细]
-
数据仓库具体介绍之数据质量理论与经验
所属栏目:[大数据] 日期:2021-12-18 热度:114
数据质量管理是对数据从计划、收集、记录、存储、回收、分析和展示生命周期的每个阶段里可能引发的数据质量问题,进行识别、度量、监控、预警等一系列管理活动,并通过改善和提高组织的管理水平使得数据质量获得进一步提高。数据质量管理的终极目标是通过可[详细]
-
浅析大数据即席搜查工具 Presto
所属栏目:[大数据] 日期:2021-12-18 热度:166
数据业务现状 随着业务数据量越来越大、数据任务越来越多以及数据计算类型越来越丰富,G行的原有以Hadoop、MPP为核心的数据平台现有组件表现出了一定的局限性。例如:大数据平台和数据仓库上任务总量已经达到了3万以上,而且还在急剧增长。由于数据存放在了[详细]
-
数据分析八大模型 细说PEST模型
所属栏目:[大数据] 日期:2021-12-18 热度:97
大家好,我是爱学习的小xiong熊妹。 上一篇为大家分享了行业分析的基本做法(一文看懂:行业分析怎么做?),很多小伙伴在问:有没有个分析模型可以用?今天介绍一个行业分析的业务模型:PEST模型。 一、什么是PEST PEST是指影响行业发展的四个关键因素: 政策([详细]
-
数据驱动决定的三个层级,你在哪一级?
所属栏目:[大数据] 日期:2021-12-18 热度:113
很多同学总好奇:数据分析要怎么做,才能驱动决策?天天总听人说:数据驱动,可现实中没见过,只见过自己写的报告石沉大海 今天结合一个具体案例讲解一下,到底如何做。话不多说,直接上场景。 问题场景:某二手交易平台,其中旧货回收环节,需要人工话务员[详细]
-
盘查十三种流行的数据处理工具
所属栏目:[大数据] 日期:2021-12-18 热度:81
数据分析是对数据进行摄[详细]
-
浅谈区块链与大数据的关系
所属栏目:[大数据] 日期:2021-12-18 热度:96
随着数字经济的发展,区块链的价值逐渐凸显,区块链和大数据确保了数据的安全性,还可以防止数据泄露,一旦信息存储在链上,就需要有多个权限来访问数据。通过可伸缩性,区块链允许以更平静的方式共享数据。 大数据分析对于跟踪交易和让使用区块链的企业作[详细]
-
一文读懂云计算、大数据和AI间的关系和差别
所属栏目:[大数据] 日期:2021-12-18 热度:149
相信大家都听说过云计算、大数据和人工智能,并且它们之间好像互相有关系:一般谈云计算的时候会提到大数据、大数据的时候会提人工智能、谈人工智能的时候会提云计算三者之间相辅相成又不可分割,那么这三者之间到底是怎么一回事呢,今天小编就来讲讲。 云[详细]
-
嵌入式算法之大数据变长存储计算方法
所属栏目:[大数据] 日期:2021-12-18 热度:186
应用场景 对于高精度采样结果,其数值最大可能需要3字节,最少1字节,采用标准C的基础数据类型,U16太小无法满足需求,U32则浪费内存。当样本量很大时,其占用的空间问题便突显出来。能否采用变长数据类型存储呢?对小数据采用U8,大数据采用U32,随着数值大[详细]