-
数据可视化：手把手打造BI
所属栏目：[大数据] 日期：2020-12-31 热度：76
副标题#e# 本文是 如何七周成为数据分析师 的第六篇教程，如果想要了解写作初衷，可以先行阅读七周指南。温馨提示：如果您已经熟悉BI，大可不必再看这篇文章，或只挑选部分。 我们上一篇数据可视化：教你打造升职加薪的报表教大家如何制作清晰美观的报表以[详细]
-
下一代大数据处理平台Apache Beam成为Apache顶级项目
所属栏目：[大数据] 日期：2020-12-31 热度：85
副标题#e# Apache软件基金会在2017年01月10正式宣布Apache Beam从孵化项目毕业，成为Apache的顶级项目 Apache Beam(原名Google DataFlow)是Google在2016年2月份贡献给Apache基金会的Apache孵化项目，被认为是继MapReduce，GFS和BigQuery等之后，Google在大[详细]
-
26、Power Query-日期与时间数据处理实例（统计出某年各月各周的
所属栏目：[大数据] 日期：2020-12-31 热度：178
本节重点：Power Query-日期与时间数据处理实例（统计出某年各月各周的借书人数） 需求如下： 上图所示，根据左侧的数据源，统计出2016年各月各周的借书人数（效果如右侧所示）。 分析：很明显，这个需求是对日期的一个操作，其实仅需要用到左侧的第一列即[详细]
-
![[bigdata-028]apache nifi 从mysql导出数据到hbase](/uploads/allimg/c190930/15ETM5CT50-132Y.gif)
[bigdata-028]apache nifi 从mysql导出数据到hbase
所属栏目：[大数据] 日期：2020-12-31 热度：137
0.在hbase节点，启动thrift服务 hbase-daemon.sh start thrift 1. 在本机启动nif ./bin/nifi.sh start 2. 在浏览器输入http://localhost:8080/nifi，看到nifi的界面 3. 拖一个processor ExecuteSQL到界面 ??? 3.1 在processor上点击右键，选择configure，[详细]
-
27、Power Query-日期与时间数据处理实例（图书室借书统计）
所属栏目：[大数据] 日期：2020-12-31 热度：67
本节要点：Power Query-日期与时间数据处理实例（图书室借书统计） 承接上一节的需求，我们引入切片器的功能，对图书室的借书以及归还情况进行查询和筛选，效果图如下： 对“借书状态”和“归还状态”进行筛选，亦可同时筛[详细]
-
[bigdata-029] 在centos 7上安装maria
所属栏目：[大数据] 日期：2020-12-31 热度：197
centos 7以上版本支持mysql的另一个分支maria 安装方式如下 正确安装mariadb http://blog.csdn.net/default7/article/details/39138139 http://blog.csdn.net/default7/article/details/41973887 yum install mariadb* service mariadb.service start syst[详细]
-
从小程序的理念，挖掘小程序的方方面面
所属栏目：[大数据] 日期：2020-12-31 热度：73
副标题#e# 小程序发布已过去3天，这个微信放的大招让整个互联网圈高潮了一把。目前业界已有各种小程序的分析和预测，也有很多诸如小程序解放了内存、小程序没用的声音。本文挖掘小程序背后表现出的理念，借这些理念阐述我对小程序的看法，适合的应用、与APP[详细]
-
[bigdata-030] cdh 5.9的impyla操作hiveserver2
所属栏目：[大数据] 日期：2020-12-31 热度：198
参考文献：http://www.aichengxu.com/view/11094184 1. cdh 5.9 2. 开发机已经安装了impyla pip install thrift_sasl pip install sasl 3. 在cdh集群的一个节点启动hiveserver2 3.1 修改/etc/hive/conf.cloudera.hive/hive-site.xml 增加属性 property ? n[详细]
-
HDU 2054 判断大数是否相等
所属栏目：[大数据] 日期：2020-12-31 热度：117
原题链接：http://acm.hdu.edu.cn/showproblem.php?pid=2054 题解：这个题不严谨，仅判断后向0就行，而且不用判正负。 代码： #includeiostreamusing namespace std;const int maxn = 100000;void cleanlastzero(char str[]) { int len = strlen(str),digi[详细]
-
51 Nod 1028 大数乘法 V2 NTT 学习
所属栏目：[大数据] 日期：2020-12-31 热度：189
题意：求两个大数的乘积 解题方法：之前已经用FFT做过了，今天学习一下NTT，记录一下模板。 先所以下NTT，具体的讲解可以看见这里 为了避免FFT在复数和浮点运算中出现精度问题，所以在某些情况下使用NTT。记录一下NTT的模板，其实和FFT很多一样。对了这个[详细]
-
一份价值百万的大数据分析报告如何炼成？
所属栏目：[大数据] 日期：2020-12-31 热度：182
作者 | 江颖 大数据文摘欢迎各类优质稿件 请联系tougao@bigdatadigest.cn 序 曾经，咨询公司一份报告就能收取企业几十万、甚至于上百万。而今，矫枉过正，数据分析报告却常常被企业认为没有任何实际价值。我经常和企业交流，他们告诉我，需要的是能够为他[详细]
-
什么是AI,叫人工智能,和BI,商业智能有什么区别
所属栏目：[大数据] 日期：2020-12-31 热度：69
人工智能(Artificial Intelligence) ，英文缩写为AI。它是研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门新的技术科学。 人工智能是计算机科学的一个分支，它企图了解智能的实质，并生产出一种新的能以人类智能相似的方式做出[详细]
-
7本书从小工到数据分析专家
所属栏目：[大数据] 日期：2020-12-30 热度：178
帮助您的书学数据分析的基础知识，并接近成为在数据分析方面的专家。 在过去的几年里，我读了相当数量的书籍上的数据分析，确定了七个，在我看来，其中最好的。一起，这些书的研究数据分析的基[详细]
-
浅谈大数的进制转换
所属栏目：[大数据] 日期：2020-12-30 热度：176
http://www.voidcn.com/article/p-fpnokpkx-yn.html http://www.cnblogs.com/bhlsheji/p/5104558.html http://www.cnblogs.com/phinecos/archive/2009/09/11/1564975.html[详细]
-
Algorithm学习笔记 --- 寻找 K 大数
所属栏目：[大数据] 日期：2020-12-30 热度：62
Q： 给你一个无序的序列，要你找出第K大的数是什么？ Answer： Answer 1： 利用Hash，桶排序等方式，是第一个想到的（编程珠玑中所记） 假设数列中最大数为max，最小数为min，那么首先做一个数组长度为max – min + 1， 然后做散列函数为an – min，对于冲[详细]
-
[bigdata]小象幫幫忙，Hadoop 能幫什麼忙？
所属栏目：[大数据] 日期：2020-12-30 热度：118
https://dotblogs.com.tw/rickyteng/2012/12/11/85556 [bigdata]小象幫幫忙，Hadoop 能幫什麼忙？ Hadoop 文獻探討 微軟巨量資料策略轉向，全面支援Hadoop http://www.ithome.com.tw/itadm/article.php?c=77576 微軟表示，全面支援 Apache Hadoop，這消息[详细]
-
资讯 |大数据统计分析教学培训班（第二轮通知）
所属栏目：[大数据] 日期：2020-12-30 热度：162
大数据统计分析教学培训班 暨首届高校青年教师统计教学创新研讨会 第二轮通知 尊敬的老师和同学，您好！ 自此次培训班/研讨会第一轮通知发出至今，得到了广大青年教师、研究生与高年级本科的积极响应，来信或来电咨询，报名踊跃。今天再发一次通知，对培训[详细]
-
[bigdata-015] apache nifi 官方文档摘要
所属栏目：[大数据] 日期：2020-12-30 热度：82
1NIFI概览|NIFIOverView 1.1NIFI是什么|Whatis Apache NIFI NIFI的设计目标，是让各系统之间自动进行数据流交换。企业通常有多个系统，有的系统生产数据，有的系统消费数据。dataflow。 dataflow涉及到的主要问题： 系统失效：网络失效，硬盘失效，软件崩[详细]
-
pyhive 连接 Hive 时错误
所属栏目：[大数据] 日期：2020-12-26 热度：116
一、User: xx is not allowed to impersonate xxx' 解决办法：修改 core-site.xml 文件，加入下面的内容后重启 hadoop。 property namehadoop.proxyuser.xx.hosts/name value*/value/propertyproperty namehadoop.proxyuser.xx.groups/name value*/value/p[详细]
-
分布式基础通信协议：paxos、totem 和 gossip（转载）
所属栏目：[大数据] 日期：2020-12-26 热度：185
背景： 在分布式中，最难解决的一个问题就是多个节点间数据同步问题。为了解决这样的问题，涌现出了各种奇思妙想。只有在解决了如何进行信息同步的基础之上才衍生出形形色色的应用。这里开始介绍几种分布式通信协议。 简单即有效——totem协议: totem协议[详细]
-
Hive 导入 parquet 格式数据
所属栏目：[大数据] 日期：2020-12-26 热度：55
Hive 导入 parquet 数据步骤如下： 查看 parquet 文件的格式 构造建表语句 倒入数据 一、查看 parquet 内容和结构 下载地址 社区工具 GitHub 地址 命令 查看结构： java -jar parquet-tools-1.6.0rc3-SNAPSHOT.jar schema -d activity.201711171437.0.parq[详细]
-
Presto 常用配置及操作
所属栏目：[大数据] 日期：2020-12-26 热度：83
一、介绍 Presto是一个开源的分布式SQL查询引擎，适用于交互式分析查询，数据量支持GB到PB字节。 Presto的设计和编写完全是为了解决像Facebook这样规模的商业数据仓库的交互式分析和处理速度的问题。 推荐阅读 Presto实现原理和美团的使用实践 二、安装 2.[详细]
-
大数据的技术生态概述（转载）
所属栏目：[大数据] 日期：2020-12-26 热度：136
副标题#e# 如何用形象的比喻描述大数据的技术生态？Hadoop、Hive、Spark 之间是什么关系？ 大数据本身是个很宽泛的概念，Hadoop生态圈（或者泛生态圈）基本上都是为了处理超过单机尺度的数据处理而诞生的。你可以把它比作一个厨房所以需要的各种工具。锅碗[详细]
-
九种常见的数据分析模型
所属栏目：[大数据] 日期：2020-12-26 热度：122
副标题#e# 1. 漏斗分析模型 漏斗分析是一套流程式数据分析，它能够科学反映用户行为状态以及从起点到终点各阶段用户转化率情况的重要分析模型。 运营人员可以通过观察不同属性的用户群体（如新注册用户与老客户、不同渠道来源的客户）各环节转化率，各流程[详细]
-
大数据领域常用技术栈
所属栏目：[大数据] 日期：2020-12-26 热度：70
副标题#e# 提起大数据，不得不提由IBM提出的关于大数据的5V特点：Volume（大量）、Velocity（高速）、Variety（多样）、Value（低价值密度）、Veracity（真实性），而对于大数据领域的从业人员的日常工作也与这5V密切相关。大数据技术在过去的几十年中取得[详细]
浙公网安备 33038102330434号