tiktok是国际版的抖音。Tik Tok在海外一通乱杀，超越youtubo，让Facebook害怕，从中国走出去的APP正走在征服欧美和世界的路上。 说起Tik Tok，大家都不陌生，这是从中国走出去的APP，海外版抖音。Tik Tok出海后，迅速赢得了海外用户的喜欢，而在今年...
1、数据结构：数据仓库只能存储经过处理和提炼的数据，而数据湖存储尚未出于某种目的处理的原始数据。因此，数据湖需要比数据仓库大得多的存储容量，且数据灵活、分析迅速，非常适合机器学习。2、加工：数据仓库使用写入时序模式的方法来处理数据以赋予其形状...
痛点： 如今数字化转型，已成为企业界的共识。 从信息时代走向数字时代，大家都希望在生产要素、经济形态发生变革的节点抓住机遇不被淘汰，而绝大多数中小企业又没有财力搞得太折腾太复杂。因此大家不要期待一口气吃成胖子，而要抓...
安装Hadoop的方法如下：首先在命令行输入以下代码mkdir/opt/bigdata tarxfhadoop-2.6.5.tar.gz-C/opt/bigdata/ cd/opt/bigdata/ ln-sfhadoop-2.6.5hadoop详细过程[root@node01~]#mkdir&nb...
1：单任务Azkaba内置的任务类型支持command、javaroot@leco:/home/leco#catfoo.job type=command command=echofoo root@leco:/home/leco#zipfoo.zipfoo.job updating:foo.job(deflated13%...
第一步：包准备 首先我们先将Azkaban Web服务器、Azkaban执行服务器和MySQL统一拷贝到虚拟机/usr/local/src/azkaban目录下，具体的命令如下：[root@masterzkaban]#ll|awk'{print$NF}' 98600 azkaban-executor-server-2.5.0....
工作流调度系统一个完整的数据分析系统大都是由海量的任务单元组成shell脚本程序，java，mapreduce程序、hive脚本等等组成，非常复杂，各任务单元之间存在时间先后及前后依赖关系。为了很好地组织起这样的复杂系统，能够按照计划执行，就必须要一个工作流调度...
1. 环境准备¶IP主机名安装的软件192.168.71.133node01JDK Hadoop192.168.71.134node01JDK Hadoop192.168.71.135node03JDK Hadoop192.168.71.136node04JDK Hadoop基于centos7系统使用Vmware虚拟机，选择NAT网络模式2. 准备¶name="node04" ...
Cloudera Manager属于Cloudera数据平台CDP其中的组件。cdhmanager是管理CDH集群的端到端应用程序，cdhmanager通过提高服务性能，增强服务质量，并且能够降低管理成本和提高合规性来提供对CDH集群每个部分的可见性和控制。 cdhmanager的特点 自...
CDH是Cloudera公司发行的，本身是100%开源的平台，简单来说：CDH 是一个汇集集群自动化安装、中心化管理、集群监控、报警功能于一体的一个工具，这样的话可以使得集群的安装可以从几天的时间缩短为几个小时，运维人数也会得到相应的减少，可以极大的提高...
