安装虚拟机和网络配置
2019-09-22 17:28 | 分类：数据库 | 评论：0 次 | 浏览: 10
安装虚拟机 VMWare安装官方网站 https://www.pagesinventory.com/domain/www.vmw...
ElasticSearch实战系列二: ElasticSearch的DSL语句使用教程---图文详解
2019-09-22 17:28 | 分类：数据库 | 评论：0 次 | 浏览: 8
前言 在上一篇中介绍了 "ElasticSearch集群和kinaba的安装教程" ，本篇文章就来讲解下 ElasticSear...
理解大数据
2019-09-22 17:28 | 分类：数据库 | 评论：0 次 | 浏览: 8
一.什么是大数据 大数据（big data）是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模...
Flink1.9整合Kafka
2019-09-20 17:30 | 分类：数据库 | 评论：0 次 | 浏览: 16
本文基于Flink1.9版本简述如何连接Kafka。 流式连接器 我们知道可以自己来开发Source 和 Sink ，但是一些比...
利用 pandas库读取excel表格数据
2019-09-19 19:34 | 分类：数据库 | 评论：0 次 | 浏览: 19
利用 pandas库读取excel表格数据 初入IT行业，愿与大家一起学习，共同进步，有问题请指出！！ 还在为数据读取而头疼呢，...
[大数据学习研究] 4. Zookeeper-分布式服务的协同管理神器
2019-09-19 19:34 | 分类：数据库 | 评论：0 次 | 浏览: 21
本来这一节想写Hadoop的分布式高可用环境的搭建，写到一半，发现还是有必要先介绍一下ZooKeeper这个东西。 ZooKee...
大数据技术原理与运用知识
2019-09-19 00:20 | 分类：数据库 | 评论：0 次 | 浏览: 21
一·大数据概述 随着信息技术发展的巨大变革，企业和学术机构纷纷加大技术、资金和人员投入，加强对大数据关键技术的研发与运...
Flink入门宝典（详细截图版）
2019-09-19 00:20 | 分类：数据库 | 评论：0 次 | 浏览: 21
本文基于java构建Flink1.9版本入门程序，需要Maven 3.0.4 和 Java 8 以上版本。需要安装Netcat进...
Spark学习笔记3——RDD（下）
2019-09-19 00:20 | 分类：数据库 | 评论：0 次 | 浏览: 23
Spark 的 RDD 学习第二节，笔记相关： 1.如何向 Spark 传递函数 2.Spark 常用的一些转化和行动操...
Kafka常见错误整理（不断更新中）
2019-09-17 18:04 | 分类：数据库 | 评论：0 次 | 浏览: 27
1、UnknownTopicOrPartitionException 报错内容：分区数据不在 原因分析：producer向不存在...
KafkaProducer源码分析
2019-09-16 18:09 | 分类：数据库 | 评论：0 次 | 浏览: 25
Kafka常用术语 Broker ：Kafka的服务端即Kafka实例，Kafka集群由一个或多个Broker组成，主要负责接收...
Kafka运维命令大全
2019-09-16 18:08 | 分类：数据库 | 评论：0 次 | 浏览: 27
1、集群管理 前台启动broker Ctrl + C 关闭 后台启动broker 关闭broker 2、Topic管理 创建to...
[大数据学习研究]2.利用VirtualBox模拟Linux集群
2019-09-16 18:08 | 分类：数据库 | 评论：0 次 | 浏览: 32
1. 在主机Macbook上设置HOST 前文书已经把虚拟机的静态IP地址设置好，以后可以通过ip地址登录了。不过为了方便，还是...
简易解说拉格朗日对偶（Lagrange duality）
2019-09-13 18:19 | 分类：数据库 | 评论：0 次 | 浏览: 36
转载自https://www.cnblogs.com/90zeng/p/Lagrange_duality.html，本人觉得讲的...
Storm VS Flink ——性能对比
2019-09-12 18:40 | 分类：数据库 | 评论：0 次 | 浏览: 48
1.背景 Apache Flink 和 Apache Storm 是当前业界广泛使用的两个分布式实时计算框架。其中 Apache...
SQOOP的使用方法
2019-09-12 18:40 | 分类：数据库 | 评论：0 次 | 浏览: 46
Sqoop是个命令行工具，用来在Hadoop和rdbms之间传输数据。以Hadoop的角度看待数据流向,从rdbms往Hadoo...
hadoop 完全分布式搭建总结
2019-09-11 17:54 | 分类：数据库 | 评论：0 次 | 浏览: 33
完全分布式 1.配置文件 [core-site.xml] hdfs 地址 fs.defaultFS=hdfs://s129:80...
Flink中TaskManager端执行用户逻辑过程(源码分析)
2019-09-11 17:54 | 分类：数据库 | 评论：0 次 | 浏览: 40
TaskManager接收到来自JobManager的jobGraph转换得到的TDD对象，启动了任务，在StreamInput...
Flink文章测试
2019-09-11 17:54 | 分类：数据库 | 评论：0 次 | 浏览: 47
Flink文章测试 + Flink文章测试 + Flink文章测试 + Flink文章测试 + Flink文章测试 + Flin...
Hadoop 完全分布式搭建
2019-09-10 17:27 | 分类：数据库 | 评论：0 次 | 浏览: 35
搭建环境 https://www.cnblogs.com/YuanWeiBlogger/p/11456623.html 修改主机...
快速构建第一个Flink工程
2019-09-10 17:27 | 分类：数据库 | 评论：0 次 | 浏览: 39
本文简述通过maven和gradle快速构建的Flink工程。建议安装好Flink以后构建自己的Flink项目，安装与示例运行请...
大数据常用软件安装指南
2019-09-10 17:27 | 分类：数据库 | 评论：0 次 | 浏览: 36
一、基础软件安装 1. "Linux 环境下 JDK 安装" 2. "Linux 环境下 Python 安装" 3. "虚拟机静...
Kafka入门宝典（详细截图版）
2019-09-09 17:48 | 分类：数据库 | 评论：0 次 | 浏览: 29
1、了解 Apache Kafka 1.1、简介 官网：http://kafka.apache.org/ Apache Kafk...
大数据之路【第十四篇】:数据挖掘--推荐算法(Mahout工具)
2019-09-07 17:36 | 分类：数据库 | 评论：0 次 | 浏览: 36
数据挖掘 推荐算法(Mahout工具) 一、简介 Apache顶级项目(2010.4) Hadoop上的开源机器学习库 可伸缩扩...
ETHINK组件取值手册
2019-09-06 21:39 | 分类：数据库 | 评论：0 次 | 浏览: 41
Ethink组件取值手册一、取值Sql查询配置中取值方式：所有可以对外过滤的组件都可以用id.output取值 就是取组件set...
统一批处理流处理——Flink批流一体实现原理
2019-09-06 21:39 | 分类：数据库 | 评论：0 次 | 浏览: 42
实现批处理的技术许许多多，从各种关系型数据库的sql处理，到大数据领域的MapReduce，Hive，Spark等等。这些都是处...
腾讯云+阿里云 搭建hadoop + hbase
2019-09-06 21:39 | 分类：数据库 | 评论：0 次 | 浏览: 45
[TOC] 历时两天，踩了无数坑最后搭建成功。。。 准备 两台服务器都安装jdk1.8（最好装在相同路径）。 "hadoop 下...
navicat删除oracle表的操作方法
2019-09-06 15:06 | 分类：数据库 | 评论：0 次 | 浏览: 38
第一步，打开navicat。 第二步，右击oracle数据库，然后点击“打开连接”。
Linux下mysql数据库的创建导入导出 及一些基本指令
2019-09-06 15:06 | 分类：数据库 | 评论：0 次 | 浏览: 43
首先linux 下查看mysql相关目录 查看 mysql 的安装路径 执行查询 sql mysql>...
SQL知识点之列转行Unpivot函数
2019-09-06 15:06 | 分类：数据库 | 评论：0 次 | 浏览: 32
前言 这是总结sql知识点的第二篇文章，一次只总结一个知识点，尽量说明白。上次我们谈到行转列，用的是pivot...