2022-05-25

Java Spark 大数据

Antlr一个领域语言利器——入门篇

Antlr（Another Tool for Language Recognition）为开源的语法分析器，可以将输入的内容自动生成语法树；开发者可以使用它自定义自己的领域语言，只需创建语法规则文件，使用Antlr根据该规则文件生成相对应的类，再这些类的基础上我们可以用于实现自己的功能;Antl

2021-04-21

Flink 大数据

CEP复杂事件处理简单介绍

CEP（Complex Event Processing）复杂事件处理，这里的复杂事件指的是业务规则的复杂，随着互联网、物联网技术的发展现在传感器装得越来越多，目前实时流数据业务处理越来越广，业务规则也越来越复杂。可以说CEP就是一种基于事件的数据流分析技术，它通过过滤、聚合、关联、状态

2018-02-22

kafka Java

Kafka监控工具kafka-monitor v0.1简要介绍

　　Kafka Monitor为Kafka的可视化管理与监控工具，为Kafka的稳定运维提供高效、可靠、稳定的保障，这里主要简单介绍Kafka Monitor的相关功能与页面的介绍；　　Kafka Monitor v0.1 主要功能有：Kafka基本信息仪表盘、broker列表、topic列表、当

2017-06-25

Java

Java中的RASP实现

RSAP 　　RASP是Gartner公司提出的一个概念，称：程序不应该依赖于外部组件进行运行时保护，而应该自身拥有运行时环境保护机制；　　RASP就是运行时应用自我保护（Runtime application self-protection）的缩写，正如RASP字面意思一样，这是运行在运行时的一

2016-08-21

Java Spark

Spark——SparkContext简单分析

　　本篇文章就要根据源码分析SparkContext所做的一些事情，用过Spark的开发者都知道SparkContext是编写Spark程序用到的第一个类，足以说明SparkContext的重要性；这里先摘抄SparkContext源码注释来简单介绍介绍SparkContext，注释的第一句话就是

2016-01-14

Spark

Spark编译与打包

编译打包　　Spark支持Maven与SBT两种编译工具，这里使用了Maven进行编译打包；　　在执行make-distribution脚本时它会检查本地是否已经存在Maven还有当前Spark所依赖的Scala版本，如果不存在它会自动帮你下载到build目录中并解压使用；Maven源最好配置成

2016-01-09

Spark

Spark核心——RDD

　　Spark中最核心的概念为RDD（Resilient Distributed DataSets）中文为：弹性分布式数据集，RDD为对分布式内存对象的抽象它表示一个被分区不可变且能并行操作的数据集；RDD为可序列化的、可缓存到内存对RDD进行操作过后还可以存到内存中，下次操作直接把内存中RDD作

2015-12-22

Spark

Spark概述

背景　　目前按照大数据处理类型来分大致可以分为：批量数据处理、交互式数据查询、实时数据流处理，这三种数据处理方式对应的业务场景也都不一样；　　关注大数据处理的应该都知道Hadoop，而Hadoop的核心为HDFS与MapReduce，HDFS分布式文件系统在Hadop中是用来存储数据的；MapR

2015-09-21

并发模型

并发编程之可变状态

　　熟悉Java或如C#等使用共享内存模型作为并发实现的人都比较清楚，编写线程安全的代码很关键的一点就是要控制好可变状态，对于Java开发者来说可能用内存可见性更容易理解，在各种关于并发的书籍中都是处理好内存可见性问题编写线程安全的代码就成功了一半了，但我认为“内存可见性”太过于抽象、底层，使开发者

2015-08-05

Java

Java—Lambda基础

　　虽然JVM有着Scala 、Groovy 、Clojure 等依赖于JVM的函数语式语言，但直到Java8才算是java正式支持函数式编程；　　Java8中加入了Lambda的支持标志着Java正式加入了混合式编程语言（支持命令式编程与函数式编程）的行列；像C#、Python都是同时支持两种编

文章

160

分类

标签

116

关注我

Your browser is out-of-date!

Update your browser to view this website correctly. Update my browser now

Antlr一个领域语言利器——入门篇

CEP复杂事件处理简单介绍

Kafka监控工具kafka-monitor v0.1简要介绍

Java中的RASP实现

Spark——SparkContext简单分析

Spark编译与打包

Spark核心——RDD

Spark概述

并发编程之可变状态

Java—Lambda基础

分类

标签云

最新文章

标签

最新文章

标签

Your browser is out-of-date!