频道栏目
首页 > 网络 > 云计算 > 正文
  • SparkCore的核心使用

    SparkCore的核心使用: * 首先,官网的这张图很好的描述了一个Spark 应用程序的结构,一个Spark应用程序由一个Driver端和多个Executor组成,多个task 以多线程的形式运行在Executor中。 * Driver端: D

    关键词: Spark  SparkCore  核心  使用 

  • 可持久化线段树(主席树)

    可持久化线段树(主席树):首先,我们需要搞懂一个概念:主席树其实是由多个线段树组成的,但构建时不需要完全建出~~怎么理解呢,事实上,我们主席树每次构建时,并不会影响到整棵树,仅仅会对当前根节点的左孩子 右孩子造成影响,为什么我要说这些呢,因为之后各位理解代码

    关键词: 线段  主席  模板 

  • 数据可以用来做什么?——十个有趣的“大数据”案例

    数据可以用来做什么?啤酒与尿布全球零售业巨头沃尔玛在对消费者购物行为分析时发现,男性顾客在购买婴儿尿片时,常常会顺便搭配几瓶啤酒来犒劳自己,于是尝试推出了将啤酒和尿布摆在一起的促销手段。没想到这个举措居然使尿布和啤酒

    关键词: 数据  大数据  案例 

  • hiveones解析

    hiveones解析:ES和hive数据间转换比较麻烦,通常是jdbc连hive,用ES api入数。现可用快捷的hive on ES:1 创建index curl -X PUT "localhost:9200 kk_hive_es " -H Content-Type: application json -d { "settings ":{

    关键词: 博客 

  • Hdfs的配置

    Hdfs的配置:在第一台上(没有配置zookeeper的) cd $HADOOP_HOME 然后将 Cp -r hadoop hadoop-full 进入hadoop 修改hdfs site

    关键词: Hdfs  Ha  配置 

  • pythonlogging应用及与print的区别、log监控api调用、format的使用

    pythonlogging应用及与print的区别、log监控api调用、format的使用(1)最常见的应用是: 把info,warning,error同时输出到cmd窗口(显示)和(写入)log文件中; 其中info表示告诉用户,这个是普通的信息; warning和error分别提醒用户,有些警告,甚至是错误信息

    关键词: pythonlogging  print  区别 

  • dig命令大全 详解

    dig命令大全详解:Dig是一个在类Unix命令行模式下查询DNS包括NS记录,A记录,MX记录等相关信息的工具。由于一直缺失。Dig man page文档,Dig的源码是ISC BIND大包的一部分,但是大多编译和安装Bind的文档都不把它包括在内,但是在linux系统下,它通常是某个包的一部分

    关键词: dig  命令  大全  详解 

  • 使用OpenMP,MPI混合编程解决WordCount问题

    使用OpenMP,MPI混合编程解决WordCount问题: WordCount是分布式计算的入门问题,但也是最基本和经典的问题 问题是让你统计一个超级大的文件(可能上T级别), 里面的每个字符串各出现了多少次 本文聚焦的并不是真正的WordCount问题,而是

    关键词: OpenMP  MPI  混合编程  WordCount 

  • DNS-ResourceRecords

    DNS-ResourceRecords:所有的RRs(Resource Records)都具有相同的顶级字段格式定义:owner??TTL?CLASS?TYPE RDATAowner指示拥有资源记录的DNS域名TTL对大多数资源记录,该字段为可选项。指明其它DNS服务器在期满放弃该记录信息之前

    关键词: DNS  ResourceRecords  字段  格式 

  • Kafka学习笔记

    Kafka学习笔记:Kafka是什么在流式计算中,Kafka一般用来缓存数据,Storm通过消费Kafka的数据进行计算。1)Apache Kafka是一个开源消息系统,由Scala写成。是由Apache软件基金会开发的一个开源消息系统项目。2)Kafka最初

    关键词: Kafka  数据    缓存  系统 

  • Kafka的配置信息

    Kafka配置信息:1、Broker配置信息属性默认值描述broker id 必填参数,broker的唯一标识log dirs tmp kafka-logsKafka数据存放的目录。可以指定多个目录,中间用逗号分隔,当新partition被创建的时会被存放到当前

    关键词: Kafka  配置  信息 

  • scala方法和函数

    scala方法和函数:1 方法定义方法定义方法的关键字: def定义方法的通用格式: def 方法名 (参数列表):方法返回值类型={方法体}如果方法体中有多行代码, 则可以使用代码块的方式包裹多行代码, 代码块中最后一行的返回值就是

    关键词: scala  函数  方法  def 

  • scala基础(变量、条件判断、循环)

    scala基础(变量、条件判断、循环):1 scala 介绍类似于java,也是jvm的一门编程语言,集成面向对象和函数式编程的各种特性2 scala特点(1)面向对象: 一切皆对象, 和java一致。(2)函数式编程: 方法可以作为参数进行传递(3)编码效率高

    关键词: scala  变量  条件  基础 

  • MPI并行编程:矩阵乘法,积分计算,PSPR排序

    MPI并行编程:矩阵乘法,积分计算,PSPR排序:MPI(Message-Passing-Interface 消息传递接口)实现并行是进程级别的,通过通信在进程之间进行消息传递。MPI并不是一种新的开发语言,它是一个定义了可以被C、C++和Fortran程序调用的函数库。这些函数库

    关键词: MPI  并行编程  乘法  矩阵  积分 

  • 浅析基础数据结构-二叉堆

    浅析基础数据结构-二叉堆:二叉堆是一种基础数据结构事实上支持的操作也是挺有限的(相对于其他数据结构而言),也就插入,查询,删除这一类对了这篇文章中讲到的堆都是二叉堆,而不是斜堆,左偏树,斐波那契堆什么的?我都不会啊一

    关键词: 二叉堆  数据结构  基础  博客 

排行
热门
论坛推荐

关于我们 | 联系我们 | 广告服务 | 投资合作 | 版权申明 | 在线帮助 | 网站地图 | 作品发布 | Vip技术培训 | 举报中心

版权所有: 红黑联盟--致力于做实用的IT技术学习网站