跳至主要内容

博文

CDH

  CDH是Apache Hadoop和相关项目的最完整、最受测试和最流行的发行版。CDH提供Hadoop的核心元素-可伸缩存储和分布式计算-以及基于web的用户界面和重要的企业功能。CDH是Apache许可的开放源码,是唯一提供统一批处理、交互式SQL和交互式搜索以及基于角色的访问控制的Hadoop解决方案。 CDH 提供以下特性: 灵活性:存储任何类型的数据并使用各种不同的计算框架进行操作,包括批处理、交互式SQL、免费文本搜索、机器学习和统计计算。 集成:在一个完整的Hadoop平台上快速启动和运行,该平台与广泛的硬件和软件解决方案一起工作。 安全:处理和控制敏感数据。 可伸缩性:启用广泛的应用程序和规模,并扩展它们以满足您的需求。 高可用性:满怀信心地执行任务关键的业务任务。 兼容性:利用您现有的IT基础设施和投资。 VS: https://www.cnblogs.com/programmer-tlh/p/14302749.html       https://zhuanlan.zhihu.com/p/335663852
最新博文

英文论文写作的格式要点及注意事项

vs: https://www.xiahepublishing.com/2475-7543/MRP-2017-071  学术论文写作应遵循一定的书写格式。不同的期刊杂志(或出版商)可能有一套自己的书写格式要求。为避免因书写格式不规范而导致论文发表延迟,作者在投稿前尤其是在论文被接受之后,应严格按照杂志投稿指南认真准备稿件。本文简单介绍英文论文写作的一些格式要点及注意事项。 1. 纸张大小与页边距 常见问题: 页边距太宽或太窄。 解决办法: 根据纸张规格,适当调整页边距。 详解: 撰写论文用纸,世界上绝大多数国家使用标准的A4纸张,但北美是个例外,采用Letter纸张。两者大小有所差异,A4为(宽 × 长)21.0 × 29.7厘米(8.3 × 11.7英寸);Letter为21.6 × 27.9厘米(8.5 × 11英寸)。由于纸张大小不一,页边距也不同。Letter默认四周边距为2.54厘米(1英寸);A4默认上下边距为2.54厘米(1英寸),左右3.17厘米(1.25英寸)。根据杂志要求或实际需要,页边距可以适当调整,如减少右侧边距。 2. 语言 常见问题: 英式英语与美式英语混用,或夹杂有中文字体格式。 解决办法: 认真检查,保持语言前后一致。 详解: 根据杂志所在地选择英式英语(British English)或是美式英语(American English),如analyse vs analyze,colour vs color和litre vs liter,不要混用。在使用中文版本Word文件写作时,要特别注意是否英文中夹杂有中文设置格式,造成字体大小不一和行距参差不齐,这在英文字里行间里很容易辨认出来。 3. 字体和字体大小 常见问题: 使用了不常用的字体;字体太大或太小。 解决办法: 使用杂志接受的字体和字体大小。 详解: 多种字体可以选择,如Arial、Times New Roman、Courier和Calibri。为保险起见,使用Times New Roman或Arial较为稳妥。国内习惯使用Times New Roman;美国较常用Arial,且仅Arial用于NIH课题申请。如果是Times New Roman,选用12号;如果是Arial,则用11号。全文包括题目和各部分标题采用统一大小字体,题目与小标题可以用黑体突出。 4. 对齐方式 常见

如何用cmake编译

  CMake编译原理 CMake是一种跨平台编译工具,比make更为高级,使用起来要方便得多。CMake主要是编写CMakeLists.txt文件,然后用cmake命令将CMakeLists.txt文件转化为make所需要的makefile文件,最后用make命令编译源码生成可执行程序或共享库(so(shared object))。因此CMake的编译基本就两个步骤: cmake make compile.sh g ++ - rdynamic .. / include / incl / tfc_base_config_file . cpp .. / include / mq /* . cpp local_util . cpp AgentMemRpt . cpp AgentDiskRpt . cpp AgentLoadRpt . cpp AgentIoRpt . cpp AgentNetRpt . cpp AgentCpuRpt . cpp AgentProcessRpt . cpp AgentParentRpt . cpp AgentSysTop_5 . cpp BaseFeatureRptMain . cpp - o rpt_main - I .. / include / incl - I .. / include / mq - I .. / include / rapidjson - lpthread - ldl CMake说明 一般把CMakeLists.txt文件放在工程目录下,使用时,先创建一个叫build的文件夹(这个并非必须,因为cmake命令指向CMakeLists.txt所在的目录,例如cmake .. 表示CMakeLists.txt在当前目录的上一级目录。cmake后会生成很多编译的中间文件以及makefile文件,所以一般建议新建一个新的目录,专门用来编译),然后执行下列操作: cd build cmake .. make 其中cmake .. 在build里生成Makefile,make根据生成makefile文件,编译程序,make应当在有Makefile的目录下,根据Makefile生成可执行文件。 编写 CMakeList.txt # 1. 声明要求的cmake最低版本

Flink指标

  本文为您介绍Flink指标的详细信息。 注意事项 以下几个指标参数需要Flink作业中配置了上下游的source和sink才会有输出: currentEmitEventTimeLag currentFetchEventTimeLag Operator CurrentSendTime sourceIdleTime watermarkLag Flink指标说明 Overview 参数 指标 描述 Num Of RunningJobs numRunningJobs JM中正在运行的作业数。 Job Uptime job_uptime 作业已运行时间,单位:ms。仅支持返回单个系列或表的查询。 TaskSlots Available taskSlotsAvailable 当前可用的TaskSlots数量。 TaskSlots Total taskSlotsTotal TaskSlots的总数量。 Num of TM numRegisteredTaskManagers 已注册的TM数量。 sourceIdleTime sourceIdleTime 源没有处理任何记录的时间,单位:ms。 currentFetchEventTimeLag currentFetchEventTimeLag 业务延时(fetch=数据发生时间与数据进入Flink Source时间之间的差值)。 currentEmitEventTimeLag currentEmitEventTimeLag 业务延时(emit=数据发生时间与数据离开Flink Source时间之间的差值)。 Checkpoint 参数 指标 描述 Num of Checkpoints totalNumberOfCheckpoints 检查点总数。 numberOfFailedCheckpoints 失败的检查点数量。 numberOfCompletedCheckpoints 已完成的检查点数量。 numberOfInProgressCheckpoints 正在进行的检查点数量。 lastCheckpointDuration lastCheckpointDuration 最近一个检查点完成时间,单位:ms。 lastCheckpointSize lastCheckpointSize 最近一个检查点的大小,单位:Byte。 lastC