Hadoop工作流引擎之Azkaban
介绍
Azkaban是twitter出的一个任务调度系统，操作比Oozie要简单很多而且非常直观，提供的功能比较简单。Azkaban以Flow为执行单元进行定时调度，Flow就是预定义好的由一个或多个可存在依赖关系的Job组成的工作流。Azkaban的官方主页是http://azkaban.github.io/azkaban2/ ，它的的主要特点有下面几个：
兼容所有Hadoop版本（1.x,2.x,CDH）
可以通过WebUI进行管理配置，操作方便
可以通过UI配置定时调度
扩展性好，可针对某一问题开发组件(目前有三个插件HDFSBrowser，JobtypePlugins和HadoopSecur......
阅读全文
译自：Blocks and Variables
翻译不不到位之处，请指正，建议点击上面链接看苹果官网介绍。
本文描述的是Blocks和Variables之间的交互，包括内存管理部分。
1. 变量类型
在block对象的函数体中，变量可能会以5中不同的方式做处理。
你可以引用三种标准类型的变量：
。全局变量，包括静态的本地变量
。全局函数(which aren’t technically variables)
。局部变量和闭合作用域内的参数
blocks也支持另外两种类型的变量：
。At function level are__block variables. These are mutable within the block
(and the enclosing scope) a......
阅读全文
Metalink查找长时间大开销SQL的脚本：
根据PROGRAM列是SQL*PLUS或第三方工具在做业务表的大型操作时，这些操作可能引起系统性能问题；
通过machine知道是谁在做该操作，根据实际情况可以随时kill这些session。set line 250
col ssid format 9999 heading SID;
col opname format a15 TRUNCATE ;
col target format a28 TRUNCATE ;
col es format 99999.9 Heading "Time|Ran";
col tr format 99999.90 Heading "Time|Left";
col pct format 999.90 Heading "PCT";
col RATE FORMAT a6 truncate Heading "I/O |Rate/m" ;
col prog......
阅读全文
TortoiseSVN没有Mac版本，这里推荐一款Mac上的SVN版本控制客户端：cornerstone，很好用。
下载地址：http://www.ifunmac.com/2015/03/cornerstone-2-7-16/
阅读全文
2013年各大小IT公司待遇，绝对真实，一线数据！
(2012-10-25 01:05:38)
转载▼
标签：
杂谈
以下绝对是各大公司2013届校招的数据，少数几个是2012 2011的数据，都已经特别注明，数据真实重要性高于一切！！！2013年以前的数据来源：西电好网论坛和西电睿思论坛，应届生论坛，选进来的都是已经确认的信息，放心参考
待遇全部为税前，没有哪个公司会说税后工资
无特别说明，都是硕士，本科的话会特别说明
1 华为 去年西安要了3000人，今年只要了800人，以往不刷人的性格测试部分今年狂刷人。硕士7500或者8000（北......
阅读全文
励志篇：IT屌丝如何成为数据科学家？
数据科学家
风格
7个月前 (09-26) 1359浏览
0评论
数据科学家被《财富》杂志誉为21世纪最性感的职业，但遗憾的是大多数企业里都没有真正的数据科学家人才。根据麦肯锡报告，仅仅在美国市场，2018年大数据人才和高级分析专家的人才缺口将高达19万。此外美国企业还需要150万位能够提出正确问题、运用大数据分析结果的大数据相关管理人才。
那么，对于不同职业经历和专业背景的IT人士来说，如何才能尽快转型，加入数据科学家的钻石王老五的行列呢？
Ofer Mendelevitch近日在Hortonworks官方博客......
阅读全文
题目链接~~>
做题感悟：这题开始时没想出来什么好办法，但是某个瞬间灵感爆发想到用方向做第三维标记这样就很轻松解决了。
解题思路：用方向做第三维标记看是否重复走，只要发现重复走就结束。
代码：
#include<stdio.h>
#include<iostream>
#include<map>
#include<stack>
#include<string>
#include<string.h>
#include<stdlib.h>
#include<math.h>
#include<vector>
#include<queue>
#include<algorithm>
using namespace std ;
const double PI = 3.141......
阅读全文
题目链接~~>
做题感悟：开始做时感觉和FATE差不多，直接二维 01 背包写，但是必须要恰好选择 m 个这一点怎么也没想出怎么控制。
解题思路：二维 01 背包，但是要注意恰好选择 m 个 ，so ~ 初始化时要特别注意。
状态方程： dp [ i ][ j ] = max( dp[ i ][ j ] , dp [ i-1 ] [ j - v ] + w ) ;
代码：
#include<stdio.h>
#include<iostream>
#include<map>
#include<stack>
#include<string>
#include<string.h>
#include<stdlib.h>
#include<math.h>
#include......
阅读全文
1,如何查看当前的进程打开的文件个数(这个数是实时波动) 下面以ccps为例说明
1)取得程序对应的PID(进程号)
ps –ef | grep ccps 执行
[root@vvmocmp1 ccps]# ps -ef | grep ccps
root 5661 1 0 20:33 pts/2 00:00:00 /bin/sh /opt/OC/ccps/jboss-4.2.3.GA/bin/run.sh -c all -g ccpsgroup -b 0.0.0.0
root 5685 5661 94 20:33 pts/2 00:00:17 /usr/java/jdk1.6.0_13/bin/java -Dprogram.name=run.sh -server -Dcom.sun.management.jmxremote -Djava.awt.headless=true -Xms1024m -Xmx1024m -XX:PermSize=64m -XX:MaxPermSize=256m -......
阅读全文
题目链接: 点击打开链接
题意：
给定一个有向图，求：
1) 至少要选几个顶点，才能做到从这些顶点出发，可以到达全部顶点
2) 至少要加多少条边，才能使得从任何一个顶点出发，都能到达全部顶点
顶点数<= 100
求完强连通分量后，缩点，计算每个点的入度，出度。
第一问的答案就是入度为零的点的个数，
第二问就是max(n,m) // 入度为零的个数为n, 出度为零的个数为m. //kuangbin巨巨分析很棒！
#include<cstdio>
#include<cstring>
#include<vector>
#include<stack>
#include<algorithm>......
阅读全文
<?php require dirname(__FILE__).'/include/common.inc.php'; //加载公共函数$head['title'] = $PHPCMS['sitename']; //调用公共变量站名$head['keywords'] = $PHPCMS['meta_keywords']; //调用公共变量设置的关键字$head['description'] = $PHPCMS['meta_description']; //调用公共变量设置的网站内容描述文字header('Last-Modified: '.gmdate('D, d M Y H:i:s', TIME).' GMT'); //设置网页在服务器上修改的修改时间header('Expires: '.gmdate('D, d M Y H:i:s', TIME+CACHE_PAGE_INDEX_TT......
阅读全文
原文链接：http://www.cnblogs.com/qianxudetianxia/p/3725466.html
【基于最新的Android4.4的源码分析】
每家公司或者每个移动团队无不想开发出一套自己的UI框架，融入自己的设计和特性，这必然会去修改android的ui。
所以，学习和理解android的UI设计是最基础和非常有必要的。
android ui设计最重要的就是主题和样式。
1、位置
在Android的frameworks/base/core/res/res/values目录下有一下几个文件：
?
1
2
3
4
themes.xml
themes_device_defaults.xml
styles.xml
styles_device_defaults.xml
分别定义了......
阅读全文