nlslzf
- 浏览: 1027962 次
- 性别:
- 来自: 北京
-
最新评论
-
dove19900520：
朋友，你确定你的标题跟文章内容对应？？？
tomcat控制浏览器不缓存 -
wussrc：
我只想说牛逼,就我接触过的那点云计算的东西，仔细想想还真是这么 ...
别样解释云计算，太TM天才跨界了 -
hw_imxy：
endpoint="/Hello/messagebr ...
flex+java代码分两个工程 -
gaohejie：
rsrsdgrfdh坎坎坷坷
Flex 与 Spring 集成 -
李涤尘：
谢谢。不过说得有点太罗嗦了。
Oracle数据库数据的导入及导出(转)
文章列表
http://ydl.net/eclipse_cuda_plugin/quickstart.shtml
http://ydl.net/eclipse_cuda_plugin/files/cudaplugin-1.1.tar.gz
Using Eclipse for CUDA Development
http://lifeofaprogrammergeek.blogspot.com/2008/07/using-eclipse-for-cuda-development.html
文件上传的时候，使用下面的命令即可
hadoop fs -D fs.local.block.size=134217728 -put local_name remote_location
参考
http://stackoverflow.com/questions/2669800/changing-the-block-size-of-a-dfs-file-in-hadoop
经过验证，上述命令在0.21版本上不行，需要改为
hadoop dfs -D dfs.blocksize=134217728 -copyFromLocal local_name remote_location
...
http://help.eclipse.org上有很好的帮助文档，CDT plug-in developer guide
讲解比较详细
managed Build System Extensibility Document
如何创建自己的代码框架，参考
How to add project templates to CDT
http://www.searchtb.com/2010/12/hadoop-job-tuning.html
Hadoop平台已经成为了大多数公司的分布式数据处理平台，随着数据规模的越来越大，对集群的压力也越来越大，集群的每个节点负担自然就会加重，而且集群内部的网络带宽有限，数据交换吞吐量也在面临考验，由此引发了人们对大规模数据处理进行优化的思考。
本文仅从实践经验出发，针对Hadoop Job优化提出了一些观点，不包含HDFS的优化。
Job Tracker Related
严格来说，下面这个配置项，是决定HDFS文件block数量的多少(也就是文件个数)，但是它会间接的影响Job ...
1.在namenode 的conf/slaves文件中增加新的节点
2.在不stop-all.sh的情况下，直接再执行一遍./start-all.sh
对hadoop task进行profiling的几种方法整理
http://blog.csdn.net/AE86_FC/archive/2010/10/22/5957793.aspx
在hadoop中，当一个job的调试完成，执行成功后，job的开发者接下来该思考的问题通常就是：如何将job跑的更快，更加高效，更节省资源呢？这个话题其实是一个老生常谈的话题了，很多有经验的工程师，开发人员和机构都分享过类似的经验。通常来说，应用程序千变万化，程序逻辑也不尽相同，程序的执行瓶颈通常也不尽相同，有的job是IO密集型的作业，那么优化其算法效率意义就不大，而有的job是CPU密集型的，那 ...
http://blog.csdn.net/AE86_FC/archive/2010/10/21/5957715.aspx
对于使用hadoop进行日志分析等工作的开发者来说，相信一直都面临着一个非常头 疼的问题。那就是：对hadoop的mapreduce作业，在分布式集群上进行单个task的单步debug跟踪调试无法办 ...
上个月23号Eclipse基金会发布了最新的Eclipse太阳神版本，囊括了39个项目，下面我们就来看看哪些项目是最受Eclipse开源社区喜欢的。Eclipse最初是一个Java IDE，但后来变得越来越强大，早已超出了IDE的范畴，截至目前，Eclipse可支持静态和动态编程语言，胖客户端、瘦客户端和服务器端框架，建模和业务报表，嵌入式和移动开发，Eclipse包含的项目和子项目已经超过125个，本文将为大家列举其中25个最佳，最闪亮，最受欢迎的Eclipse项目，注意列表本身不分先后顺序。
1、Eclipse建模框架(Eclipse Modeling Framework ...
《荆园小语》 [清] 申涵光荆园小语 ［清］ 申涵光「申涵光（1618——－1677），字孚孟，号凫｛昭下皿｝一号聪山。直隶永年（今属河北省）人。清顺治中恩贡生，绝意仁进，累荐不就。少年时即以诗名闻河朔间，与殷岳、张盖合称“畿南三才子”。其诗以杜甫为宗，兼采众家之长。有《聪山集》、《荆园小语》诸书。」
贫贱时，累心少，宜学道；富贵时，施予易，宜济人。若夫贫贱而存济人之心，富贵而坚学道之志，尤加人一等。
常有小不快事，是好消息。若事称心，即有大不称心者在后，知此理，可免怨尤。
凡宴会，宾客杂坐，非质疑问难之时，不可讲说诗文，自矜博雅。恐不知者愧而之。 ...
http://www.ibm.com/developerworks/cn/opensource/os-cn-ecl-comm/index.html
引言
从 Eclipse 3.0 开始，Eclipse 通过选择开放服务网关协议（Open Services Gateway Initiative，OSGi）来替换先前版本中 Eclipse 插件技术，Eclipse 中的插件是通过 OSGi 框架来实现的，可以认为，一个 Eclipse 插件等同于一个 OSGi 的 Bundle。Eclipse 3.0 以后，创建一个 Eclipse 插件，既可以采用基于扩展点的方式，又可以采用基于 OSG ...
http://www.ibm.com/developerworks/cn/opensource/os-eclipse-brand/
在 Eclipse V3.1 引入 Production Configuration 之前，RCP 开发人员面临着如何有效且高效地打包和交付具有必要插件的 RCP 项目的问题。此问题实际上是影响到使用率的问题，因为它本质上决定了其软件的分布和可用性。多亏了 Eclipse V3.1 的新 Production Configuration 功能，现在您可以轻松将其应用程序与依赖项和品牌推广元素轻松地打包在一起了。本文详细介绍了如何利用 Eclipse Produ ...
http://trac.nchc.org.tw/cloud/wiki/waue/2009/0617
hadoop 0.20 程式開發 eclipse plugin + Makefile
hadoop 0.20 程式開發
eclipse plugin + Makefile
零. 前言
開發hadoop 需要用到許多的物件導向語法，包括繼承關係、介面類別，而且需要匯入正確的classpath，否則寫hadoop程式只是打字練習...
用類 vim 來處理這種複雜的程式，有可能會變成一場惡夢，因此用eclipse開發，搭配mapreduce-plugin會事半功倍。
早在hado ...
LINUX下将hadoop-0.21自带的hadoop eclipse plugin放到eclipse dropins目录中无法正常运行，使用eclipse -consolelog 发现找不到hadoop的类，解压hadoop-0.21.0-eclipse-plugin.jar发现META-INF下的MANIFEST.MF文件中，Bundle-ClassPath写的有问题，他写的是/lib/hadoop-core.jar,把hadoop目录下的hadoop-common-0.21.0.jar,hadoop-hdfs-0.21.0.jar,hadoop-mapred-0.21.0.jar,log4 ...
How to Benchmark a Hadoop Cluster
http://answers.oreilly.com/topic/460-how-to-benchmark-a-hadoop-cluster/
Is the cluster set up correctly? The best way to answer this question is empirically: run some jobs and confirm that you get the expected results. Benchmarks make good tests, as you also ...
http://linux.chinaunix.net/bbs/thread-1061339-1-1.html
当我们管理数以十计或者更多的集群系统时，往往需要在每台机器上执行同样的命令，或者拷贝同样的文件，这时，我们就可以考虑使用三个小工具，分别是pdsh、ClusterSSH和mussh。