nlslzf
- 浏览: 1026736 次
- 性别:
- 来自: 北京
-
文章分类
- 全部博客 (538)
- 奇文共赏 (36)
- spring (13)
- hibernate (10)
- AOP/Aspectj (9)
- spring security (7)
- lucence (5)
- compass (3)
- jbmp (2)
- jboss rule(drools) (0)
- birt (1)
- jasper (1)
- cxf (3)
- flex (98)
- webgis (6)
- 设计模式 (1)
- 代码重构 (2)
- log4j (1)
- tomcat (9)
- 神品音乐 (1)
- 工作计划 (2)
- appfuse (1)
- svn (4)
- 寻章摘句 (3)
- eclipse (10)
- arcgis api for flex (1)
- 算法 (5)
- opengis-cs (1)
- bug心得 (13)
- 图标 (1)
- software&key (14)
- java (17)
- 搞笑视频 (13)
- sqlserver (9)
- postgresql (1)
- postgis (0)
- geoserver (5)
- 日子 (50)
- 水晶报表 (1)
- 绝对电影 (3)
- Alternativa3D (1)
- 酷站大全 (10)
- c++ (5)
- oracle (17)
- oracle spatial (25)
- flashbuilder4 (3)
- TweenLite (1)
- DailyBuild (6)
- 华山论贱 (5)
- 系统性能 (5)
- 经典古文 (6)
- SOA/SCA/OSGI (6)
- jira (2)
- Hadoop生态圈(hadoop/hbase/pig/hive/zookeeper) (37)
- 风水 (1)
- linux操作基础 (17)
- 经济 (4)
- 茶 (3)
- JUnit (1)
- C# dotNet (1)
- netbeans (1)
- Java2D (1)
- QT4 (1)
- google Test/Mock/AutoTest (3)
- maven (1)
- 3d/OSG (1)
- Eclipse RCP (3)
- CUDA (1)
- Access control (0)
- http://linux.chinaunix.net/techdoc/beginner/2008/01/29/977725.shtml (1)
- redis (1)
最新评论
-
dove19900520：
朋友，你确定你的标题跟文章内容对应？？？
tomcat控制浏览器不缓存 -
wussrc：
我只想说牛逼,就我接触过的那点云计算的东西，仔细想想还真是这么 ...
别样解释云计算，太TM天才跨界了 -
hw_imxy：
endpoint="/Hello/messagebr ...
flex+java代码分两个工程 -
gaohejie：
rsrsdgrfdh坎坎坷坷
Flex 与 Spring 集成 -
李涤尘：
谢谢。不过说得有点太罗嗦了。
Oracle数据库数据的导入及导出(转)
该网页提到，较低的复制因子能够获得较高的IO值，下图是将我们的复制因子改为2之后，跑出来的结果
我在测试时发现，复制因子为3时，平均写的速度为11，调整到2，则可以跑到25
分享到：
发表评论
-
一网打尽当下NoSQL类型、适用场景及使用公司
2014-12-28 20:56 913一网打尽当下NoSQL类型、适用场景及使用公司 http:// ... -
别样解释云计算，太TM天才跨界了
2014-02-25 09:41 2389http://mp.weixin.qq.com/s?__bi ... -
Build, Install, Configure and Run Apache Hadoop 2.2.0 in Microsoft Windows OS
2013-12-09 11:17 2427http://www.srccodes.com/p/arti ... -
hadoop的超时设置
2013-06-23 11:47 2388from http://blog.163.com/zheng ... -
hadoop与panasas
2012-12-26 09:53 845在应用的场景中，hadoop当然希望使用全部的本地硬盘，但是对 ... -
程序开过多线程，导致hadoop作业无法运行成功
2012-10-23 16:14 7025Exception in thread "Threa ... -
mount盘异常，导致hadoop作业无法发送
2012-10-23 16:12 916异常信息 2012-10-23 21:10:42,18 ... -
HDFS quota 設定
2012-08-02 16:22 5449http://fenriswolf.me/2012/04/04 ... -
hadoop常用的指令
2011-10-09 16:50 1666hadoop job -kill jobid 可以整个的杀掉 ... -
Hadoop Job Scheduler作业调度器
2011-05-21 11:02 2478http://hi.baidu.com/zhengxiang3 ... -
hadoop指定某个文件的blocksize，而不改变整个集群的blocksize
2011-03-20 17:20 2068文件上传的时候，使用下面的命令即可 hadoop f ... -
Hadoop Job Tuning
2011-02-28 15:53 785http://www.searchtb.com/2010/12 ... -
如何在不重启整个hadoop集群的情况下，增加新的节点
2011-02-25 10:12 13441.在namenode 的conf/slaves文件中增加新的 ... -
对hadoop task进行profiling的几种方法整理
2011-02-10 21:57 1618对hadoop task进行profiling的几种方法整 ... -
如何对hadoop作业的某个task进行debug单步跟踪
2011-02-10 21:56 2041http://blog.csdn.net/AE86_FC/ar ... -
hadoop 0.20 程式開發 eclipse plugin
2011-01-26 19:36 2218http://trac.nchc.org.tw/cloud/w ... -
hadoop-0.21.0-eclipse-plugin无法在eclipse中运行解决方案
2011-01-26 09:47 3552LINUX下将hadoop-0.21自带的hadoop ecl ... -
How to Benchmark a Hadoop Cluster
2011-01-19 22:15 2803How to Benchmark a Hadoop Clu ... -
json在线格式化
2010-12-21 16:23 2389http://jsonformatter.curiouscon ... -
Hadoop的mapred TaskTracker端源码概览
2010-11-14 11:24 1254http://jiwenke.iteye.com/blog/3 ...
相关推荐
Hadoop基准测试程序 用户的作业 云上的Hadoop Amazon EC2上的Hadoop 第10章 管理Hadoop HDFS 永久性数据结构 安全模式 日志审计 工具 监控 日志 度量 Java管理扩展(JMX) 维护 日常...
Hadoop基准测试程序 用户的作业 云上的Hadoop Amazon EC2上的Hadoop 第10章 管理Hadoop HDFS 永久性数据结构 安全模式 日志审计 工具 监控 日志 度量 Java管理扩展（JMX） 维护 日常管理过程 委任节点和解除节点 ...
为了研究应对此挑战的海量数据存储技术,通过分析煤矿应急管理海量数据的来源及其特点,设计了云计算环境下基于NoSQL的煤矿应急管理海量数据存储方式,并对煤矿应急云平台进行了Hadoop基准测试,同时利用陕西黄陵矿业...
Hadoop平台基准性能测试工具的设计与实现
Hadoop V3.3.3 分布式部署步骤，DFSIO和Tersort基准测试
Hadoop平台基准性能测试研究
[已弃用] ALOJA大数据基准测试平台（仅供参考）快速开始熟悉Web应用程序，在以下位置浏览数据和视图： : 签出一些幻灯片或出版物作为背景和文档... 在ALOJA中，我们目前已创建了最大的与供应商无关的Hadoop基准测试库，
TPCDS Hive基准测试流程完整总结；
大数据标准化工作组织：ISO/IEC ITU NIST TPC SPEC TPC和SPEC两个组织关注大数据技术平台的基准测试： 测试标准： TPCx-HS、TPCx-BB 工具：TeraSort 大数据测试第一阶段 大数据平台(Hadoop平台)基准测试的方法论和...
建造为了构建和运行此测试，您必须将 HDFS 和 Hadoop 通用 jar 文件放入您的类路径中。 在 Hadoop 安装中，这些位于 share/hadoop/common/share/hadoop/hdfs/ 待办事项：使用 Maven。跑步运行测试时，您必须设置一些...
Spark-Terasort TeraSort是一种流行的基准测试，用于衡量在给定群集上对1 TB随机分布的数据（或所需的任何其他数据量）进行排序的时间。 它最初是用来测量Apache:trade_mark:Hadoop:registered:集群的MapReduce性能...
实验结果分析表明,对于非排序的基准测试程序,使用Spark或Flink替代Hadoop,分别带来平均77%和70%执行时间的降低。整体上,Spark的性能结果最好;而Flink通过使用的显式迭代程序,极大提高了迭代算法的性能。
随着大数据时代到来，分布式文件系统支持Hadoop大数据访问已成为一种趋势。...采用Hadoop基准程序对提出的框架进行测试，结果显示写性能提升超过45%，读性能提升超过97%，证明此框架可以有效地支持Hadoop大数据访问。
1 集群规范 (Cluster Specification) 2 集群的构建和安装 (Cluster Setup and Installation) 3 Hadoop 配置 ( Hadoop Configuration ) ...5 利用基准评测程序测试 Hadoop 集群 (Benchmarking a Hadoop Cluster)
heteroyarn_benchmarks 基准用于利用OpenCL来测试hadoop
HDFS库基准测试 该基准测试评估了基于JNI的本机libhdfs和本机实现libhdfs3（ ）的性能。 编译中 $ cd hdfs-benchmark $ mkdir build $ cd build $ cmake .. 如果将Hadoop安装在/usr/local/hadoop或Clouderas Hadoop...
编译： mvn clean package 使用 maven exec 插件运行： mvn exec:java -Dexec.mainClass=com.cloudera.Hardlinker -Dexec.args="generate /tmp/out1 10000" mvn exec:java -Dexec....根据需要替换您自己的路径。
陈跃国介绍了关系型结构大数据的概念以及特点，并阐述了TPC-DS基准对于实时大数据分析应用的局限性。近期，陈跃国进行了一次大规模的测试，利用人民大学的云平台，使用50台物理机，虚拟出了100个节点，并用使用TPC-...
benchmark_hbase_cassandra 使用 YCSB 对 HBase 和 Cassandra 进行基准测试的脚本。 数据库 - HBase 和 Cassandra benchmark_report.pdf 该文件包含使用 YCSB 的 HBase 和 Cassandra 基准测试结果的报告和观察结果。...