一、Tachyon配置说明
Tachyon 配置参数分为4类：Master,Worker, Common (Master and Worker), and User configurations。
环境变量配置文件在$TACHYON_HOME/conf/tachyon-env.sh，这些变量将会被TACHYON_JAVA_OPTS调用，这个文件的配置模版为$TACHYON_HOME/conf/tachyon-env.sh.template
额外的Java VM选项可以添加到TACHYON_MASTER_JAVA_OPTS和TACHYON_WORKER_JAVA_OPTS配置中。在模板文件，TACHYON_JAVA_OPTS将会被TACHYON_MASTER_JAVA_OPTS和TACHYON_WORKER_JAVA_OPTS调用。
例如，如果你想使Java在7001端口远程调试在Master上，你可以修改TACHYON_MASTER_JAVA_OPTS是这样的：
exportTACHYON_MASTER_JAVA_OPTS="$TACHYON_JAVA_OPTS -agentlib:jdwp=transport=dt_socket,server=y,suspend=n,address=7001"
二、Tachyon常用配置
| 属性名 | 默认值 | 含义 |
| tachyon.home | "/mnt/tachyon_default_home" | Tachyon的安装目录 |
| tachyon.underfs.address | $tachyon.home + "/underfs" | Tachyon底层文件系统目录 |
| tachyon.data.folder | $tachyon.underfs.address + "/tachyon/data" | Tachyon底层文件系统数据目录 |
| tachyon.workers.folder | $tachyon.underfs.address + "/tachyon/workers" |
Tachyon worke目录 |
| tachyon.usezookeeper | false | 是否使用zookeeper来进行master容错 |
| tachyon.zookeeper.address | null | Zookeeper地址 |
| tachyon.zookeeper.election.path | "/election" | Zookeeper选举文件夹 |
| tachyon.zookeeper.leader.path | "/leader" | Zookeeperleader文件夹 |
| tachyon.underfs.hdfs.impl | "org.apache.hadoop.hdfs.DistributedFileSystem" | HDFS底层文件系统实现类 |
| tachyon.max.columns | 1000 | RawTable允许的最大列数，必须在客户端和服务器端设置 |
| tachyon.table.metadata.byte | 5242880 | 在RawTable的元数据中最大允许多少字节 |
| fs.s3n.awsAccessKeyId | null | S3 AWS访问密钥ID |
| fs.s3n.awsSecretAccessKey | null | S3 aws 加密访问Key ID |
| tachyon.underfs.glusterfs.mounts | null | Glusterfs卷装入点，如/卷 |
| tachyon.underfs.glusterfs.volumes | null | Glusterfs卷名，如tachyon_vol |
| tachyon.underfs.glusterfs.mapred.system.dir | glusterfs:///mapred/system | 根据需要指定GLusterfs中MapReduce的数据子目录 |
三、Master配置
| tachyon.master.journal.folder | $tachyon.home +"/journal/" | master journal log 存储目录 |
| tachyon.master.hostname | localhost | Master主机名 |
| tachyon.master.port | 19998 | Master节点运行端口 |
| tachyon.master.web.port | 19999 | WEB接口运行端口 |
| tachyon.master.whitelist | / | 缓存路径 |
四、Wroker配置
| tachyon.worker.port | 29998 | Worker节点运行端口 |
| tachyon.worker.data.port | 29999 | Worker数据服务运行端口 |
| tachyon.worker.data.folder | /mnt/ramdisk | Worker节点数据目录 |
| tachyon.worker.memory.size | 128 MB | Worker几点内存容量 |
五、用户配置
| tachyon.user.failed.space.request.limits | 3 | 文件系统终止之前的时间 |
| tachyon.user.quota.unit.bytes | 8 MB |
客户端请求Worker几点的最小大小 |
| tachyon.user.file.buffer.bytes | 1 MB | 文件缓冲区大小 |
| tachyon.user.default.block.size.byte | 1 GB | Tachyon文件默认的block size |
| tachyon.user.remote.read.buffer.size.byte | 1 MB | 从远程worker读取数据的缓冲区大小 |
时间： 2024-10-05 18:23:55