datax安装(Windows版)

一、安装datax

下载地址:http://datax-opensource.oss-cn-hangzhou.aliyuncs.com/datax.tar.gz

将其解压即可。

二、测试安装是否成功

   1,打开cmd界面(同时按下Windows键+R键)

  2,输入CHCP 65001 防止中文乱码

  3,跳转到datax的bin目录下

    命令行:d:

        cd D:\BigDataTools\datax\datax\bin

  

  4,查看模板

    命令行: python datax.py -r streamreader -w streamwriter

  5,使用datax

   首先我们需要自定义好的json文件(从网上获取的,内容如下),命名为stream2stream.json

{
  "job": {
    "content": [
      {
        "reader": {
          "name": "streamreader",
          "parameter": {
            "sliceRecordCount": 10,
            "column": [
              {
                "type": "String",
                "value": "helle DataX"
              },
              {
                "type": "string",
                "value": "你吃完晚饭了吗?"
              },
              {
                "type": "string",
                "value": "不要在写代码了,太累了"
              }
            ]
          }
        },
        "writer": {
          "name": "streamwriter",
          "parameter": {
            "encoding": "GBK",
            "print": true
          }
        }
      }
    ],
    "setting": {
      "speed": {
        "channel": 5
       }
    }
  }
}

  输入命令行:python datax.py  +json文件的位置;如:python datax.py ./steam2stream.json

  效果:

三,备注

  如果你的python环境是python3.0以上的话,请到https://github.com/HxYyWw/DatatX_python3/tree/master下载对应的三个.py文件代替datax文件夹中bin目录下的三个.py文件即可。

原文地址:https://www.cnblogs.com/goubb/p/12403944.html

时间: 2024-08-02 09:26:04

datax安装(Windows版)的相关文章

汉澳sinox2014看电影玩flash游戏最佳办法是安装windows版firefox

其实汉澳sinox本身并没有原生flashplayer,不管怎么捣鼓,都是从adobe获得linux或者windows版本flashplayer,与其不停捣鼓linux版本flashplayer,不知安装windows版本浏览器直接让windows版浏览器支持flashplayer,这样看电影更加兼容,丝毫没有障碍. 目前已经知道firefox的 windows版本在sinox运行很好,虽然没有十全十美(字体有点模糊,解决办法是把simsun.ttc字体文件扔到/usr/local/share/

Ubuntu 16.04下使用Wine安装Windows版的微信(不太完美)

说明: 真的不太完美,别试了:除了需要安装额外的输入法之后,无法上传图片和间接性的BUG出现等等问题. 建议安装网页版的微信:http://www.cnblogs.com/EasonJim/p/7114667.html 参考: https://www.cnblogs.com/makefile/p/6079451.html

boost的下载和安装(windows版)

1 简介 boost是一个准C++标准库,相当于STL的延续和扩充,它的设计理念和STL比较接近,都是利用泛型让复用达到最大化. boost主要包含以下几个大类: 字符串及文本处理.容器.迭代器(iterator).算法.函数对象和高阶编程.泛型编程. 模板元编程.预处理元编程.并发编程.数学相关.纠错和测试.数据结构.输入/输出.跨语言支持.内存相关.语法分析.杂项. 编辑 2 boost的下载和安装 我们可以在 boost官网 上下载最新的boost版本.由于boost库可以向标准库一样在多

appium——appium的安装windows版

转自:http://www.cnblogs.com/nbkhic/p/3803883.html 原文地址 感谢testerhome的辛勤翻译. 本文版权归乙醇所有,欢迎转载,但请注明作者与出处,严禁用于任何商业用途 限制 如果你在windows上安装appium,你没法使用预编译专用于OS X的.app文件,你也将不能测试IOS apps,因为appium依赖OS X专用的库来支持IOS测试.这意味着你只能通过在mac上来运行IOS的app测试.这点限制挺大. 开始安装 安装nodejs 0.8

Redis安装——windows版

下载地址   : https://github.com/MicrosoftArchive/redis/releases/tag/win-3.2.100 双击进行安装,然后将安装目录配置到环境变量里,打开cmd进行测   redis-cli,出现下图代表安装成功 运行redis-server redis.windows.conf出现如下内容也是没有关系 安装php-redis扩展 1.使用phpinfo()函数查看PHP的版本信息,这会决定扩展文件版本. 2.下载php_redis-3.1.4-7

下载安装windows版Redis

链接       https://github.com/MicrosoftArchive/redis/releases 选择版本下载 在redis目录打开cmd命令输入 redis-server.exe redis.windows.conf --maxmemory 200M 200M是数据库大小 回车后redis就启动了

Windows版变色龙

打包安装版本更新源地址: http://www.insanelymac.com/forum/files/file/59-chameleon-22-svn/ 一.使用方法:1.安装Windows版变色龙RC5 Rev 875 for Windows2.自行决定是否替换C:\wowpc.iso为附件2.1svn_r1650_trunk的wowpc.iso(显示隐藏文件,才看得到)3.功能,同 Mac版变色龙,可启动主分区 + 逻辑分区的 Snow+Lion. 二.手动新建文件夹(在Mac硬盘)(在W

MySql5.7.11 for Windows 安装精简版(一)

原文:MySql5.7.11 for Windows 安装精简版(一) 从官网下载压缩包,我下载的是64位的.解压. 精简: -Bin下只保留 mysqladmin.exe mysqld.exe mysql.exe Share目录下 保留charsets english 没有data文件夹一会告诉怎么生成 添加环境变量,mysql bin文件夹的路径 (如:C:\Program Files\MySQL\MySQL Server 5.6\bin )添加到Path中,当然之前的不要删了,用:隔开就好

windows 安装绿色版mysql

(1)到官网下载绿色版mysql:http://dev.mysql.com/downloads/mysql/ (2)下载好后,放在F:\mysql,解压出来 (3)进入到mysql-5.6.19-winx64这个文件夹,用记事本打开my-default.ini 把里面的内容替换: # For advice on how to change settings please see # http://dev.mysql.com/doc/refman/5.6/en/server-configurati

Windows版Cacti全新安装与升级

全新安装 Cacti运行依赖的软件很多,mysql.PHP.Apache.Spine.rrd等,一个一个的安装非常繁琐,而且还容易出错,全新安装的话可以采用论坛提供的windows安装包安装,非常简单. 目前Cacti的最新版本是0.8.8b,但安装包的版本只有0.8.8a版的,没关系,我们可以先安装安装包,再单独下载Cacti 0.8.8b覆盖就可以了. Cacti安装包地址:点我下载 Cacti 0.8.8b地址:点我下载 安装完安装包过后,找到Cacti的位置,一般是D:\Cacti\Ap