建造一个MapD官网上测试用的12亿行数据库

1.该测试库来自于以下的网站:

http://stat-computing.org/dataexpo/2009/the-data.html

该网站上所有的年份的数据库加起来是123534969行。

2.将以上的数据库下载下来,我放到了这个文件夹中:/mapd-core/build/sample_datasets/flights_year。

3.用以下命令分别解压:bunzip2 1999.csv.bz2

4.新建一个表:

create table flights_ASA_year (
fYear int,
fMonth int,
DayofMonth int,
DayOfWeek int,
DepTime int,
CRSDepTime int,
ArrTime int,
CRSArrTime int,
UniqueCarrier varchar(5),
FlightNum int,
TailNum varchar(8),
ActualElapsedTime int,
CRSElapsedTime int,
AirTime int,
ArrDelay int,
DepDelay int,
Origin varchar(3),
Dest varchar(3),
Distance int,
TaxiIn int,
TaxiOut int,
Cancelled int,
CancellationCode varchar(1),
Diverted varchar(1),
CarrierDelay int,
WeatherDelay int,
NASDelay int,
SecurityDelay int,
LateAircraftDelay int
);

5.使用以下的命令拷备10次:

COPY flights_ASA_year from ‘/mapd-core/build/sample_datasets/flights_year/*‘ WITH (nulls = ‘NA‘);

每次结果有以下的返回,证明拷备成功:

Result
Loaded: 123534969 recs, Rejected: 0 recs in 441.858000 secs

6.至此创建了MapD官网上的12行测试数据库。

时间: 2024-08-12 18:21:27

建造一个MapD官网上测试用的12亿行数据库的相关文章

【云图】如何制作官网上的实体店分布图?

摘要:很多商家都有自己的实体店,包括KFC啊,麦当劳啊,姐最爱的眉州小吃啊.那么,商家就会有这样一个需求:把实体店地址标注在地图上,并引导客户驾车或者坐公交去到指定地地址.可是商家一般都不会地图开发,这可怎么办呢?不用担心,我把代码都给大家写好了,鼠标点一点,实体店地图立马呈现!本文以姐最爱的AMF海水农场实体店为例,告诉大家如何在自己的网站上嵌入一个[全国实体店查询地图]. AMF官网:http://www.amfaqua.com/pinpailingshoudian/pinpailingsh

jquery ui中的dialog,官网上经典的例子

jquery ui中的dialog,官网上经典的例子 jquery ui中dialog和easy ui中的dialog很像,但是最近用到的时候全然没有印象,一段时间不用就忘记了,这篇随笔介绍一下这个控件. 1.实例 官网源代码中给出了一些实例,首先看看实例是什么样子的. a.默认功能 也是最简单的应用,也就是打开一个对话框,代码如下 <!doctype html> <html lang="en"> <head> <meta charset=&q

怎样在Java的官网上搜索命令行参数的说明

这个日志有些吐槽的成份在里面.前两天看到JDK Windows下的一个参数-agentpath:"",因为之前没用过,所以想查查官方解释,发现在百度里很难搜索到,可以搜索出来如下的日志: http://xinklabi.iteye.com/blog/837435 但是有时候我们希望能看到更官方的,更及时更新的Specification等,那么就需要在官网上查找了,但是这个过程也挺麻烦的,我简单总结一下: 我们在:http://docs.oracle.com/javase/8/ 这里可以

_00019 Storm的体系结构介绍以及Storm入门案例(官网上的简单Java案例)

博文作者:妳那伊抹微笑 博客地址:http://blog.csdn.net/u012185296 个性签名:世界上最遥远的距离不是天涯,也不是海角,而是我站在妳的面前,妳却感觉不到我的存在 技术方向:Flume+Kafka+Storm+Redis/Hbase+Hadoop+Hive+Mahout+Spark ... 云计算技术 转载声明:可以转载, 但必须以超链接形式标明文章原始出处和作者信息及版权声明,谢谢合作! qq交流群:214293307  (期待与你一起学习,共同进步) # Storm

怎样在spring官网上下载spring的zip包

对于开发人员来讲,最好是去官网下载开发包,但是有些官网下载zip包十分不方便.比如说Spring. 怎样下载spring的zip包呢? 其实spring官网上提供了spring里面的单独module的maven下载方式,spring的包里面分了很多module.但是我们不想一个一个的下载他的module.我们希望一次性把它的所有module下载下来. 这样的话,我们就要下载他提供的zip文件了. 这个zip文件的下载地址还真的是蛮难找的,官网上给出来了,但是对于英语不太好的童鞋来说,要想找到还挺

如果你想为您的公司制作(修改)一个企业官网,那么请先看看这篇文章

一个企业网站有什么功能?,为什么要为自己的企业做自己的官网! 1.企业宣传作用,(似乎是废话) 2.在线交易作用. 事实上,给你的网站接入企业支付宝,微信支付等.可以达到实时交易的功能,但很多网站都忽视了这点. 3.资料下载 我们完全可以将企业的一些共享资料,比如合同模版,产品资料放到企业官网供客户下载,但同样,对于很多企业都完全忽视了这点. 4.在线客服作用. 将自己的官网加入一些在线客服软件,比如 CC客服,53客服等,可以实时的跟访问到您官网的用户进行沟通.常见的有医院官网,几乎所有的医院

编写爬虫自动下载王者荣耀官网上好看的壁纸

前言 偶然间发现王者荣耀的官网上发布了这么多好看的壁纸. 地址:http://pvp.qq.com/web201605/wallpaper.shtml 看了一下,每一张都挺喜欢的,而且还有十多页,一张一张去慢慢下载肯定不是作为一个Geeker的正确姿势. 由于最近python用得比较多,所以看到什么好玩的就想爬虫下载下来,所以看到这么多好看图片,我又"熟练"地掏出了python. 分析 这个网站长这样. 首先对腾讯这个网站进行分析. 这个每一个小图对应的div <ul>标签

【分享】在美国大学官网上查找课程教学资料

分享下个小心得,在美国大学的官网上有很多课程教学资料,等着我们去发现和下载. 我举个例子把,我找到了美国伊利诺伊大学的官网,发现了如下两个网页 第一个: 电子学院的课程介绍http://catalog.illinois.edu/courses-of-instruction/ece/第二个: 该大学的课程的资源链接https://courses.engr.illinois.edu/ 点到相应的课程中就能看到他们的提供的讲义和资料,虽然是英文的,不过也很有价值,同样的思路也可以放到mit这些更出名的

spring官网上下载历史版本的spring插件,springsource-tool-suite

spring官网下载地址(https://spring.io/tools/sts/all),历史版本地址(https://spring.io/tools/sts/legacy). 注:历史版本下载的都是装好插件的eclipse,而非我们需要的插件 目前官网上提供的下载地址只有springsource-tool-suite-3.9.5 (sts-3.9.5).而且只针对eclipse版本为4.8.0和4.7.3a有用,其他版本的sts地址都没有,那么我们要怎么获得我们用的eclipse版本的sts