首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >如何在使用avro schema编写时用拉丁语pig创建复杂记录

如何在使用avro schema编写时用拉丁语pig创建复杂记录
EN

Stack Overflow用户
提问于 2013-08-22 21:56:49
回答 1查看 233关注 0票数 0

我在拉丁猪中有以下关系,我需要将它存储到一个avro-schema文件中:

代码语言:javascript
复制
    data = load 'data.dat' as (a: long, b: chararray, c: long);
...
    STORE data INTO 'file' USING avroStorage();

但我需要以下格式的数据:

代码语言:javascript
复制
Record 1:
{
  "a" : {
    "long" : 2
  },
  "complex" : {
      "b" : {
        "string" : "abc"
      },
      "c" : {
        "long" : 3
      }
   }
}
...
EN

回答 1

Stack Overflow用户

发布于 2013-08-23 02:53:10

我还没有测试这段代码,看看它是如何转换成avro模式的,但尝试从这段代码开始

代码语言:javascript
复制
data = load 'data.dat' as (a: long, b: chararray, c: long);    
transformed = foreach data generate a, TOTUPLE(b, c);        
STORE transformed INTO 'file' USING avroStorage();

TOTUPLE - http://pig.apache.org/docs/r0.11.1/func.html#totuple文档

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/18382551

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档