处理文件 HDFS 它包含由“，”分隔的不同数量的字段。例如：

uid1, eid01, para1, para2, para3,para4,para5,timestamp
uid1, eid12, para56, para57, timestamp
uid3, eid42, para102,timestamp

字段的数目不是固定的。
现在我想把这些数据放到 Hive 包含4列和所有字段的表 'para..' 在一个柱状物中：

uid    eid              para                  datatime
  uid1  eid01  para1, para2, para3,para4,para5  timestamp
  uid1  eid12  para56, para57                   timestamp
  uid3  eid42  para102                          timestamp

数据量太大了，我不能用像这样的工具来处理它 AWK . 还有别的解决办法吗？
感谢您的帮助。