当前位置: 首页 > news >正文

.net空网站做九九乘法表企业微信功能详细介绍

.net空网站做九九乘法表,企业微信功能详细介绍,中国建设银行网站招聘,西安十强广告公司名单意向之外,又清理之中 背景: StarRocks各方面碾压相同类型的数据库,最近我们要从生成HIVE导历史数据(ORC格式)到StarRocks,前期小测一下,在测试是没问题,上生产先导2个月的数据&…

意向之外,又清理之中

背景:

StarRocks各方面碾压相同类型的数据库,最近我们要从生成HIVE导历史数据(ORC格式)到StarRocks,前期小测一下,在测试是没问题,上生产先导2个月的数据,大概10T,但是在测试过程中,发现了一个问题。

LOAD LABEL test_db.label14
(DATA INFILE("hdfs://<hdfs_host>:<hdfs_port>/user/starrocks/data/input/example14.orc")INTO TABLE table14FORMAT AS "orc"(col1, col2, col3)
)
WITH BROKER
("username" = "<hdfs_username>","password" = "<hdfs_password>"
);

问题:

type:LOAD_RUN_FAIL; msg:Column: s_customer is not found in file: hdfs://xxx.xx.xx.x:9000/user/starrocks/data/input/example14.orc

很明显的问题,在源数据文件中没找到这个字段,想了想,历史数据以orc格式存在HDFS,orc列式存储,如果表结构修改,块里面的数据schema是不变化的,当StarRocks解析源文件块的时候,是找不到该字段的,自然要报错了;
而我们的业务对表结构是按需增加表字段,所以这个问题不可避免。

如何解决?

当用户有新增字段操作的时候,实际上我们维护了字段和表结构关系一张表,每增加一个或者多个字段都有相应的创建时间,那么我们用broker load导入数据的时候需要查一次数据库,这样的话关系就建立起来了,问题也解决了。

暂时没找到可以通过设置StarRocks参数来避免遇到的这个问题的。如果有请告诉我,谢谢。

http://www.yayakq.cn/news/161635/

相关文章:

  • 阿里巴巴网站装修怎么做全屏大图注册软件开发公司需要什么条件
  • 如何对网站的文件和资源进行优化?wordpress媒体库一直加载
  • 如何查网站死链用wordpress数据展示
  • 网站首页 如何设置网站开发程序哪个好
  • 邯郸做网站外包做服装哪个网站图片多
  • 各大网站响应生态建设网站 乱码
  • 动易网站模板免费网站优化成本
  • 网站的主域名深圳创业板
  • 徐汇网站推广公司wordpress 修改发布时间
  • 南宁网站建设找哪家好网站建设毕业答辩ppt模板下载
  • 一个虚拟主机可以放几个网站动漫制作app
  • 单位网站建设规划阿里巴巴网站基础建设首保服务
  • 海外英文建站做悬浮导航的网站
  • 百度云昆明seo关键词排名
  • 做网站找哪个软件品质好价格低的广告词
  • 购物网站开发设计思路商场设计任务书
  • 如何做网站店铺的模板怎么样创建一个网站
  • 新开传奇网站刚开一秒重庆主城推广网站建设
  • 陕西网站建设公司哪有企业网站推广渠道
  • tomcat做网站并发外网IP访问wordpress
  • 平面设计用什么软件最好seo翻译
  • 酒店网站建设描述沈阳电子商务网站建设
  • 微信网站是多少钱注册一个域名需要多少钱
  • 网站放在服务器上专业制作标书公司哪家好一点
  • 网站认证费怎么做分录网页设计作品模板
  • 网站开发工具发展史昆明网站建设索王道下拉
  • 瑞昌建站公司变装的他 wordpress
  • 个人制作的网站作者联合开发的小说网站叫什么
  • 在线设计外卖平台店招学seo建网站
  • 青岛需要做网站的公司有哪些怎样才能申请网站