starrocks问题小结

20220315

starrocks连接hadoop源数据位置

colocate join 执行成功

20220314

集群是HA的情况下需要填

ui监控：域名：8030

聚合模型
rollup表索引，稀疏索引

数据模型
明细模型相当于数据的ods，dwd

冷热数据
冷数据不会再被更改，不会被加载进内存

宽表都是些聚合指标不是明细数据，列可能很多，但是行很少

主键模型费内存，全部加载到内存

CREATE TABLE `tb_onekey_goods_info_manual_match_test` (`id` bigint(20) NOT NULL COMMENT "业务主键 自增id",`goods_id` varchar(200) NULL COMMENT "商品id",`hz_goods_id` varchar(200) NULL COMMENT "合纵商品id",`remarks_status` int(11) NULL COMMENT "对码方法,0:算法规则"
) ENGINE=OLAP
PRIMARY KEY(`id`)
COMMENT "手动对码结果-商品信息表(商品粒度)"
DISTRIBUTED BY HASH(`id`) BUCKETS 4
PROPERTIES (
"replication_num" = "1",
"in_memory" = "false",
"storage_format" = "DEFAULT"
);创建非外部表

import pymysqlself.config_starrocks_onekey = {"host": "192.168.1.112","port": 9030,"user": "doris","password": "hezong2022","database": "onekey_bi","charset": "utf8",}
self.conn = pymysql.connect(**self.config_starrocks_onekey)

starrock如果是建立在mysql的基础之上的话,大部分关于mysql的操作都可以直接使用
可以直接使用pymysql,好像没有自增功能？没有replace into？

starrocks有按主键模型的（id进行更新,覆盖）

https://mp.weixin.qq.com/s/C7UzjdAQL9PTNXeSsVRjQA
基于StarRocks的极速实时数据分析实践

starrocks问题小结相关推荐

StarRocks Parser 源码解析
导读:欢迎来到 StarRocks 源码解析系列文章,我们将为你全方位揭晓 StarRocks 背后的技术原理和实践细节,助你逐步了解这款明星开源数据库产品.本期将主要介绍 StarRocks Par ...
StarRocks Analyzer 源码解析
导读:欢迎来到 StarRocks 源码解析系列文章,我们将为你全方位揭晓 StarRocks 背后的技术原理和实践细节,助你逐步了解这款明星开源数据库产品.本期将主要介绍 StarRocks Par ...
【阶段小结】协同开发——这学期的Git使用小结
[阶段小结]协同开发--这学期的Git使用小结一.Git简介 1. Git简单介绍 2. Git工作流程以及各个区域 3. Git文件状态变化二.Git安装&Git基本配置三.个人踩坑 ...
正则表达式(括号)、[中括号]、{大括号}的区别小结
正则表达式(括号).[中括号].{大括号}的区别小结 </h1><div class="clear"></div><div class=& ...
php中$_REQUEST、$_POST、$_GET的区别和联系小结
php中$_REQUEST.$_POST.$_GET的区别和联系小结作者: 字体:[增加减小] 类型:转载 php中有$_request与$_post.$_get用于接受表单数据,当时他们有何种区 ...
c cin.get()的用法小结_c语言中static 用法
static在c里面可以用来修饰变量,也可以用来修饰函数. 先看用来修饰变量的时候.变量在c里面可分为存在全局数据区.栈和堆里.其实我们平时所说的堆栈是栈而不是堆,不要弄混. int a ; int ...
linux 压缩文件夹格式,Linux下常见文件格式的压缩、解压小结
Linux下常见文件格式的压缩.解压小结 .tar 解包: tar xvf FileName.tar 打包:tar cvf FileName.tar DirName (注:tar是打包,不是压缩!) ...
设计模式：简单工厂、工厂方法、抽象工厂之小结与区别
简单工厂,工厂方法,抽象工厂都属于设计模式中的创建型模式.其主要功能都是帮助我们把对象的实例化部分抽取了出来,优化了系统的架构,并且增强了系统的扩展性. 本文是本人对这三种模式学习后的一个小结以及对他 ...
flash 入门课知识小结
一. 几种类型帧的小结:(关键帧.空白关键帧.普通帧) 1. 特点帧--是进行flash动画制作的最基本的单位,每一个精彩的flash动画都是由很多个精心雕琢的帧构成的,在时间轴上的每一帧都可以 ...

starrocks问题小结

starrocks问题小结相关推荐

最新文章

热门文章