检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
准备弹性云服务器 - 如果客户端工具的运行环境为Linux环境,您需要准备一台和Doris集群在相同虚拟私有云的Linux弹性云服务器作为客户端主机。 如果客户端工具的运行环境为Windows环境,您需要准备一台和Doris集群在相同虚拟私有云的Windows弹性云服务器作为客户端主机。
Doris应用开发指导 创建Doris连接 Doris组件使用规范
部分导入功能也会由系统自动生成。 Label是用于保证对应的导入任务,仅能成功导入一次。一个被成功导入的Label,再次使用时,会被拒绝并报错Label already used。通过这个机制,可以在Doris侧做到At-Most-Once语义。如果结合上游系统的At-Least
获取集群ID 在调用接口的时候部分URL中需要填入集群ID(cluster_id),所以需要获取到集群ID。获取集群ID步骤如下: 登录CloudTable管理控制台。 在左侧导航栏,单击“集群管理”。 在集群列表中找到所需要的集群,然后单击集群名称,进入集群“详情”页面。 在详情页面查看集群ID。
Core节点 计算规格:4U16G。 存储规格:高IO,容量400GB/节点。 节点数量:3个。 计费构成分析 用了一段时间后,用户发现云服务器当前规格无法满足业务需要,于2023/03/18 15:30:00对集群扩容,扩容规格如下: 表1 变更计费模式 计费模式 计算规则 付费周期
中“后端服务器组”右边的链接。 进入后端服务器页面,单击“后端服务器”页签,在IP类型后端处查看后端服务器。 图2 查看后端服务器 如果集群扩容,则需要更新ELB的后端服务器。 步骤五:使用ELB地址访问Doris集群 集群安全组是否有添加ELB子网。 登录表格存储服务控制台。 进入“集群管理
终端节点 终端节点(Endpoint)即调用API的请求地址,不同服务不同区域的终端节点不同。 您可以从地区和终端节点中查询所有服务的终端节点。 父主题: 使用前必读
HBase客户端的服务器。客户端安装方法请参考使用HBase Shell连接HBase普通集群 把SequenceFile文件目录上传到HBase的客户端所在服务器,假设存放目录为“/tmp/sequencefile”。 Import工具需要在客户端主机的操作系统的shell界面中
Doris的数据磁盘空间如果不加以控制,会因磁盘写满而导致进程不可写。因此我们监测磁盘的使用率和剩余空间,通过设置不同的警戒水位,来控制Doris系统中的各项操作,尽量避免发生磁盘被写满的情况。 如何调整数据均衡的灵敏度? BE定期(每隔一分钟)会向FE汇报一次磁盘使用情况。FE记录这些
安全组用来实现安全组内和安全组间弹性云服务器的访问控制,加强弹性云服务器的安全保护。用户可以在安全组中定义各种访问规则,这些规则可以限定弹性云服务器的哪些端口或者协议可以访问,这些访问规则可以作用在进出虚拟机的网络访问上。当弹性云服务器加入该安全组后,即受到这些访问规则的保护。不属于该安全组的弹性云服务器,是无法同安全组内的弹性云服务器通信的。
server端口 步骤二:准备弹性云服务器 购买弹性云服务器,登录ECS控制台。 控制台左上角选择区域。 单击页面右上角“购买弹性云服务器”,进入配置界面。 配置弹性云服务器参数:基础配置、实例、操作系统、存储备份、网络、安全组、公网访问、云服务器管理、高级配置、购买量。 VPC、子网、安全组与集群保持一致。
导入数据至Doris集群 导入数据至Doris集群方式介绍 使用Broker Load方式导入数据至Doris集群 使用Stream Load方式导入数据至Doris集群 父主题: 使用Doris
创建集群后,需要下载客户端并安装客户端,安装客户端后,用户才可以借助SSH工具连接集群。 - 准备弹性云服务器 - 如果客户端工具的运行环境为Linux环境,您需要准备一台和StarRocks集群在相同虚拟私有云的Linux弹性云服务器作为客户端主机。 如果客户端工具的运行环境为Windows环境,您需要准备
Doris企业级能力增强 配置Doris租户 配置Doris连接数据源 父主题: 使用Doris
StarRocks的后端节点,主要负责数据存储和SQL计算等工作。 Leader Leader从Follower中自动选出,FE Leader提供元数据读写服务,Follower和Observer只有读取权限,无写入权限。 Follower Follower只有元数据读取权限,无写入权限,Follower参与Leader选举。
SET_VAR(query_timeout = xxx*/ from table类似这样通过Hint方式去设置Session会话变量,不要设置全局的系统变量。 父主题: Doris组件使用规范
ickHouse的数据也是按照列存储。如果使用select *,会加重系统的压力。 【规则】通过limit限制查询返回的数据量,节省计算资源、减少网络开销。 如果返回的数据量过大,客户端有可能出现内存溢出等服务异常。在前端使用ClickHouse的场景下,如果要查询的数据量比较大
返回结果 状态码 请求发送以后,您会收到响应,包含状态码、响应消息头和消息体。 状态码是一组从1xx到5xx的数字代码,状态码表示了请求响应的状态。 对于获取用户Token接口,如果调用后返回状态码为“201”,则表示请求成功。 响应消息头 对应请求消息头,响应同样也有消息头,如“Content-Type”。
获取账号ID 在调用接口的时候,部分URL中需要填入账号ID,所以需要先在管理控制台上获取到账号ID。账号ID获取步骤如下: 登录CloudTable控制台。 单击用户名,在下拉列表中单击“我的凭证”。 在“API凭证”页面中查看账号ID。 图1 账号ID 父主题: 附录
StarRocks应用场景 实时数据分析与报表 场景特点:业务需要秒级或者分钟级延迟的数据分析,替代传统的报表。主要应用于实时监控大屏和企业级实时BI报表。 优势: 支持高吞吐的实时数据导入。 亚秒级相应复杂查,适合交互式分析。 用户行为分析 场景特点:处理用户画像、行为路径分析