笔者作为Apache Doris的开发者,平时感觉相关Doris的文章写的很少.主要是很多时候不知道应该去记录一些怎么样的问题,感觉写的不好就会很慌张.新的一年,希望记录自己在Doris开发过程之中所遇到一些有意思的事情.(只希望能坚持下来,别打脸~~) 言归正传,回到本篇想聊的问一个问题,笔者在开发ODBC of Doris的工作之中,发现通过MySQL 8.0的Driver连接Doris总是提示密码验证失败.但是由于开发工作繁忙,一直没有腾出手解决这个问题.最近重新抽时间梳理了一下这个问题,

Apache Doris 社区 2022 年的总体规划,包括待开展或已开展.以及已完成但需要持续优化的功能.文档.社区建设等多方面,我们期待有更多的小伙伴参与进来讨论.同时也希望多多关注Doris,给Doris加Star Doris 2022 Roadmap 之前写了在Centos下Apache Doris 外表使用方法及注意实现,但是不少用户是使用ubuntu系统,在这个系统下很多用户遇到ODBC外表导致BE服务宕机的问题,对此我专门在ubuntu 18.04下进行了测试 1.软件环境 操作系

前提:  安装mysql odbc驱动程序,目前只不支持8.0的最新版本驱动,个人使用的是5.1.12的驱动(不支持5.2以上版本),下载地址为: x64: https://cdn.mysql.com/archives/mysql-connector-odbc-5.1/mysql-connector-odbc-5.1.12-winx64.msi x32:https://cdn.mysql.com/archives/mysql-connector-odbc-5.1/mysql-connector-

学习PHP之前需要先搭建PHP运行的环境(即服务器+PHP+数据库)来使PHP成功运行,具体环境搭建教程可参考pharen(http://www.cnblogs.com/pharen/archive/2012/02/06/2340628.html)的教程(亲测可用),教程中一些资源链接可能已经失效,下面给出部分资源链接:PHP资源:http://windows.php.net/download#php-5.6 Apache(msi安装包)资源:http://archive.apache.org/

1. 安装docker 详情请参见本人博客 2. 编译doris 详情请参见doris官网文档 3. 在编译好的doris output文件夹下编写两个Dockerfile 3.1  Dockerfile_fe FROM centos:centos7.5.1804 RUN mkdir /home/palo/run/ -p # copy jdk and palo binary COPY jdk1..0_131/ /home/palo/run/jdk1..0_131/ COPY fe/ /home/

0 背景概述 Doris完全兼容了mysql协议,并且Doris FE本身通过多follower选举机制选举出master,可以保证fe本身的高可用性,也可以通过加入observer fe节点来提高fe的读并发能力.但是对于前端连接来讲,还是需要显示执行要连接的fe的url(jdbc)或host ip地址.通过这种方式,如果要访问的fe挂掉的话,上面的应用层就会出错.通过这种方式来访问Doris提供的服务,应用层代码是不够健壮的.Doris官方提供了几种fail over和load balanc

数据导入导出 导入table http://www.runoob.com/mysql/mysql-database-import.html 导出table http://www.runoob.com/mysql/mysql-database-export.html SELECT * FROM runoob_tbl INTO OUTFILE '/tmp/runoob.txt' 设置分隔符 SELECT a,b,a+b INTO OUTFILE '/tmp/result.text' FIELDS T

[任务四] #任务时间# 请于4月6日22:00前完成,在[打卡表格]处打卡.逾期尚未打卡的会被清退. 4.1 MySQL 实战 #学习内容# 数据导入导出 将之前创建的任意一张MySQL表导出,且是CSV格式 再将CSV表导入数据库 #作业# 项目七: 各部门工资最高的员工(难度:中等) 创建 Employee 表,包含所有员工信息,每个员工有其对应的 Id, salary 和 department Id. +----+-------+--------+--------------+ | Id

""" MySQL综合练习作业 """ # 1.自行创建测试数据: # 创建数据库 """ create database school; use school; """ # 创建表结构 """ create table class( cid int primary key auto_increment, caption char(10) not null,

今天在公司使用LS调度系统(百度内部的工具),执行远程脚本的时候,每次都失败. 脚本内容比较简单,其实就是将HDFS(AFS)中的数据插入到Palo(Doris)数据库中,脚本如下: mysql -h xxx -P -uxxx -p'xxx' -e "LOAD LABEL baijiahao.bjh_spider_view_count_${day}_${label_time} (DATA INFILE('afs://xxx/user/feed-bjh/database/spider_view_c

1. background in most cases, we want to execute sql script  in doris  routinely. using azkaban, to load data,etc.And we want to pass parameters to the sql script file. we can easily handle such situation in hive. 1.1 hive usage: using -hiveconf:  or

面试阶段大家基本都会问一些mysql的题,具体的高深理论以后再慢慢补充,但是刷题是不可避免的,下面直接上货 创建/删除表和索引系列 创建表 CREATE TABLE if not exists `test_date` ( `id` int(11) NOT NULL AUTO_INCREMENT, `date` date DEFAULT NULL, `temp` int(11) NOT NULL, `updateTime` timestamp NOT NULL DEFAULT '0000-00-0

元数据设计 如上图,Doris 的元数据主要存储4类数据: 用户数据信息.包括数据库.表的 Schema.分片信息等. 各类作业信息.如导入作业,Clone 作业.SchemaChange 作业等. 用户及权限信息 集群及节点信息 元数据目录 元数据目录通过 FE 的配置项 meta_dir 指定. bdb/ 目录下为 bdbje 的数据存放目录. image/ 目录下为 image 文件的存放目录. image.[logid] 是最新的 image 文件.后缀 logid 表明 image 所

概述 Nginx能够实现HTTP.HTTPS协议的负载均衡,也能够实现TCP协议的负载均衡.那么,问题来了,可不可以通过Nginx实现Apache Doris数据库的负载均衡呢?答案是:可以.接下来,就让我们一起探讨下如何使用Nginx实现Apache Doris的负载均衡. 环境准备 注意:使用Nginx实现Apache Doris数据库的负载均衡,前提是要搭建Apache Doris的环境,Apache Doris FE的IP和端口分别如下所示, 这里我是用一个FE来做演示的,多个FE只需要

Apache Doris 社区 2022 年的总体规划,包括待开展或已开展.以及已完成但需要持续优化的功能.文档.社区建设等多方面,我们期待有更多的小伙伴参与进来讨论.同时也希望多多关注Doris,给Doris加Star Apache Doris 2022 Roadmap 该使用指南之针对Ubuntu环境来进行测试的,Centos环境可以参考,但是不确保一定能成功. 1.软件环境 操作系统:ubuntu 18.04 Apache Doris :0.15 Postgresql数据库:Postgre

1.软件环境 操作系统:CentOS 7.8 Apache Doris :0.15 Postgresql数据库:oracle 19c UnixODBC:2.3.1 Oracle ODBC :instantclient-odbc-linux.x64-19.13.0.0.0dbru 2.Oracle安装部署 因为是测试没有Oracle的环境,由于安装比较繁琐耗时,所以通过Docker进行快速安装部署,下面给出各个版本的Docker镜像地址 2.1 Oracle 21C # 从Docker hub下载

1.软件环境 操作系统:ubuntu 18.04 Apache Doris :0.15 Postgresql数据库:oracle 19c UnixODBC:2.3.4 Oracle ODBC :instantclient-odbc-linux.x64-19.13.0.0.0dbru 2.Oracle安装部署 因为是测试没有Oracle的环境,由于安装比较繁琐耗时,所以通过Docker进行快速安装部署 2.1 制作镜像 安装方法是通过官方dockerfile自己编译镜像安装, root@iZbp1

本文是在CentOS 7.9下测试通过 使用的Doris是:0.15.0 unixODBC版本是:2.3.1 1.PostgreSQL 以下是PostgreSQL数据库版本和PostgreSQL ODBC驱动版本和Apache Doris版本适配没问题列表     12.9 postgresql12-odbc-13.02.0000 13.5 postgresql13-odbc-13.02.0000 14.1 postgresql14-odbc-13.02.0000 9.6.24 postgres

集群制作Author:苏奕嘉脚本研发Author:种益调研测试Author:杨春东 前言 Apache Doris是当下非常火热和流行的MPP架构OLAP数据库,很多同学想自学/测试Doris的使用和能力,但是又苦于没有环境或者畏惧冗长的编译+搭建过程,整个过程极大的劝退了很多有些尝试意愿.但又由于各种客观因素无法承担过高学习成本导致尝试失败的同学,故此Apache Doris社区三位社区同学苏奕嘉.种益.杨春东制作了三个不同设计的版本安装方式并提供下载,以此降低大家的学习门槛和提升学习/测试效

  2022年4月7日,Tapdata 正式启动 PDK 插件生态共建计划,致力于全面连接数据孤岛,加速构建更加开放的数据生态,以期让各行各业的使用者都能释放数据的价值,随时获取新鲜的数据.截至目前,已有超10家数据库领域活力代表,作为首批生态共建伙伴加入:     作为 Tapdata 生态的一员,Aerospike 正在依靠 Tapdata 平台,借助联合解决方案为所有上下游数据驱动业务提供亚毫秒级性能的实时,完整,全球分布的,强一致性存储能力的企业数据.我们与 Tapdata 合作在生态建