优秀的编程知识分享平台

网站首页 > 技术文章 正文

大数据Doris(六):编译 Doris遇到的问题

nanyue 2024-09-02 19:03:02 技术文章 17 ℃

编译 Doris遇到的问题


一、js_generator.cc:(.text+0xfc3c): undefined reference to `well_known_types_js’


查找 Doris 源码中的 js_embed,一般在三方库的 protobuf 下,直接移除掉,重新编译即可


find ./ -name js_embed
mv ./thirdparty/src/protobuf-3.5.1/src/js_embed ./



二、???????/lib64/libstdc++.so.6: version `GLIBCXX_3.4.21’ not found


问题的原因就是在使用 gcc 编译时,使用本地环境的库 libstdc++.so.6 中的方法时找不到需要的信息,一般是在安装或升级是没有把环境变量的这个库文件升级,解决方法如下:


find / -name "libstdc++.so*"
cd /usr/lib64
strings /usr/lib64/libstdc++.so.6 | grep GLIBC

# 查看 /usr/lib64 目录下的 libstdc 开头的文件
[root@node1 lib64]# ll libstdc*
lrwxrwxrwx 1 root root     19 Nov 19 09:07 libstdc++.so.6 -> libstdc++.so.6.0.19
-rwxr-xr-x 1 root root 995840 Sep 30 10:17 libstdc++.so.6.0.19

# 把高版本的拷贝到 /usr/lib64 下
cp /usr/local/gcc-7.3.0/lib64/libstdc++.so.6.0.24 ./
# 创建软连接
rm libstdc++.so.6
ln -s libstdc++.so.6.0.24 libstdc++.so.6



三、??????????????libatomic.so.1: cannot open shared object file: No such file or directory


编译三方包时如果报如下的错误


./comp_err: error while loading shared libraries: libatomic.so.1: cannot open shared object file: No such file or directory
make[3]: *** [include/mysqld_error.h] Error 127
make[2]: *** [extra/CMakeFiles/GenError.dir/all] Error 2
make[1]: *** [libmysql/CMakeFiles/mysqlclient.dir/rule] Error 2
make: *** [mysqlclient] Error 2



原因是安装 gcc 或升级之后,其中的 libatomic.so.1 包没有在环境变量中生效,我们直接将新版本 gcc 的安装目录下的 libatomic.so.1 软连到 /usr/lib64 下即可。


ln -s /usr/local/gcc-7.3.0/lib64/libatomic.so.1 /usr/lib64/libatomic.so.1



四、??????????????Could NOT find Curses (missing: CURSES_LIBRARY CURSES_INCLUDE_PATH)


在编译安装 GCC 7.3 时,其中我们安装了 ncurses-devel,如果忽略了这个,系统环境又没有安装,则在编译 Doris 时就会报这个错误,解决方法就是 yum 安装这个依赖。


yum install ncurses-devel



五、??????????????configure: error: Building GCC requires GMP 4.2+, MPFR 2.4.0+ and MPC 0.8.0+.


环境中缺少依赖,解决方法如下:


yum install  gmp  gmp-devel  mpfr  mpfr-devel  libmpc  libmpc-devel



六、??????????????error while loading shared libraries: libisl.so.15: cannot open shared object file: No such file or directory


这个问题比较隐蔽,通过访问 RPM Search搜索 libisl.so.15 库。




在查询出的结果中,我们查找 CentOS7 的条目,可以发下这个库为 libisl15-0.18-9.94.el7.x86_64.rpm,到这里问题就好解决了,我们直接下载这个包安装即可




wget ftp://ftp.pbone.net/mirror/ftp5.gwdg.de/pub/opensuse/repositories/home:/aevseev:/devel/CentOS7/x86_64/libisl15-0.18-9.94.el7.x86_64.rpm
rpm -ivh libisl15-0.18-9.94.el7.x86_64.rpm



七、??????????????Could not resolve dependencies for project org.apache:fe-core:jar:3.4.0: Failure to find com.sleepycat:je:jar:7.3.7


原因就是通过 https://repo.spring.io/libs-milestone/com/sleepycat/je/7.3.7/je-7.3.7.jar 下载包时需要用户认证,所以会下载失败,可以在 Maven 配置文件 setting.xml 中新增如下的仓库镜像,重新编译即可。


<mirror>
  <id>oracleReleases</id>
  <mirrorOf>oracleReleases</mirrorOf>
  <name>Oracle Released Java Packages</name>
  <url>http://download.oracle.com/maven</url>
</mirror>



八、??????????????A required class was missing while executing net.sourceforge.czt.dev:cup-maven-plugin:1.6-cdh:generate: org/sonatype/plexus/build/incremental/BuildContext


清除 Maven 本地仓库的 cup-maven-plugin(Maven 配置的仓库路径下的 net/sourceforge/czt/dev/cup-maven-plugin/1.6-cdh),为了防止其他镜像资源的影响,可以先将本地 Maven 配置文件中添加的其它镜像注释掉,可以只保留下面的一个镜像,用来可以正常下载 je-7.3.7.jar 依赖包。


</mirrors>
    <mirror>
      <id>oracleReleases</id>
      <mirrorOf>oracleReleases</mirrorOf>
      <name>Oracle Released Java Packages</name>
      <url>http://download.oracle.com/maven</url>
    </mirror>
</mirrors>



Doris 源码下的 fe/pom.xml 中的 <profiles> 标签里的检查下,可以修改为如下链接,然后再次执行编译即可


<!-- for general repository -->
<profile>
	<id>general-env</id>
	<activation>
		<property>
			<name>!env.CUSTOM_MAVEN_REPO</name>
		</property>
	</activation>

	<repositories>
		<repository>
			<id>central</id>
			<name>central maven repo https</name>
			<url>https://repo.maven.apache.org/maven2</url>
		</repository>
		<!-- for java-cup -->
		<repository>
			<!---<id>cloudera-thirdparty</id>
			<url>https://repository.cloudera.com/content/repositories/third-party/</url>-->
			<id>cloudera-public</id>
			<url>https://repository.cloudera.com/artifactory/public/</url>
		</repository>
		<!-- for bdb je -->
		<repository>
			<id>oracleReleases</id>
			<url>http://download.oracle.com/maven</url>
		</repository>
	</repositories>

	<pluginRepositories>
		<pluginRepository>
			<id>spring-plugins</id>
			<!--<url>https://repo.spring.io/plugins-release/</url>-->
			<url>https://repository.cloudera.com/artifactory/ext-release-local</url>
		</pluginRepository>
		<!-- for cup-maven-plugin -->
		<pluginRepository>
			<!--<id>cloudera-plugins</id>
			<url>https://repository.cloudera.com/content/groups/public/</url>-->
			<id>cloudera-public</id>
			<url>https://repository.cloudera.com/artifactory/public/</url>
		</pluginRepository>
	</pluginRepositories>
</profile>

Tags:

最近发表
标签列表