特定のglibcバージョンにリンクするにはどうすればよいですか?


110

Ubuntu Lucid 10.04 PCで何かをコンパイルすると、glibcにリンクされます。Lucidはglibcの2.11を使用します。古いglibcがインストールされている別のPCでこのバイナリを実行すると、glibc 2.11がないとコマンドが失敗します...

私の知る限り、glibcはシンボルのバージョン管理を使用しています。gccに特定のシンボルバージョンを強制的にリンクさせることはできますか?

具体的には、ARM用のgccクロスツールチェーンをコンパイルしてみます。


58
これは、解決策が常に「やるべきではない」であるような、本当に厄介なLinuxの問題の1つです。もちろん、「それは機能せず、まだ誰も修正していない」という意味です。
Timmmm、2011年

3
人々はWindowsのDLL地獄について不平を言った。私は、Linuxを覚えて、いくつかの愛好家は、Windowsの世界から特にひどい例として、そのアップを持参しよう。10年以上前にLinux開発を始めてこの問題に遭遇したとき、私は顔を手に埋めました。
0xC0000022L 2017年

回答:


69

あなたはglibcがシンボルのバージョン管理を使用しているという点で正しい。興味があれば、glibc 2.1で導入されたシンボルバージョン管理の実装をここで説明します。これは、ここで説明する Sunのシンボルバージョン管理スキーマの拡張です

1つのオプションは、バイナリを静的にリンクすることです。これはおそらく最も簡単なオプションです。

また、chrootビルド環境で、またはglibc - new => glibc - oldクロスコンパイラーを使用してバイナリをビルドすることもできます。

よるとhttp://www.trevorpounds.comブログ記事古いバージョン管理シンボル(glibcでは)へのリンク、同じ使用して、それが有効であるとして、古い1に対してリンクする任意のシンボルを強制することが可能である.symver擬似-opバージョン化されたシンボルを最初に定義するために使用されます。次の例は、ブログ投稿からの抜粋です。

次の例では、glibcのリアルパスを使用していますが、それが古い2.2.5バージョンにリンクされていることを確認してください。

#include <limits.h>
#include <stdlib.h>
#include <stdio.h>

__asm__(".symver realpath,realpath@GLIBC_2.2.5");
int main()
{
    const char* unresolved = "/lib64";
    char resolved[PATH_MAX+1];

    if(!realpath(unresolved, resolved))
        { return 1; }

    printf("%s\n", resolved);

    return 0;
}

18
glibcは静的リンクをサポートしていません-静的にリンクされたglibcプログラムは、libcバージョンが異なるシステムでは正常に機能しません。
モニカを思い出す'19年

5
glibc libc.aは引き続き存在しますが、glibcはこれをサポートする場合がありますが、推奨されません(Drepper)。自明ではないプログラム、特にNSSを使用するもの(FAQの回避策)で問題が発生します。
mr.spuratic 14

20

-staticとリンクします-staticでリンクすると、リンカーは実行可能ファイル内にライブラリを埋め込むため、実行可能ファイルは大きくなりますが、プログラムはシステムのライブラリではなく独自のライブラリを使用するため、古いバージョンのglibcを使用するシステムで実行できます。 。


55
多くの場合、これを行う必要があるのは、クローズドソースアプリケーションを配布しているためです。この場合、ライセンス上の理由から静的にリンクすることは許可されていないため(そうすると、すべてのソースコードをリリースする必要があります)、-staticを使用して注意する必要があります。
Malvineous

3
一方、少なくとも1つは多くの場合musl-libcに頼ることができますが、C ++プログラムでは状況がさらに複雑になる可能性があるため、シンボルバージョンの指定が依然として必要になる場合があります。
0xC0000022L 2017年

16

セットアップ1:専用GCCなしで独自のglibcをコンパイルして使用する

シンボルのバージョン管理のハックだけでは不可能に思えるので、一歩進んでglibcを自分でコンパイルしてみましょう。

この設定は機能する可能性があり、GCCツールチェーン全体(glibcのみ)を再コンパイルしないので迅速です。

ただし、、、などのホストCランタイムオブジェクトを使用し、glibcによって提供されるcrt1.oためcrti.o、信頼性は高くありませんcrtn.o。これについては、https//sourceware.org/glibc/wiki/Testing/Builds?action = recall&rev = 21#Compile_against_glibc_in_an_installed_locationで言及されています rev = 21#Compile_against_glibc_in_an_installed_locationこれらのオブジェクトがglibcが依存している初期設定を行うため、状況が異常にクラッシュしたとしても驚かないでしょうそして驚くほど微妙な方法。

より信頼性の高いセットアップについては、以下のセットアップ2を参照してください。

glibcをビルドしてローカルにインストールします。

export glibc_install="$(pwd)/glibc/build/install"

git clone git://sourceware.org/git/glibc.git
cd glibc
git checkout glibc-2.28
mkdir build
cd build
../configure --prefix "$glibc_install"
make -j `nproc`
make install -j `nproc`

セットアップ1:ビルドを確認する

test_glibc.c

#define _GNU_SOURCE
#include <assert.h>
#include <gnu/libc-version.h>
#include <stdatomic.h>
#include <stdio.h>
#include <threads.h>

atomic_int acnt;
int cnt;

int f(void* thr_data) {
    for(int n = 0; n < 1000; ++n) {
        ++cnt;
        ++acnt;
    }
    return 0;
}

int main(int argc, char **argv) {
    /* Basic library version check. */
    printf("gnu_get_libc_version() = %s\n", gnu_get_libc_version());

    /* Exercise thrd_create from -pthread,
     * which is not present in glibc 2.27 in Ubuntu 18.04.
     * /programming/56810/how-do-i-start-threads-in-plain-c/52453291#52453291 */
    thrd_t thr[10];
    for(int n = 0; n < 10; ++n)
        thrd_create(&thr[n], f, NULL);
    for(int n = 0; n < 10; ++n)
        thrd_join(thr[n], NULL);
    printf("The atomic counter is %u\n", acnt);
    printf("The non-atomic counter is %u\n", cnt);
}

コンパイルして実行test_glibc.sh

#!/usr/bin/env bash
set -eux
gcc \
  -L "${glibc_install}/lib" \
  -I "${glibc_install}/include" \
  -Wl,--rpath="${glibc_install}/lib" \
  -Wl,--dynamic-linker="${glibc_install}/lib/ld-linux-x86-64.so.2" \
  -std=c11 \
  -o test_glibc.out \
  -v \
  test_glibc.c \
  -pthread \
;
ldd ./test_glibc.out
./test_glibc.out

プログラムは期待される出力をします:

gnu_get_libc_version() = 2.28
The atomic counter is 10000
The non-atomic counter is 8674

コマンドはhttps://sourceware.org/glibc/wiki/Testing/Builds?action=recall&rev=21#Compile_against_glibc_in_an_installed_locationから変更されました--sysrootが、次のエラーで失敗しました:

cannot find /home/ciro/glibc/build/install/lib/libc.so.6 inside /home/ciro/glibc/build/install

それを削除しました。

ldd出力は、作成したlddとライブラリが実際に期待どおりに使用されていることを確認します。

+ ldd test_glibc.out
        linux-vdso.so.1 (0x00007ffe4bfd3000)
        libpthread.so.0 => /home/ciro/glibc/build/install/lib/libpthread.so.0 (0x00007fc12ed92000)
        libc.so.6 => /home/ciro/glibc/build/install/lib/libc.so.6 (0x00007fc12e9dc000)
        /home/ciro/glibc/build/install/lib/ld-linux-x86-64.so.2 => /lib64/ld-linux-x86-64.so.2 (0x00007fc12f1b3000)

gcc先に述べたが、私はそれを回避する方法がわからないように悪いです私のホストランタイムオブジェクトを使用したことをコンパイル、デバッグ出力を示し、例えば、それが含まれています。

COLLECT_GCC_OPTIONS=/usr/lib/gcc/x86_64-linux-gnu/7/../../../x86_64-linux-gnu/crt1.o

セットアップ1:glibcを変更する

次に、glibcを次のように変更します。

diff --git a/nptl/thrd_create.c b/nptl/thrd_create.c
index 113ba0d93e..b00f088abb 100644
--- a/nptl/thrd_create.c
+++ b/nptl/thrd_create.c
@@ -16,11 +16,14 @@
    License along with the GNU C Library; if not, see
    <http://www.gnu.org/licenses/>.  */

+#include <stdio.h>
+
 #include "thrd_priv.h"

 int
 thrd_create (thrd_t *thr, thrd_start_t func, void *arg)
 {
+  puts("hacked");
   _Static_assert (sizeof (thr) == sizeof (pthread_t),
                   "sizeof (thr) != sizeof (pthread_t)");

次に、glibcを再コンパイルして再インストールし、プログラムを再コンパイルして再実行します。

cd glibc/build
make -j `nproc`
make -j `nproc` install
./test_glibc.sh

そして、私たちは見hacked期待通りに印刷された数回。

これは、ホストのものではなく、コンパイルしたglibcを実際に使用したことをさらに裏付けています。

Ubuntu 18.04でテスト済み。

設定2:crosstool-NGの初期設定

これは、セットアップ1の代替であり、それは私がこれまで達成した最も正しいセットアップです:すべては、私はCランタイムのようなオブジェクトを含む、観察できる限り正確であるcrt1.ocrti.ocrtn.o

このセットアップでは、必要なglibcを使用する完全な専用GCCツールチェーンをコンパイルします。

この方法の唯一の欠点は、ビルドに時間がかかることです。しかし、それより少ないもので本番環境にセットアップするリスクを負うことはありません。

crosstool-NGは、GCC、glibc、binutilsなど、ソースからすべてをダウンロードしてコンパイルするスクリプトのセットです。

はい、GCCビルドシステムは非常に悪いので、そのために別のプロジェクトが必要です。

crosstool-NGは追加のフラグなしで実行可能ファイルを構築することをサポートしていないため、この設定は完全ではありません-Wl。しかし、すべてが機能しているように見えるため、これは不便なだけです。

crosstool-NGを取得して構成します。

git clone https://github.com/crosstool-ng/crosstool-ng
cd crosstool-ng
git checkout a6580b8e8b55345a5a342b5bd96e42c83e640ac5
export CT_PREFIX="$(pwd)/.build/install"
export PATH="/usr/lib/ccache:${PATH}"
./bootstrap
./configure --enable-local
make -j `nproc`
./ct-ng x86_64-unknown-linux-gnu
./ct-ng menuconfig

私が見ることができる唯一の必須のオプションは、正しいカーネルヘッダーを使用するためにホストのカーネルバージョンと一致させることです。次のコマンドを使用して、ホストのカーネルバージョンを見つけます。

uname -a

これは私を示しています:

4.15.0-34-generic

だからmenuconfig私はします:

  • Operating System
    • Version of linux

だから私は選択します:

4.14.71

これは最初の同等または古いバージョンです。カーネルには下位互換性があるため、古いものにする必要があります。

これで次のようにビルドできます:

env -u LD_LIBRARY_PATH time ./ct-ng build CT_JOBS=`nproc`

コンパイルが完了するまで約30分から2時間待ちます。

セットアップ2:オプション構成

.config我々はして生成されたこと./ct-ng x86_64-unknown-linux-gnuがあります。

CT_GLIBC_V_2_27=y

これを変更するには、次のmenuconfigようにします。

  • C-library
  • Version of glibc

を保存.configし、ビルドを続行します。

それとも、あなたが進んで、最新のgitからのglibcを使用し、独自のglibcのソース、例えばを使用したい場合は、次のように

  • Paths and misc options
    • Try features marked as EXPERIMENTAL:trueに設定
  • C-library
    • Source of glibc
      • Custom location: イエスと言う
      • Custom location
        • Custom source location:glibcソースを含むディレクトリを指す

ここで、glibcは次のように複製されました。

git clone git://sourceware.org/git/glibc.git
cd glibc
git checkout glibc-2.28

セットアップ2:テストする

必要なツールチェーンを構築したら、次のコマンドでテストします。

#!/usr/bin/env bash
set -eux
install_dir="${CT_PREFIX}/x86_64-unknown-linux-gnu"
PATH="${PATH}:${install_dir}/bin" \
  x86_64-unknown-linux-gnu-gcc \
  -Wl,--dynamic-linker="${install_dir}/x86_64-unknown-linux-gnu/sysroot/lib/ld-linux-x86-64.so.2" \
  -Wl,--rpath="${install_dir}/x86_64-unknown-linux-gnu/sysroot/lib" \
  -v \
  -o test_glibc.out \
  test_glibc.c \
  -pthread \
;
ldd test_glibc.out
./test_glibc.out

正しいランタイムオブジェクトが使用されたことを除いて、すべてがセットアップ1と同様に機能しているようです。

COLLECT_GCC_OPTIONS=/home/ciro/crosstool-ng/.build/install/x86_64-unknown-linux-gnu/bin/../x86_64-unknown-linux-gnu/sysroot/usr/lib/../lib64/crt1.o

セットアップ2:効率的なglibc再コンパイルの試行に失敗しました

以下で説明するように、それはcrosstool-NGでは不可能のようです。

再構築するだけなら;

env -u LD_LIBRARY_PATH time ./ct-ng build CT_JOBS=`nproc`

次に、カスタムglibcソースの場所への変更が考慮されますが、すべてを最初から構築するため、反復的な開発には使用できません。

私たちが行う場合:

./ct-ng list-steps

ビルド手順の概要がわかります。

Available build steps, in order:
  - companion_tools_for_build
  - companion_libs_for_build
  - binutils_for_build
  - companion_tools_for_host
  - companion_libs_for_host
  - binutils_for_host
  - cc_core_pass_1
  - kernel_headers
  - libc_start_files
  - cc_core_pass_2
  - libc
  - cc_for_build
  - cc_for_host
  - libc_post_cc
  - companion_libs_for_target
  - binutils_for_target
  - debug
  - test_suite
  - finish
Use "<step>" as action to execute only that step.
Use "+<step>" as action to execute up to that step.
Use "<step>+" as action to execute from that step onward.

したがって、いくつかのGCCステップと絡み合ったglibcステップが存在することがわかります。これは特にのlibc_start_filescc_core_pass_2に来cc_core_pass_1ます。

1つのステップのみをビルドするには、最初の.configビルドのオプションで[ 中間ステップを保存]を設定する必要があります。

  • Paths and misc options
    • Debug crosstool-NG
      • Save intermediate steps

そしてあなたは試すことができます:

env -u LD_LIBRARY_PATH time ./ct-ng libc+ -j`nproc`

残念ながら、https+//github.com/crosstool-ng/crosstool-ng/issues/1033#issuecomment-424877536で言及されているように必須

ただし、中間ステップで再起動すると、インストールディレクトリがそのステップでの状態にリセットされることに注意してください。つまり、再構築されたlibcがありますが、このlibcでビルドされた最終的なコンパイラはありません(したがって、libstdc ++のようなコンパイラライブラリもありません)。

そして基本的にはまだ再構築が遅すぎて開発に実行できないため、crosstool-NGにパッチを当てずにこれを克服する方法はわかりません。

さらに、libcステップから開始しても、からソースを再度コピーするようには見えなかったためCustom source location、このメソッドは使用できなくなりました。

ボーナス:stdlibc ++

C ++標準ライブラリにも興味がある場合のボーナス:GCC libstdc ++ C ++標準ライブラリソースを編集および再構築する方法


musl-libcCランタイムに関する限り、別のオプションです。
0xC0000022L

0

私の意見では、最も遅延したソリューション(特に、最新の最先端のC / C ++機能、または最新のコンパイラー機能に依存していない場合)はまだ言及されていなかったので、ここに示します。

サポートしたい最も古いGLIBCを使用してシステムを構築するだけです。

このような古いディストリビューションをPCで直接使用したくない場合でも、chroot、KVM / Virtualbox、dockerなどのテクノロジを使用すると、これは実際には非常に簡単です。詳細には、ソフトウェアの最大のポータブルバイナリを作成するには、次の手順に従うことをお勧めします。

  1. sandbox / virtualization / ...の毒を選んで、それを使用して仮想の古いUbuntu LTSを取得し、デフォルトでそこにあるgcc / g ++でコンパイルします。これにより、GLIBCがその環境で使用可能なGLIBCに自動的に制限されます。

  2. 基本的なライブラリの外部の外部ライブラリに依存することは避けてください。たとえば、glibc、libGL、libxcb / X11 / wayland、libasound / libpulseaudioなどのグランドレベルのシステムのものを動的にリンクする必要があります。 libs /可能な場合は一緒に発送します。特にイメージローダー、マルチメディアデコーダーなどの自己完結型ライブラリは、静的に出荷すると、他のディストリビューションでの破損を少なくすることができます(たとえば、別のメジャーバージョンのどこかにのみ存在する場合)。

そのアプローチでは、手動でシンボルを微調整することなく、完全に静的なバイナリ(glibcがそれを嫌うためより複雑なプログラムで壊れる可能性があり、ライセンスの問題が発生する可能性があります)なしで、設定なしで古いGLIBC互換のバイナリを取得しますカスタムツールチェーン、カスタムglibcコピーなどをセットアップします。

弊社のサイトを使用することにより、あなたは弊社のクッキーポリシーおよびプライバシーポリシーを読み、理解したものとみなされます。
Licensed under cc by-sa 3.0 with attribution required.