Установите LD_LIBRARY_PATH перед импортом в Python

ОБНОВЛЕНИЕ: см. РЕДАКТИРОВАНИЕ ниже.

Я хотел бы использовать:

import os

os.environ['LD_LIBRARY_PATH'] = os.getcwd()  # or whatever path you want

Это устанавливает переменную среды LD_LIBRARY_PATH для продолжительности / времени жизни выполнения только текущего процесса.

РЕДАКТИРОВАТЬ: похоже, что это необходимо установить перед запуском Python: Изменение LD_LIBRARY_PATH во время выполнения для ctypes

Поэтому я предлагаю использовать сценарий оболочки .sh (или .py, если вы настаиваете). Кроме того, как указал @chepner, вы можете рассмотреть возможность установки ваших .so файлов в стандартном месте (в пределах virtualenv).

См. Также Установка LD_LIBRARY_PATH изнутри Python

Мое решение этой проблемы - поместить это как первую строку скрипта Python (вместо обычного shebang):

exec env LD_LIBRARY_PATH=/some/path/to/lib /path/to/specific/python -x "$0" "$@"

А вот как это работает:

• без shebang текущая оболочка обрабатывает файл как сценарий оболочки,
• "exec" гарантирует, что эта первая строка также будет последней командой из этого файла, выполняемой оболочкой,
• "env" используется здесь для установки любых переменных среды, например LD_LIBRARY_PATH,
• можно указать точный путь к интерпретатору Python или "env" может найти его в PATH,
• "-x" - это параметр Python, который заставляет интерпретатор Python игнорировать первую строку,
• «$ 0» - это имя скрипта, «$ @» заменяется позиционными параметрами.

Python, когда получает значения переменных среды, как в os.environ[‘LD_LIBRARY_PATH’] или os.environ[‘PATH’], он копирует значения в словарь из среды родительского процесса, обычно bash (среда процесса bash переносится в дочерний процесс, запущенный экземпляр python).

вы можете увидеть этот раздел переменных среды с выводом команды env из bash.

вы также можете увидеть / прочитать эти данные env из /proc/<pid>/environ, введя бесконечный цикл (while 1: pass) после изменения любой переменной среды.

Если вы видите / читаете это значение переменной / данные из /proc/<pid>/environ после его изменения внутри скрипта python, вы увидите, что данные реальной переменной не изменяются, хотя скрипт python показывает измененное значение ключа словаря, обновленное.

Что на самом деле происходит, когда вы изменяете переменную env внутри скрипта python, как в os.environ['LD_LIBRARY_PATH']='/<new_location>', так это то, что она просто обновляет значение в локальном словаре, которое не отображается в раздел переменной env процесса. Следовательно, он не будет распространяться полностью назад для отражения в среде текущего процесса, потому что ТОЛЬКО локальный словарь был изменен / обновлен / заполнен.

Следовательно, если мы хотим, чтобы была отражена новая переменная среды, мы должны перезаписать образ памяти процесса новыми данными переменной среды, используя execv.

Пример:

new_lib = '/<new_location>'
if not new_lib in os.environ['LD_LIBRARY_PATH']:
    os.environ['LD_LIBRARY_PATH'] += ':'+new_lib
    try:
        os.execv(sys.argv[0], sys.argv)
    except Exception as e:
        sys.exit('EXCEPTION: Failed to Execute under modified environment, '+e)

import xyz
#do something else

Ограничение: в идеале python не должен допускать такую ​​модификацию os.environ переменных. Но поскольку нет постоянного типа данных словаря, он позволяет изменять переменную данных. Абсолютно бесполезно изменять значения, поскольку это не дает ничего полезного для отражения в реальной среде выполняемого процесса, если не используется execv.

Решение отлично работает, если env повторно запускается

import os

os.environ['LD_LIBRARY_PATH'] = os.getcwd()  # or whatever path you want 

Код нужно ввести на место ....

os.execv(sys.argv[0], sys.argv)

Начиная с coreutils 8.30, можно использовать env -S для разделения строки shebang на отдельные аргументы:

#!/usr/bin/env -S LD_LIBRARY_PATH=/path/to/lib python options

Для совместимости со старыми системами вы можете использовать тот факт, что оболочка позволяет заключать все команды в кавычки, тогда как в python это будут просто строки:

#!/bin/sh
"export" "LD_LIBRARY_PATH=/path/to/lib:$LD_LIBRARY_PATH"
"exec" "python3" "$0" "$@"
# Further python program
import somemodule