Pythonロギング-インポートされたモジュールからのロギングを無効にします

Pythonロギングモジュールを使用していますが、インポートしたサードパーティモジュールによって出力されたログメッセージを無効にしたいと思います。たとえば、私は次のようなものを使用しています。

logger = logging.getLogger()
logger.setLevel(level=logging.DEBUG)
fh = logging.StreamHandler()
fh_formatter = logging.Formatter('%(asctime)s %(levelname)s %(lineno)d:%(filename)s(%(process)d) - %(message)s')
fh.setFormatter(fh_formatter)
logger.addHandler(fh)

これにより、logger.debug（ "my message！"）を実行するとデバッグメッセージが出力されますが、インポートしたモジュールからのデバッグメッセージ（要求など）も出力されます。

興味のあるモジュールからのログメッセージのみを表示したいのですが、ロギングモジュールにこれを実行させることはできますか？

理想的には、「ModuleX、ModuleY」からのメッセージを印刷し、他のすべてを無視するようにロガーに指示できるようにしたいと思います。

私は以下を見ましたが、インポートされた関数を呼び出す前にロギングを無効/有効にする必要はありません： logging-インポートされたモジュールログを無視する方法は？

問題は、getLogger引数なしで呼び出すとルートロガーが返されるため、レベルをlogging.DEBUG設定すると、そのロガーを使用する他のモジュールのレベルも設定されることです。

これは、ルートロガーを使用しないことで解決できます。これを行うには、引数として名前を渡すだけです。たとえば、モジュールの名前です。

logger = logging.getLogger('my_module_name')
# as before

これにより、新しいロガーが作成されるため、他のモジュールのログレベルが誤って変更されることはありません。

後者はルートロガーのメソッドを呼び出す便利な関数logger.debugであるlogging.debugため、明らかに代わりに使用する必要がありますdebug。

これは、高度なロギングチュートリアルで説明されています。また、どのモジュールがログメッセージをトリガーしたかを簡単な方法で知ることができます。

Pythonloggingパッケージを使用する場合は、それを使用するすべてのモジュールでロガーを定義するのが一般的な規則です。

logger = logging.getLogger(__name__)

を含む多くの人気のあるPythonパッケージがこれを行いrequestsます。パッケージがこの規則を使用している場合、ロガー名はパッケージと同じ名前になる（またはそのロガーの子になる）ため、ログのログを簡単に有効/無効にできます。他のロガーと同じファイルに記録することもできます。

logger = logging.getLogger(__name__)
logger.setLevel(logging.DEBUG)

requests_logger = logging.getLogger('requests')
requests_logger.setLevel(logging.DEBUG)

handler = logging.StreamHandler()
handler.setLevel(logging.DEBUG)
logger.addHandler(handler)
requests_logger.addHandler(handler)

これが投稿に適しているかどうかはわかりませんが、私は長い間立ち往生していて、他のどこにも見つからなかったので、同じ問題を抱えている人を助けたいと思っていました！

ロギングの高度なチュートリアル とトラブルシューティングの非常に簡単なドキュメントに従っているにもかかわらず、matplotlibからデバッグログを取得していました。main()あるファイルでロガーを開始し、別のファイル（matplotlibをインポートした場所）からプロットを作成する関数をインポートしていました。

私にとってうまくいったのは、メインファイルの他のモジュールのようにインポートした後ではなく、インポートする前にmatplotlibのレベルを設定することでした。これは私には直感に反しているように思えたので、まだインポートされていないロガーの構成を設定する方法について誰かが洞察を持っているなら、これがどのように機能するかを知りたいと思います。ありがとう！

私のメインファイル：

import logging
import requests
logger = logging.getLogger(__name__)
logger.setLevel(logging.DEBUG)
logging.getLogger('requests').setLevel(logging.DEBUG)

def main():
  ...

私のplot.pyファイル：

import logging
logging.getLogger('matplotlib').setLevel(logging.WARNING)
import matplotlib.pyplot as plt

def generatePlot():
  ...

@Bakuriuは非常にエレガントに機能を説明しています。逆に、このgetLogger()メソッドを使用して、不要なロガーを取得して再構成/無効化することができます。

また、以前に定義された（つまり、インポートされたモジュール内の）ロガーを無効にするlogging.fileConfig()というパラメーターを受け入れるメソッドを追加したいと思いましたdisable_existing_loggers。

これにより、インポートされたモジュールによって作成されたものなど、既存のすべてのロガーが無効になりますが、ルートロガーは引き続き使用されます（外部ファイルをロードする必要はありません）。

logging.config.dictConfig({
    'version': 1,
    'disable_existing_loggers': True,
})

最初にログに記録したくないすべてのモジュールをインポートする必要があることに注意してください！そうしないと、それらは「既存のロガー」とは見なされません。次に、それらのモジュールのすべてのロガーを無効にします。これにより、重要なエラーも見逃してしまう可能性があります。

コンフィギュレーションのための関連オプションを使用して、より詳細な例については、https://gist.github.com/st4lk/6287746を、そしてここでは、との設定のためのYAMLを使用して（部分的に取り組んで）一例であるcoloredlogライブラリ。

次のようなものを使用できます。

logging.getLogger("imported_module").setLevel(logging.WARNING)
logging.getLogger("my_own_logger_name").setLevel(logging.DEBUG)

これにより、インポートされたモジュールが同じレベルを使用するのを防ぎながら、自分のモジュールのログレベルをDEBUGに設定します。

注： "imported_module"に置き換えることができますimported_module.__name__（引用符なし）、および"my_own_logger_name"に置き換えることができる__name__ことは、あなたがそれを行うことを好む方法だ場合。

私も同じ問題を抱えていました。他のすべてのpyファイルにインポートするlogging_config.pyファイルがあります。logging_config.pyファイルで、ルートロガーのログレベルをERROR（デフォルトでは警告）に設定しました。

logging.basicConfig(
    handlers=[
        RotatingFileHandler('logs.log',maxBytes=1000, backupCount=2),
        logging.StreamHandler(), #print to console
    ],
    level=logging.ERROR
)

他のモジュールでは、logging_config.pyをインポートし、新しいロガーを宣言して、そのレベルをデバッグに設定します。

log = logging.getLogger(__name__)
log.setLevel(logging.DEBUG)

このようにして、pyファイルにログインしたものはすべてログに記録されますが、urllib、request、boto3などのインポートされたモジュールによってデバッグおよび情報レベルでログに記録されたものはログに記録されません。ルートロガーのレベルをERRORに設定したため、これらのインポートモジュールにエラーがある場合は、ログに記録されます。

考慮すべきもう1つのことは、Loggerクラスのpropagateプロパティです。

たとえば、SOAP呼び出しを処理するためのpy-sudsライブラリは、ERRORに設定されていても

logging.getLogger('suds.client').setLevel(logging.ERROR)
logging.getLogger('suds.transport').setLevel(logging.ERROR)
logging.getLogger('suds.xsdschema').setLevel(logging.ERROR)
logging.getLogger('suds.wsdl').setLevel(logging.ERROR)

sxbasics.pycreationgと呼ばれるモジュールに関するログログ大量のログ

ログの伝播はデフォルトでTrueであるため、Falseに設定すると、代わりに514MBのログが回復されました。

import logging
logging.getLogger("suds").propagate = False
logging.getLogger('suds.client').setLevel(logging.ERROR)
logging.getLogger('suds.transport').setLevel(logging.ERROR)
logging.getLogger('suds.xsdschema').setLevel(logging.ERROR)
logging.getLogger('suds.wsdl').setLevel(logging.ERROR)