使用 Pandas 数据解析工具访问分析数据
以下 PandasFrame
类提供了将收集的分析数据转换为 Pandas 数据帧的工具。
from smdebug.profiler.analysis.utils.profiler_data_to_pandas import PandasFrame
PandasFrame
类获取 tj
对象的 S3 存储桶输出路径,其方法 get_all_system_metrics()
get_all_framework_metrics()
以 Pandas 数据格式返回系统指标和框架指标。
pf = PandasFrame(tj.profiler_s3_output_path) system_metrics_df = pf.get_all_system_metrics() framework_metrics_df = pf.get_all_framework_metrics( selected_framework_metrics=[ 'Step:ModeKeys.TRAIN', 'Step:ModeKeys.GLOBAL' ] )