{"metadata":{"kernelspec":{"language":"python","display_name":"Python 3","name":"python3"},"language_info":{"name":"python","version":"3.10.14","mimetype":"text/x-python","codemirror_mode":{"name":"ipython","version":3},"pygments_lexer":"ipython3","nbconvert_exporter":"python","file_extension":".py"},"kaggle":{"accelerator":"none","dataSources":[{"sourceId":81933,"databundleVersionId":9643020,"sourceType":"competition"}],"dockerImageVersionId":30776,"isInternetEnabled":false,"language":"python","sourceType":"notebook","isGpuEnabled":false}},"nbformat_minor":4,"nbformat":4,"cells":[{"cell_type":"code","source":"import numpy as np\nimport polars as pl\nimport pandas as pd\nfrom copy import deepcopy\nimport os\n\nimport re\n\nfrom tqdm import tqdm\nfrom IPython.display import clear_output\nfrom concurrent.futures import ThreadPoolExecutor\n\nSEED = 42\nn_splits = 5","metadata":{"_uuid":"8f2839f25d086af736a60e9eeb907d3b93b6e0e5","_cell_guid":"b1076dfc-b9ad-4769-8c92-a6c4dae69d19","execution":{"iopub.status.busy":"2024-10-16T09:24:56.365927Z","iopub.execute_input":"2024-10-16T09:24:56.366356Z","iopub.status.idle":"2024-10-16T09:24:57.096192Z","shell.execute_reply.started":"2024-10-16T09:24:56.366315Z","shell.execute_reply":"2024-10-16T09:24:57.094668Z"},"trusted":true},"outputs":[],"execution_count":2},{"cell_type":"markdown","source":"# TÌM HIỂU TẬP TRAIN VÀ TEST.CSV","metadata":{}},{"cell_type":"markdown","source":"1. **id**: Mã định danh của người tham gia.\n1. **Basic_Demos-Enroll_Season**: Mùa ghi danh.\n1. **Basic_Demos-Age**: Tuổi của người tham gia.\n1. **Basic_Demos-Sex**: Giới tính của người tham gia.\n1. **CGAS-Season**: Mùa tham gia.\n1. **CGAS-CGAS_Score**: Điểm đánh giá toàn diện của trẻ em (Children's Global Assessment Scale Score).\n1. **Physical-Season**: Mùa tham gia.\n1. **Physical-BMI**: Chỉ số khối cơ thể (kg/m^2).\n1. **Physical-Height**: Chiều cao (inch).\n1. **Physical-Weight**: Cân nặng (lbs).\n1. **Physical-Waist_Circumference**: Vòng eo (inch).\n1. **Physical-Diastolic_BP**: Huyết áp tâm trương (mmHg).\n1. **Physical-HeartRate**: Nhịp tim (lần/phút).\n1. **Physical-Systolic_BP**: Huyết áp tâm thu (mmHg).\n1. **Fitness_Endurance-Season**: Mùa tham gia.\n1. **Fitness_Endurance-Max_Stage**: Mức độ tối đa đạt được.\n1. **Fitness_Endurance-Time_Mins**: Thời gian hoàn thành chính xác (phút).\n1. **Fitness_Endurance-Time_Sec**: Thời gian hoàn thành chính xác (giây).\n1. **FGC-Season**: Mùa tham gia.\n1. **FGC-FGC_CU**: Tổng số bài tập gập bụng.\n1. **FGC-FGC_CU_Zone**: Vùng thể chất của bài tập gập bụng.\n1. **FGC-FGC_GSND**: Sức mạnh cầm nắm (tay không thuận).\n1. **FGC-FGC_GSND_Zone**: Vùng thể chất cho sức mạnh cầm nắm (tay không thuận).\n1. **FGC-FGC_GSD**: Sức mạnh cầm nắm (tay thuận).\n1. **FGC-FGC_GSD_Zone**: Vùng thể chất cho sức mạnh cầm nắm (tay thuận).\n1. **FGC-FGC_PU**: Tổng số bài tập chống đẩy.\n1. **FGC-FGC_PU_Zone**: Vùng thể chất của bài tập chống đẩy.\n1. **FGC-FGC_SRL**: Tổng điểm bài tập ngồi và với (bên trái).\n1. **FGC-FGC_SRL_Zone**: Vùng thể chất của bài tập ngồi và với (bên trái).\n1. **FGC-FGC_SRR**: Tổng điểm bài tập ngồi và với (bên phải).\n1. **FGC-FGC_SRR_Zone**: Vùng thể chất của bài tập ngồi và với (bên phải).\n1. **FGC-FGC_TL**: Tổng điểm bài tập nâng thân.\n1. **FGC-FGC_TL_Zone**: Vùng thể chất của bài tập nâng thân.\n1. **BIA-Season**: Mùa tham gia.\n1. **BIA-BIA_Activity_Level_num**: Mức độ hoạt động.\n1. **BIA-BIA_BMC**: Hàm lượng khoáng chất trong xương.\n1. **BIA-BIA_BMI**: Chỉ số khối cơ thể (BMI).\n1. **BIA-BIA_BMR**: Tỷ lệ trao đổi chất cơ bản.\n1. **BIA-BIA_DEE**: Tiêu hao năng lượng hàng ngày.\n1. **BIA-BIA_ECW**: Lượng nước ngoại bào.\n1. **BIA-BIA_FFM**: Khối lượng không mỡ.\n1. **BIA-BIA_FFMI**: Chỉ số khối không mỡ.\n1. **BIA-BIA_FMI**: Chỉ số khối mỡ.\n1. **BIA-BIA_Fat**: Tỷ lệ mỡ cơ thể.\n1. **BIA-BIA_Frame_num**: Khung cơ thể.\n1. **BIA-BIA_ICW**: Lượng nước nội bào.\n1. **BIA-BIA_LDM**: Khối lượng khô nạc.\n1. **BIA-BIA_LST**: Mô mềm nạc.\n1. **BIA-BIA_SMM**: Khối lượng cơ xương.\n1. **BIA-BIA_TBW**: Tổng lượng nước cơ thể.\n1. **PAQ_A-Season**: Mùa tham gia.\n1. **PAQ_A-PAQ_A_Total**: Tổng điểm hoạt động (dành cho thanh thiếu niên).\n1. **PAQ_C-Season**: Mùa tham gia.\n1. **PAQ_C-PAQ_C_Total**: Tổng điểm hoạt động (dành cho trẻ em).\n1. **PCIAT-Season**: Mùa tham gia.\n1. **PCIAT-PCIAT_01**: Con bạn có thường xuyên vi phạm thời gian sử dụng mạng mà bạn đặt ra không?\n1. **PCIAT-PCIAT_02**: Con bạn có thường xuyên bỏ bê công việc nhà để dành nhiều thời gian hơn trên mạng không?\n1. **PCIAT-PCIAT_03**: Con bạn có thường thích dành thời gian online hơn là ở cùng gia đình không?\n1. **PCIAT-PCIAT_04**: Con bạn có thường kết bạn mới trực tuyến không?\n1. **PCIAT-PCIAT_05**: Bạn có thường phàn nàn về thời gian con bạn dành cho mạng không?\n1. **PCIAT-PCIAT_06**: Điểm học của con bạn có thường bị ảnh hưởng bởi thời gian sử dụng mạng không?\n1. **PCIAT-PCIAT_07**: Con bạn có thường kiểm tra email trước khi làm việc khác không?\n1. **PCIAT-PCIAT_08**: Con bạn có trở nên xa cách với người khác từ khi khám phá Internet không?\n1. **PCIAT-PCIAT_09**: Con bạn có thường trở nên phòng thủ hoặc giữ bí mật khi được hỏi về những gì họ làm trực tuyến không?\n1. **PCIAT-PCIAT_10**: Bạn có thường bắt gặp con bạn lén sử dụng mạng trái với mong muốn của bạn không?\n1. **PCIAT-PCIAT_11**: Con bạn có thường ở một mình trong phòng để chơi máy tính không?\n1. **PCIAT-PCIAT_12**: Con bạn có thường nhận cuộc gọi lạ từ những người bạn mới trực tuyến không?\n1. **PCIAT-PCIAT_13**: Con bạn có thường la hét, tức giận nếu bị quấy rối trong khi sử dụng mạng không?\n1. **PCIAT-PCIAT_14**: Con bạn có thường trông mệt mỏi hơn so với trước khi sử dụng Internet không?\n1. **PCIAT-PCIAT_15**: Con bạn có thường bị ám ảnh với việc quay trở lại trực tuyến khi không sử dụng mạng không?\n1. **PCIAT-PCIAT_16**: Con bạn có thường giận dữ khi bạn can thiệp vào thời gian trực tuyến của họ không?\n1. **PCIAT-PCIAT_17**: Con bạn có thường chọn dành thời gian trực tuyến thay vì làm những sở thích cũ không?\n1. **PCIAT-PCIAT_18**: Con bạn có trở nên tức giận khi bạn đặt giới hạn thời gian sử dụng mạng không?\n1. **PCIAT-PCIAT_19**: Con bạn có thường dành nhiều thời gian trực tuyến thay vì đi chơi với bạn bè không?\n1. **PCIAT-PCIAT_20**: Con bạn có thường cảm thấy chán nản, lo lắng hoặc buồn khi không sử dụng mạng và cảm giác đó biến mất khi họ quay trở lại trực tuyến không?\n1. **PCIAT-PCIAT_Total**: Tổng điểm PCIAT.\n1. **SDS-Season**: Mùa tham gia.\n1. **SDS-SDS_Total_Raw**: Tổng điểm thô SDS.\n1. **SDS-SDS_Total_T**: Tổng điểm T SDS.\n1. **PreInt_EduHx-Season**: Mùa tham gia.\n1. **PreInt_EduHx-computerinternet_hoursday**: Số giờ sử dụng máy tính/mạng mỗi ngày.\n\n","metadata":{}},{"cell_type":"code","source":"# Đọc file\ntrain = pd.read_csv('/kaggle/input/child-mind-institute-problematic-internet-use/train.csv')\ntest = pd.read_csv('/kaggle/input/child-mind-institute-problematic-internet-use/test.csv')\nprint('--------Features trong tập train--------')\nprint(train.columns)\nprint('Số dòng',train.shape[0])\nprint('Số cột', train.shape[1])\nprint('--------Features trong tập test--------')\nprint(test.columns)\nprint(test.shape)\nprint('Số dòng',test.shape[0])\nprint('Số cột', test.shape[1])","metadata":{"execution":{"iopub.status.busy":"2024-10-16T09:35:05.574874Z","iopub.execute_input":"2024-10-16T09:35:05.575306Z","iopub.status.idle":"2024-10-16T09:35:05.633607Z","shell.execute_reply.started":"2024-10-16T09:35:05.575265Z","shell.execute_reply":"2024-10-16T09:35:05.632385Z"},"trusted":true},"outputs":[{"name":"stdout","text":"--------Features trong tập train--------\nIndex(['id', 'Basic_Demos-Enroll_Season', 'Basic_Demos-Age', 'Basic_Demos-Sex',\n 'CGAS-Season', 'CGAS-CGAS_Score', 'Physical-Season', 'Physical-BMI',\n 'Physical-Height', 'Physical-Weight', 'Physical-Waist_Circumference',\n 'Physical-Diastolic_BP', 'Physical-HeartRate', 'Physical-Systolic_BP',\n 'Fitness_Endurance-Season', 'Fitness_Endurance-Max_Stage',\n 'Fitness_Endurance-Time_Mins', 'Fitness_Endurance-Time_Sec',\n 'FGC-Season', 'FGC-FGC_CU', 'FGC-FGC_CU_Zone', 'FGC-FGC_GSND',\n 'FGC-FGC_GSND_Zone', 'FGC-FGC_GSD', 'FGC-FGC_GSD_Zone', 'FGC-FGC_PU',\n 'FGC-FGC_PU_Zone', 'FGC-FGC_SRL', 'FGC-FGC_SRL_Zone', 'FGC-FGC_SRR',\n 'FGC-FGC_SRR_Zone', 'FGC-FGC_TL', 'FGC-FGC_TL_Zone', 'BIA-Season',\n 'BIA-BIA_Activity_Level_num', 'BIA-BIA_BMC', 'BIA-BIA_BMI',\n 'BIA-BIA_BMR', 'BIA-BIA_DEE', 'BIA-BIA_ECW', 'BIA-BIA_FFM',\n 'BIA-BIA_FFMI', 'BIA-BIA_FMI', 'BIA-BIA_Fat', 'BIA-BIA_Frame_num',\n 'BIA-BIA_ICW', 'BIA-BIA_LDM', 'BIA-BIA_LST', 'BIA-BIA_SMM',\n 'BIA-BIA_TBW', 'PAQ_A-Season', 'PAQ_A-PAQ_A_Total', 'PAQ_C-Season',\n 'PAQ_C-PAQ_C_Total', 'PCIAT-Season', 'PCIAT-PCIAT_01', 'PCIAT-PCIAT_02',\n 'PCIAT-PCIAT_03', 'PCIAT-PCIAT_04', 'PCIAT-PCIAT_05', 'PCIAT-PCIAT_06',\n 'PCIAT-PCIAT_07', 'PCIAT-PCIAT_08', 'PCIAT-PCIAT_09', 'PCIAT-PCIAT_10',\n 'PCIAT-PCIAT_11', 'PCIAT-PCIAT_12', 'PCIAT-PCIAT_13', 'PCIAT-PCIAT_14',\n 'PCIAT-PCIAT_15', 'PCIAT-PCIAT_16', 'PCIAT-PCIAT_17', 'PCIAT-PCIAT_18',\n 'PCIAT-PCIAT_19', 'PCIAT-PCIAT_20', 'PCIAT-PCIAT_Total', 'SDS-Season',\n 'SDS-SDS_Total_Raw', 'SDS-SDS_Total_T', 'PreInt_EduHx-Season',\n 'PreInt_EduHx-computerinternet_hoursday', 'sii'],\n dtype='object')\nSố dòng 3960\nSố cột 82\n--------Features trong tập test--------\nIndex(['id', 'Basic_Demos-Enroll_Season', 'Basic_Demos-Age', 'Basic_Demos-Sex',\n 'CGAS-Season', 'CGAS-CGAS_Score', 'Physical-Season', 'Physical-BMI',\n 'Physical-Height', 'Physical-Weight', 'Physical-Waist_Circumference',\n 'Physical-Diastolic_BP', 'Physical-HeartRate', 'Physical-Systolic_BP',\n 'Fitness_Endurance-Season', 'Fitness_Endurance-Max_Stage',\n 'Fitness_Endurance-Time_Mins', 'Fitness_Endurance-Time_Sec',\n 'FGC-Season', 'FGC-FGC_CU', 'FGC-FGC_CU_Zone', 'FGC-FGC_GSND',\n 'FGC-FGC_GSND_Zone', 'FGC-FGC_GSD', 'FGC-FGC_GSD_Zone', 'FGC-FGC_PU',\n 'FGC-FGC_PU_Zone', 'FGC-FGC_SRL', 'FGC-FGC_SRL_Zone', 'FGC-FGC_SRR',\n 'FGC-FGC_SRR_Zone', 'FGC-FGC_TL', 'FGC-FGC_TL_Zone', 'BIA-Season',\n 'BIA-BIA_Activity_Level_num', 'BIA-BIA_BMC', 'BIA-BIA_BMI',\n 'BIA-BIA_BMR', 'BIA-BIA_DEE', 'BIA-BIA_ECW', 'BIA-BIA_FFM',\n 'BIA-BIA_FFMI', 'BIA-BIA_FMI', 'BIA-BIA_Fat', 'BIA-BIA_Frame_num',\n 'BIA-BIA_ICW', 'BIA-BIA_LDM', 'BIA-BIA_LST', 'BIA-BIA_SMM',\n 'BIA-BIA_TBW', 'PAQ_A-Season', 'PAQ_A-PAQ_A_Total', 'PAQ_C-Season',\n 'PAQ_C-PAQ_C_Total', 'SDS-Season', 'SDS-SDS_Total_Raw',\n 'SDS-SDS_Total_T', 'PreInt_EduHx-Season',\n 'PreInt_EduHx-computerinternet_hoursday'],\n dtype='object')\n(20, 59)\nSố dòng 20\nSố cột 59\n","output_type":"stream"}],"execution_count":8},{"cell_type":"code","source":"# Những feature có trong train nhúng không có trong test\n\n# Find the difference: columns in train but not in test\ndiff_columns = set(train) - set(test)\n\n# Print the columns that are in train but not in test\nprint(diff_columns)\nprint('The number of different features in train:', len(diff_columns))","metadata":{"execution":{"iopub.status.busy":"2024-10-16T09:50:39.241343Z","iopub.execute_input":"2024-10-16T09:50:39.241759Z","iopub.status.idle":"2024-10-16T09:50:39.248098Z","shell.execute_reply.started":"2024-10-16T09:50:39.24172Z","shell.execute_reply":"2024-10-16T09:50:39.246886Z"},"trusted":true},"outputs":[{"name":"stdout","text":"{'sii', 'PCIAT-PCIAT_Total', 'PCIAT-PCIAT_18', 'PCIAT-PCIAT_01', 'PCIAT-PCIAT_06', 'PCIAT-PCIAT_10', 'PCIAT-PCIAT_08', 'PCIAT-PCIAT_09', 'PCIAT-PCIAT_15', 'PCIAT-PCIAT_16', 'PCIAT-PCIAT_17', 'PCIAT-PCIAT_03', 'PCIAT-PCIAT_13', 'PCIAT-PCIAT_12', 'PCIAT-PCIAT_02', 'PCIAT-PCIAT_19', 'PCIAT-PCIAT_11', 'PCIAT-PCIAT_05', 'PCIAT-PCIAT_07', 'PCIAT-PCIAT_20', 'PCIAT-Season', 'PCIAT-PCIAT_04', 'PCIAT-PCIAT_14'}\nThe number of different features in train: 23\n","output_type":"stream"}],"execution_count":15},{"cell_type":"markdown","source":"kì lạ hen: Tất cả chỉ số liên quan đến PICI đều không có trong tập test mà có trong train ta
\nCho để làm gì đây?
\nĐọc kĩ lại thì chỉ số PCIAT_total để suy ra đc sii. ","metadata":{}},{"cell_type":"code","source":"# Tìm khoảng PICAT_total trong khoảng nào thì thuộc loại sii nào\nprint(train.select(pl.col('PCIAT-PCIAT_Total').is_null() == pl.col('sii').is_null()).to_series().mean())\n\n(train\n .select(pl.col('PCIAT-PCIAT_Total'))\n .group_by(train.get_column('sii'))\n .agg(pl.col('PCIAT-PCIAT_Total').min().alias('PCIAT-PCIAT_Total min'),\n pl.col('PCIAT-PCIAT_Total').max().alias('PCIAT-PCIAT_Total max'),\n pl.col('PCIAT-PCIAT_Total').len().alias('count'))\n .sort('sii')\n)","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"code","source":"# Xem các thuộc tính của các feature\npd.set_option('display.max_rows', None)\npd.set_option('display.max_columns', None)\nprint('----type-----')\ntrain.dtypes","metadata":{"execution":{"iopub.status.busy":"2024-10-16T09:56:03.05006Z","iopub.execute_input":"2024-10-16T09:56:03.050549Z","iopub.status.idle":"2024-10-16T09:56:03.063567Z","shell.execute_reply.started":"2024-10-16T09:56:03.050502Z","shell.execute_reply":"2024-10-16T09:56:03.062558Z"},"trusted":true},"outputs":[{"name":"stdout","text":"----type-----\n","output_type":"stream"},{"execution_count":16,"output_type":"execute_result","data":{"text/plain":"id object\nBasic_Demos-Enroll_Season object\nBasic_Demos-Age int64\nBasic_Demos-Sex int64\nCGAS-Season object\nCGAS-CGAS_Score float64\nPhysical-Season object\nPhysical-BMI float64\nPhysical-Height float64\nPhysical-Weight float64\nPhysical-Waist_Circumference float64\nPhysical-Diastolic_BP float64\nPhysical-HeartRate float64\nPhysical-Systolic_BP float64\nFitness_Endurance-Season object\nFitness_Endurance-Max_Stage float64\nFitness_Endurance-Time_Mins float64\nFitness_Endurance-Time_Sec float64\nFGC-Season object\nFGC-FGC_CU float64\nFGC-FGC_CU_Zone float64\nFGC-FGC_GSND float64\nFGC-FGC_GSND_Zone float64\nFGC-FGC_GSD float64\nFGC-FGC_GSD_Zone float64\nFGC-FGC_PU float64\nFGC-FGC_PU_Zone float64\nFGC-FGC_SRL float64\nFGC-FGC_SRL_Zone float64\nFGC-FGC_SRR float64\nFGC-FGC_SRR_Zone float64\nFGC-FGC_TL float64\nFGC-FGC_TL_Zone float64\nBIA-Season object\nBIA-BIA_Activity_Level_num float64\nBIA-BIA_BMC float64\nBIA-BIA_BMI float64\nBIA-BIA_BMR float64\nBIA-BIA_DEE float64\nBIA-BIA_ECW float64\nBIA-BIA_FFM float64\nBIA-BIA_FFMI float64\nBIA-BIA_FMI float64\nBIA-BIA_Fat float64\nBIA-BIA_Frame_num float64\nBIA-BIA_ICW float64\nBIA-BIA_LDM float64\nBIA-BIA_LST float64\nBIA-BIA_SMM float64\nBIA-BIA_TBW float64\nPAQ_A-Season object\nPAQ_A-PAQ_A_Total float64\nPAQ_C-Season object\nPAQ_C-PAQ_C_Total float64\nPCIAT-Season object\nPCIAT-PCIAT_01 float64\nPCIAT-PCIAT_02 float64\nPCIAT-PCIAT_03 float64\nPCIAT-PCIAT_04 float64\nPCIAT-PCIAT_05 float64\nPCIAT-PCIAT_06 float64\nPCIAT-PCIAT_07 float64\nPCIAT-PCIAT_08 float64\nPCIAT-PCIAT_09 float64\nPCIAT-PCIAT_10 float64\nPCIAT-PCIAT_11 float64\nPCIAT-PCIAT_12 float64\nPCIAT-PCIAT_13 float64\nPCIAT-PCIAT_14 float64\nPCIAT-PCIAT_15 float64\nPCIAT-PCIAT_16 float64\nPCIAT-PCIAT_17 float64\nPCIAT-PCIAT_18 float64\nPCIAT-PCIAT_19 float64\nPCIAT-PCIAT_20 float64\nPCIAT-PCIAT_Total float64\nSDS-Season object\nSDS-SDS_Total_Raw float64\nSDS-SDS_Total_T float64\nPreInt_EduHx-Season object\nPreInt_EduHx-computerinternet_hoursday float64\nsii float64\ndtype: object"},"metadata":{}}],"execution_count":16},{"cell_type":"code","source":"# Drop cột id trong tập train và test\ntrain=train.drop('id',axis=1)\ntest=test.drop('id',axis=1)","metadata":{"execution":{"iopub.status.busy":"2024-10-16T09:57:24.887132Z","iopub.execute_input":"2024-10-16T09:57:24.887568Z","iopub.status.idle":"2024-10-16T09:57:24.901248Z","shell.execute_reply.started":"2024-10-16T09:57:24.887525Z","shell.execute_reply":"2024-10-16T09:57:24.900127Z"},"trusted":true},"outputs":[],"execution_count":17},{"cell_type":"code","source":"","metadata":{},"outputs":[],"execution_count":null},{"cell_type":"markdown","source":"## Train","metadata":{}},{"cell_type":"markdown","source":"Ngắm thử tập train","metadata":{}},{"cell_type":"code","source":"train.head(20)","metadata":{"execution":{"iopub.status.busy":"2024-10-16T09:57:28.69543Z","iopub.execute_input":"2024-10-16T09:57:28.696442Z","iopub.status.idle":"2024-10-16T09:57:28.849643Z","shell.execute_reply.started":"2024-10-16T09:57:28.696391Z","shell.execute_reply":"2024-10-16T09:57:28.84824Z"},"trusted":true},"outputs":[{"execution_count":18,"output_type":"execute_result","data":{"text/plain":" Basic_Demos-Enroll_Season Basic_Demos-Age Basic_Demos-Sex CGAS-Season \\\n0 Fall 5 0 Winter \n1 Summer 9 0 NaN \n2 Summer 10 1 Fall \n3 Winter 9 0 Fall \n4 Spring 18 1 Summer \n5 Spring 13 1 Winter \n6 Fall 10 0 NaN \n7 Fall 10 1 NaN \n8 Summer 15 0 NaN \n9 Summer 19 1 Summer \n10 Spring 11 1 NaN \n11 Fall 11 0 Summer \n12 Fall 13 0 NaN \n13 Spring 12 0 NaN \n14 Spring 12 0 NaN \n15 Winter 7 0 Summer \n16 Spring 5 1 Summer \n17 Fall 10 1 NaN \n18 Winter 6 0 Spring \n19 Winter 10 0 NaN \n\n CGAS-CGAS_Score Physical-Season Physical-BMI Physical-Height \\\n0 51.0 Fall 16.877316 46.00 \n1 NaN Fall 14.035590 48.00 \n2 71.0 Fall 16.648696 56.50 \n3 71.0 Summer 18.292347 56.00 \n4 NaN NaN NaN NaN \n5 50.0 Summer 22.279952 59.50 \n6 NaN Fall 19.660760 55.00 \n7 NaN Fall 16.861286 59.25 \n8 NaN Spring NaN NaN \n9 NaN NaN NaN NaN \n10 NaN NaN NaN NaN \n11 66.0 NaN NaN NaN \n12 NaN Winter 21.079065 57.75 \n13 NaN Spring 15.544111 60.00 \n14 NaN NaN NaN NaN \n15 51.0 Spring 29.315775 54.00 \n16 80.0 Spring 17.284504 44.00 \n17 NaN Fall 19.893157 55.00 \n18 60.0 Winter 30.094649 37.50 \n19 NaN NaN NaN NaN \n\n Physical-Weight Physical-Waist_Circumference Physical-Diastolic_BP \\\n0 50.8 NaN NaN \n1 46.0 22.0 75.0 \n2 75.6 NaN 65.0 \n3 81.6 NaN 60.0 \n4 NaN NaN NaN \n5 112.2 NaN 60.0 \n6 84.6 NaN 123.0 \n7 84.2 27.0 71.0 \n8 NaN NaN NaN \n9 NaN NaN NaN \n10 NaN NaN NaN \n11 NaN NaN NaN \n12 100.0 NaN 63.0 \n13 79.6 24.0 57.0 \n14 NaN NaN NaN \n15 121.6 NaN 80.0 \n16 47.6 NaN 61.0 \n17 85.6 30.0 NaN \n18 60.2 24.0 61.0 \n19 NaN NaN NaN \n\n Physical-HeartRate Physical-Systolic_BP Fitness_Endurance-Season \\\n0 NaN NaN NaN \n1 70.0 122.0 NaN \n2 94.0 117.0 Fall \n3 97.0 117.0 Summer \n4 NaN NaN NaN \n5 73.0 102.0 NaN \n6 83.0 163.0 NaN \n7 90.0 116.0 NaN \n8 NaN NaN NaN \n9 NaN NaN NaN \n10 NaN NaN NaN \n11 NaN NaN NaN \n12 79.0 150.0 NaN \n13 71.0 103.0 NaN \n14 NaN NaN NaN \n15 75.0 99.0 Spring \n16 76.0 109.0 Spring \n17 81.0 NaN NaN \n18 91.0 95.0 NaN \n19 NaN NaN NaN \n\n Fitness_Endurance-Max_Stage Fitness_Endurance-Time_Mins \\\n0 NaN NaN \n1 NaN NaN \n2 5.0 7.0 \n3 6.0 9.0 \n4 NaN NaN \n5 NaN NaN \n6 NaN NaN \n7 NaN NaN \n8 NaN NaN \n9 NaN NaN \n10 NaN NaN \n11 NaN NaN \n12 NaN NaN \n13 NaN NaN \n14 NaN NaN \n15 4.0 5.0 \n16 NaN NaN \n17 NaN NaN \n18 NaN NaN \n19 NaN NaN \n\n Fitness_Endurance-Time_Sec FGC-Season FGC-FGC_CU FGC-FGC_CU_Zone \\\n0 NaN Fall 0.0 0.0 \n1 NaN Fall 3.0 0.0 \n2 33.0 Fall 20.0 1.0 \n3 37.0 Summer 18.0 1.0 \n4 NaN NaN NaN NaN \n5 NaN Summer 12.0 0.0 \n6 NaN Fall 9.0 1.0 \n7 NaN Fall 0.0 0.0 \n8 NaN Spring NaN NaN \n9 NaN NaN NaN NaN \n10 NaN NaN NaN NaN \n11 NaN Winter NaN NaN \n12 NaN Winter 24.0 1.0 \n13 NaN Spring 10.0 0.0 \n14 NaN Spring NaN NaN \n15 32.0 Spring 6.0 1.0 \n16 NaN Spring 0.0 0.0 \n17 NaN Fall 5.0 0.0 \n18 NaN Winter 6.0 1.0 \n19 NaN Spring NaN NaN \n\n FGC-FGC_GSND FGC-FGC_GSND_Zone FGC-FGC_GSD FGC-FGC_GSD_Zone \\\n0 NaN NaN NaN NaN \n1 NaN NaN NaN NaN \n2 10.2 1.0 14.7 2.0 \n3 NaN NaN NaN NaN \n4 NaN NaN NaN NaN \n5 16.5 2.0 17.9 2.0 \n6 NaN NaN NaN NaN \n7 12.6 2.0 11.1 1.0 \n8 NaN NaN NaN NaN \n9 NaN NaN NaN NaN \n10 NaN NaN NaN NaN \n11 NaN NaN NaN NaN \n12 19.2 1.0 18.4 1.0 \n13 22.3 2.0 21.6 2.0 \n14 NaN NaN NaN NaN \n15 NaN NaN NaN NaN \n16 NaN NaN NaN NaN \n17 NaN NaN NaN NaN \n18 NaN NaN NaN NaN \n19 NaN NaN NaN NaN \n\n FGC-FGC_PU FGC-FGC_PU_Zone FGC-FGC_SRL FGC-FGC_SRL_Zone FGC-FGC_SRR \\\n0 0.0 0.0 7.0 0.0 6.0 \n1 5.0 0.0 11.0 1.0 11.0 \n2 7.0 1.0 10.0 1.0 10.0 \n3 5.0 0.0 7.0 0.0 7.0 \n4 NaN NaN NaN NaN NaN \n5 6.0 0.0 10.0 1.0 11.0 \n6 2.0 0.0 11.0 1.0 11.0 \n7 0.0 0.0 0.0 0.0 0.0 \n8 NaN NaN NaN NaN NaN \n9 NaN NaN NaN NaN NaN \n10 NaN NaN NaN NaN NaN \n11 NaN NaN NaN NaN NaN \n12 20.0 1.0 8.0 1.0 9.5 \n13 7.0 0.0 7.0 0.0 9.0 \n14 NaN NaN NaN NaN NaN \n15 0.0 0.0 12.0 1.0 15.0 \n16 0.0 0.0 10.5 1.0 10.0 \n17 0.0 0.0 0.0 0.0 0.0 \n18 0.0 0.0 4.0 0.0 4.0 \n19 NaN NaN NaN NaN NaN \n\n FGC-FGC_SRR_Zone FGC-FGC_TL FGC-FGC_TL_Zone BIA-Season \\\n0 0.0 6.0 1.0 Fall \n1 1.0 3.0 0.0 Winter \n2 1.0 5.0 0.0 NaN \n3 0.0 7.0 1.0 Summer \n4 NaN NaN NaN NaN \n5 1.0 8.0 0.0 Summer \n6 1.0 11.0 1.0 Fall \n7 0.0 4.0 0.0 Fall \n8 NaN NaN NaN NaN \n9 NaN NaN NaN NaN \n10 NaN NaN NaN NaN \n11 NaN NaN NaN NaN \n12 1.0 12.5 1.0 Winter \n13 1.0 12.0 1.0 NaN \n14 NaN NaN NaN NaN \n15 1.0 12.0 1.0 NaN \n16 1.0 7.0 1.0 NaN \n17 0.0 9.0 1.0 NaN \n18 0.0 7.0 1.0 Winter \n19 NaN NaN NaN NaN \n\n BIA-BIA_Activity_Level_num BIA-BIA_BMC BIA-BIA_BMI BIA-BIA_BMR \\\n0 2.0 2.66855 16.8792 932.498 \n1 2.0 2.57949 14.0371 936.656 \n2 NaN NaN NaN NaN \n3 3.0 3.84191 18.2943 1131.430 \n4 NaN NaN NaN NaN \n5 2.0 4.33036 30.1865 1330.970 \n6 2.0 3.78271 19.6629 1135.860 \n7 3.0 4.05726 16.8631 1180.040 \n8 NaN NaN NaN NaN \n9 NaN NaN NaN NaN \n10 NaN NaN NaN NaN \n11 NaN NaN NaN NaN \n12 5.0 5.08025 21.0814 1239.460 \n13 NaN NaN NaN NaN \n14 NaN NaN NaN NaN \n15 NaN NaN NaN NaN \n16 NaN NaN NaN NaN \n17 NaN NaN NaN NaN \n18 2.0 2.75035 17.2738 1003.070 \n19 NaN NaN NaN NaN \n\n BIA-BIA_DEE BIA-BIA_ECW BIA-BIA_FFM BIA-BIA_FFMI BIA-BIA_FMI \\\n0 1492.00 8.25598 41.5862 13.8177 3.06143 \n1 1498.65 6.01993 42.0291 12.8254 1.21172 \n2 NaN NaN NaN NaN NaN \n3 1923.44 15.59250 62.7757 14.0740 4.22033 \n4 NaN NaN NaN NaN NaN \n5 1996.45 30.21240 84.0285 16.6877 13.49880 \n6 1817.38 16.32750 63.2470 14.7000 4.96291 \n7 1888.06 21.94000 67.9527 13.6092 3.25395 \n8 NaN NaN NaN NaN NaN \n9 NaN NaN NaN NaN NaN \n10 NaN NaN NaN NaN NaN \n11 NaN NaN NaN NaN NaN \n12 2974.71 19.95450 74.2823 15.6597 5.42165 \n13 NaN NaN NaN NaN NaN \n14 NaN NaN NaN NaN NaN \n15 NaN NaN NaN NaN NaN \n16 NaN NaN NaN NaN NaN \n17 NaN NaN NaN NaN NaN \n18 1504.61 15.14560 49.1034 14.0898 3.18407 \n19 NaN NaN NaN NaN NaN \n\n BIA-BIA_Fat BIA-BIA_Frame_num BIA-BIA_ICW BIA-BIA_LDM BIA-BIA_LST \\\n0 9.21377 1.0 24.4349 8.89536 38.9177 \n1 3.97085 1.0 21.0352 14.97400 39.4497 \n2 NaN NaN NaN NaN NaN \n3 18.82430 2.0 30.4041 16.77900 58.9338 \n4 NaN NaN NaN NaN NaN \n5 67.97150 2.0 32.9141 20.90200 79.6982 \n6 21.35300 2.0 30.8936 16.02590 59.4643 \n7 16.24740 2.0 28.5367 17.47600 63.8954 \n8 NaN NaN NaN NaN NaN \n9 NaN NaN NaN NaN NaN \n10 NaN NaN NaN NaN NaN \n11 NaN NaN NaN NaN NaN \n12 25.71770 2.0 36.0572 18.27050 69.2020 \n13 NaN NaN NaN NaN NaN \n14 NaN NaN NaN NaN NaN \n15 NaN NaN NaN NaN NaN \n16 NaN NaN NaN NaN NaN \n17 NaN NaN NaN NaN NaN \n18 11.09660 1.0 23.6182 10.33960 46.3531 \n19 NaN NaN NaN NaN NaN \n\n BIA-BIA_SMM BIA-BIA_TBW PAQ_A-Season PAQ_A-PAQ_A_Total PAQ_C-Season \\\n0 19.5413 32.6909 NaN NaN NaN \n1 15.4107 27.0552 NaN NaN Fall \n2 NaN NaN NaN NaN Summer \n3 26.4798 45.9966 NaN NaN Winter \n4 NaN NaN Summer 1.04 NaN \n5 35.3804 63.1265 NaN NaN Spring \n6 26.1957 47.2211 NaN NaN Winter \n7 28.7680 50.4767 NaN NaN Fall \n8 NaN NaN NaN NaN NaN \n9 NaN NaN NaN NaN NaN \n10 NaN NaN NaN NaN NaN \n11 NaN NaN NaN NaN Winter \n12 36.2232 56.0118 NaN NaN Fall \n13 NaN NaN NaN NaN Spring \n14 NaN NaN NaN NaN NaN \n15 NaN NaN NaN NaN NaN \n16 NaN NaN NaN NaN NaN \n17 NaN NaN NaN NaN NaN \n18 19.8886 38.7638 NaN NaN NaN \n19 NaN NaN NaN NaN NaN \n\n PAQ_C-PAQ_C_Total PCIAT-Season PCIAT-PCIAT_01 PCIAT-PCIAT_02 \\\n0 NaN Fall 5.0 4.0 \n1 2.340 Fall 0.0 0.0 \n2 2.170 Fall 5.0 2.0 \n3 2.451 Summer 4.0 2.0 \n4 NaN NaN NaN NaN \n5 4.110 Summer 3.0 3.0 \n6 3.670 Winter 1.0 4.0 \n7 1.270 NaN NaN NaN \n8 NaN NaN NaN NaN \n9 NaN NaN NaN NaN \n10 NaN NaN NaN NaN \n11 1.100 Winter 2.0 2.0 \n12 3.020 Fall 3.0 2.0 \n13 1.220 NaN NaN NaN \n14 NaN NaN NaN NaN \n15 NaN Spring 4.0 4.0 \n16 NaN Summer 0.0 0.0 \n17 NaN NaN NaN NaN \n18 NaN Winter 3.0 3.0 \n19 NaN NaN NaN NaN \n\n PCIAT-PCIAT_03 PCIAT-PCIAT_04 PCIAT-PCIAT_05 PCIAT-PCIAT_06 \\\n0 4.0 0.0 4.0 0.0 \n1 0.0 0.0 0.0 0.0 \n2 2.0 1.0 2.0 1.0 \n3 4.0 0.0 5.0 1.0 \n4 NaN NaN NaN NaN \n5 3.0 0.0 2.0 1.0 \n6 1.0 0.0 2.0 1.0 \n7 NaN NaN NaN NaN \n8 NaN NaN NaN NaN \n9 NaN NaN NaN NaN \n10 NaN NaN NaN NaN \n11 1.0 0.0 3.0 0.0 \n12 3.0 2.0 3.0 3.0 \n13 NaN NaN NaN NaN \n14 NaN NaN NaN NaN \n15 4.0 3.0 5.0 1.0 \n16 0.0 0.0 0.0 0.0 \n17 NaN NaN NaN NaN \n18 2.0 0.0 4.0 0.0 \n19 NaN NaN NaN NaN \n\n PCIAT-PCIAT_07 PCIAT-PCIAT_08 PCIAT-PCIAT_09 PCIAT-PCIAT_10 \\\n0 0.0 4.0 0.0 0.0 \n1 0.0 0.0 0.0 0.0 \n2 1.0 2.0 1.0 1.0 \n3 0.0 3.0 2.0 2.0 \n4 NaN NaN NaN NaN \n5 0.0 2.0 2.0 1.0 \n6 0.0 1.0 0.0 0.0 \n7 NaN NaN NaN NaN \n8 NaN NaN NaN NaN \n9 NaN NaN NaN NaN \n10 NaN NaN NaN NaN \n11 0.0 0.0 0.0 0.0 \n12 0.0 1.0 2.0 1.0 \n13 NaN NaN NaN NaN \n14 NaN NaN NaN NaN \n15 1.0 4.0 1.0 1.0 \n16 0.0 0.0 0.0 0.0 \n17 NaN NaN NaN NaN \n18 0.0 0.0 0.0 2.0 \n19 NaN NaN NaN NaN \n\n PCIAT-PCIAT_11 PCIAT-PCIAT_12 PCIAT-PCIAT_13 PCIAT-PCIAT_14 \\\n0 4.0 0.0 4.0 4.0 \n1 0.0 0.0 0.0 0.0 \n2 1.0 0.0 1.0 1.0 \n3 3.0 0.0 3.0 0.0 \n4 NaN NaN NaN NaN \n5 0.0 1.0 3.0 3.0 \n6 0.0 0.0 0.0 0.0 \n7 NaN NaN NaN NaN \n8 NaN NaN NaN NaN \n9 NaN NaN NaN NaN \n10 NaN NaN NaN NaN \n11 0.0 0.0 0.0 0.0 \n12 0.0 0.0 2.0 1.0 \n13 NaN NaN NaN NaN \n14 NaN NaN NaN NaN \n15 4.0 1.0 4.0 4.0 \n16 0.0 0.0 0.0 0.0 \n17 NaN NaN NaN NaN \n18 2.0 0.0 3.0 0.0 \n19 NaN NaN NaN NaN \n\n PCIAT-PCIAT_15 PCIAT-PCIAT_16 PCIAT-PCIAT_17 PCIAT-PCIAT_18 \\\n0 4.0 4.0 4.0 4.0 \n1 0.0 0.0 0.0 0.0 \n2 1.0 0.0 2.0 2.0 \n3 0.0 3.0 4.0 3.0 \n4 NaN NaN NaN NaN \n5 2.0 1.0 3.0 1.0 \n6 0.0 4.0 1.0 4.0 \n7 NaN NaN NaN NaN \n8 NaN NaN NaN NaN \n9 NaN NaN NaN NaN \n10 NaN NaN NaN NaN \n11 0.0 0.0 1.0 0.0 \n12 1.0 1.0 1.0 2.0 \n13 NaN NaN NaN NaN \n14 NaN NaN NaN NaN \n15 4.0 2.0 4.0 3.0 \n16 0.0 0.0 0.0 0.0 \n17 NaN NaN NaN NaN \n18 0.0 2.0 3.0 3.0 \n19 NaN NaN NaN NaN \n\n PCIAT-PCIAT_19 PCIAT-PCIAT_20 PCIAT-PCIAT_Total SDS-Season \\\n0 2.0 4.0 55.0 NaN \n1 0.0 0.0 0.0 Fall \n2 1.0 1.0 28.0 Fall \n3 4.0 1.0 44.0 Summer \n4 NaN NaN NaN NaN \n5 2.0 1.0 34.0 Summer \n6 1.0 0.0 20.0 Winter \n7 NaN NaN NaN NaN \n8 NaN NaN NaN NaN \n9 NaN NaN NaN NaN \n10 NaN NaN NaN NaN \n11 1.0 0.0 10.0 Winter \n12 2.0 1.0 31.0 Fall \n13 NaN NaN NaN NaN \n14 NaN NaN NaN NaN \n15 3.0 1.0 58.0 Spring \n16 0.0 0.0 0.0 Spring \n17 NaN NaN NaN NaN \n18 1.0 0.0 28.0 Winter \n19 NaN NaN NaN NaN \n\n SDS-SDS_Total_Raw SDS-SDS_Total_T PreInt_EduHx-Season \\\n0 NaN NaN Fall \n1 46.0 64.0 Summer \n2 38.0 54.0 Summer \n3 31.0 45.0 Winter \n4 NaN NaN NaN \n5 40.0 56.0 Spring \n6 27.0 40.0 Fall \n7 NaN NaN Fall \n8 NaN NaN Summer \n9 NaN NaN NaN \n10 NaN NaN Spring \n11 42.0 59.0 Fall \n12 33.0 47.0 Fall \n13 NaN NaN Spring \n14 NaN NaN Spring \n15 35.0 50.0 Winter \n16 37.0 53.0 Spring \n17 NaN NaN Fall \n18 39.0 55.0 Winter \n19 NaN NaN Winter \n\n PreInt_EduHx-computerinternet_hoursday sii \n0 3.0 2.0 \n1 0.0 0.0 \n2 2.0 0.0 \n3 0.0 1.0 \n4 NaN NaN \n5 0.0 1.0 \n6 3.0 0.0 \n7 2.0 NaN \n8 2.0 NaN \n9 NaN NaN \n10 NaN NaN \n11 0.0 0.0 \n12 1.0 1.0 \n13 NaN NaN \n14 2.0 NaN \n15 2.0 2.0 \n16 0.0 0.0 \n17 1.0 NaN \n18 3.0 0.0 \n19 2.0 NaN ","text/html":"
\n\n\n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n \n
Basic_Demos-Enroll_SeasonBasic_Demos-AgeBasic_Demos-SexCGAS-SeasonCGAS-CGAS_ScorePhysical-SeasonPhysical-BMIPhysical-HeightPhysical-WeightPhysical-Waist_CircumferencePhysical-Diastolic_BPPhysical-HeartRatePhysical-Systolic_BPFitness_Endurance-SeasonFitness_Endurance-Max_StageFitness_Endurance-Time_MinsFitness_Endurance-Time_SecFGC-SeasonFGC-FGC_CUFGC-FGC_CU_ZoneFGC-FGC_GSNDFGC-FGC_GSND_ZoneFGC-FGC_GSDFGC-FGC_GSD_ZoneFGC-FGC_PUFGC-FGC_PU_ZoneFGC-FGC_SRLFGC-FGC_SRL_ZoneFGC-FGC_SRRFGC-FGC_SRR_ZoneFGC-FGC_TLFGC-FGC_TL_ZoneBIA-SeasonBIA-BIA_Activity_Level_numBIA-BIA_BMCBIA-BIA_BMIBIA-BIA_BMRBIA-BIA_DEEBIA-BIA_ECWBIA-BIA_FFMBIA-BIA_FFMIBIA-BIA_FMIBIA-BIA_FatBIA-BIA_Frame_numBIA-BIA_ICWBIA-BIA_LDMBIA-BIA_LSTBIA-BIA_SMMBIA-BIA_TBWPAQ_A-SeasonPAQ_A-PAQ_A_TotalPAQ_C-SeasonPAQ_C-PAQ_C_TotalPCIAT-SeasonPCIAT-PCIAT_01PCIAT-PCIAT_02PCIAT-PCIAT_03PCIAT-PCIAT_04PCIAT-PCIAT_05PCIAT-PCIAT_06PCIAT-PCIAT_07PCIAT-PCIAT_08PCIAT-PCIAT_09PCIAT-PCIAT_10PCIAT-PCIAT_11PCIAT-PCIAT_12PCIAT-PCIAT_13PCIAT-PCIAT_14PCIAT-PCIAT_15PCIAT-PCIAT_16PCIAT-PCIAT_17PCIAT-PCIAT_18PCIAT-PCIAT_19PCIAT-PCIAT_20PCIAT-PCIAT_TotalSDS-SeasonSDS-SDS_Total_RawSDS-SDS_Total_TPreInt_EduHx-SeasonPreInt_EduHx-computerinternet_hoursdaysii
0Fall50Winter51.0Fall16.87731646.0050.8NaNNaNNaNNaNNaNNaNNaNNaNFall0.00.0NaNNaNNaNNaN0.00.07.00.06.00.06.01.0Fall2.02.6685516.8792932.4981492.008.2559841.586213.81773.061439.213771.024.43498.8953638.917719.541332.6909NaNNaNNaNNaNFall5.04.04.00.04.00.00.04.00.00.04.00.04.04.04.04.04.04.02.04.055.0NaNNaNNaNFall3.02.0
1Summer90NaNNaNFall14.03559048.0046.022.075.070.0122.0NaNNaNNaNNaNFall3.00.0NaNNaNNaNNaN5.00.011.01.011.01.03.00.0Winter2.02.5794914.0371936.6561498.656.0199342.029112.82541.211723.970851.021.035214.9740039.449715.410727.0552NaNNaNFall2.340Fall0.00.00.00.00.00.00.00.00.00.00.00.00.00.00.00.00.00.00.00.00.0Fall46.064.0Summer0.00.0
2Summer101Fall71.0Fall16.64869656.5075.6NaN65.094.0117.0Fall5.07.033.0Fall20.01.010.21.014.72.07.01.010.01.010.01.05.00.0NaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNSummer2.170Fall5.02.02.01.02.01.01.02.01.01.01.00.01.01.01.00.02.02.01.01.028.0Fall38.054.0Summer2.00.0
3Winter90Fall71.0Summer18.29234756.0081.6NaN60.097.0117.0Summer6.09.037.0Summer18.01.0NaNNaNNaNNaN5.00.07.00.07.00.07.01.0Summer3.03.8419118.29431131.4301923.4415.5925062.775714.07404.2203318.824302.030.404116.7790058.933826.479845.9966NaNNaNWinter2.451Summer4.02.04.00.05.01.00.03.02.02.03.00.03.00.00.03.04.03.04.01.044.0Summer31.045.0Winter0.01.0
4Spring181SummerNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNSummer1.04NaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaN
5Spring131Winter50.0Summer22.27995259.50112.2NaN60.073.0102.0NaNNaNNaNNaNSummer12.00.016.52.017.92.06.00.010.01.011.01.08.00.0Summer2.04.3303630.18651330.9701996.4530.2124084.028516.687713.4988067.971502.032.914120.9020079.698235.380463.1265NaNNaNSpring4.110Summer3.03.03.00.02.01.00.02.02.01.00.01.03.03.02.01.03.01.02.01.034.0Summer40.056.0Spring0.01.0
6Fall100NaNNaNFall19.66076055.0084.6NaN123.083.0163.0NaNNaNNaNNaNFall9.01.0NaNNaNNaNNaN2.00.011.01.011.01.011.01.0Fall2.03.7827119.66291135.8601817.3816.3275063.247014.70004.9629121.353002.030.893616.0259059.464326.195747.2211NaNNaNWinter3.670Winter1.04.01.00.02.01.00.01.00.00.00.00.00.00.00.04.01.04.01.00.020.0Winter27.040.0Fall3.00.0
7Fall101NaNNaNFall16.86128659.2584.227.071.090.0116.0NaNNaNNaNNaNFall0.00.012.62.011.11.00.00.00.00.00.00.04.00.0Fall3.04.0572616.86311180.0401888.0621.9400067.952713.60923.2539516.247402.028.536717.4760063.895428.768050.4767NaNNaNFall1.270NaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNFall2.0NaN
8Summer150NaNNaNSpringNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNSpringNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNSummer2.0NaN
9Summer191SummerNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaN
10Spring111NaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNSpringNaNNaN
11Fall110Summer66.0NaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNWinterNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNWinter1.100Winter2.02.01.00.03.00.00.00.00.00.00.00.00.00.00.00.01.00.01.00.010.0Winter42.059.0Fall0.00.0
12Fall130NaNNaNWinter21.07906557.75100.0NaN63.079.0150.0NaNNaNNaNNaNWinter24.01.019.21.018.41.020.01.08.01.09.51.012.51.0Winter5.05.0802521.08141239.4602974.7119.9545074.282315.65975.4216525.717702.036.057218.2705069.202036.223256.0118NaNNaNFall3.020Fall3.02.03.02.03.03.00.01.02.01.00.00.02.01.01.01.01.02.02.01.031.0Fall33.047.0Fall1.01.0
13Spring120NaNNaNSpring15.54411160.0079.624.057.071.0103.0NaNNaNNaNNaNSpring10.00.022.32.021.62.07.00.07.00.09.01.012.01.0NaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNSpring1.220NaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNSpringNaNNaN
14Spring120NaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNSpringNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNSpring2.0NaN
15Winter70Summer51.0Spring29.31577554.00121.6NaN80.075.099.0Spring4.05.032.0Spring6.01.0NaNNaNNaNNaN0.00.012.01.015.01.012.01.0NaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNSpring4.04.04.03.05.01.01.04.01.01.04.01.04.04.04.02.04.03.03.01.058.0Spring35.050.0Winter2.02.0
16Spring51Summer80.0Spring17.28450444.0047.6NaN61.076.0109.0SpringNaNNaNNaNSpring0.00.0NaNNaNNaNNaN0.00.010.51.010.01.07.01.0NaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNSummer0.00.00.00.00.00.00.00.00.00.00.00.00.00.00.00.00.00.00.00.00.0Spring37.053.0Spring0.00.0
17Fall101NaNNaNFall19.89315755.0085.630.0NaN81.0NaNNaNNaNNaNNaNFall5.00.0NaNNaNNaNNaN0.00.00.00.00.00.09.01.0NaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNFall1.0NaN
18Winter60Spring60.0Winter30.09464937.5060.224.061.091.095.0NaNNaNNaNNaNWinter6.01.0NaNNaNNaNNaN0.00.04.00.04.00.07.01.0Winter2.02.7503517.27381003.0701504.6115.1456049.103414.08983.1840711.096601.023.618210.3396046.353119.888638.7638NaNNaNNaNNaNWinter3.03.02.00.04.00.00.00.00.02.02.00.03.00.00.02.03.03.01.00.028.0Winter39.055.0Winter3.00.0
19Winter100NaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNSpringNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNNaNWinter2.0NaN
\n
"},"metadata":{}}],"execution_count":18},{"cell_type":"markdown","source":"qq gì mà NaN nó nhiều :)))","metadata":{}},{"cell_type":"code","source":"# Phần trăm giá trị trống trong dữ liệu theo từng cột\ntrain.isna().mean()","metadata":{"execution":{"iopub.status.busy":"2024-10-16T10:03:30.053624Z","iopub.execute_input":"2024-10-16T10:03:30.054045Z","iopub.status.idle":"2024-10-16T10:03:30.069288Z","shell.execute_reply.started":"2024-10-16T10:03:30.054005Z","shell.execute_reply":"2024-10-16T10:03:30.067877Z"},"trusted":true},"outputs":[{"execution_count":23,"output_type":"execute_result","data":{"text/plain":"Basic_Demos-Enroll_Season 0.000000\nBasic_Demos-Age 0.000000\nBasic_Demos-Sex 0.000000\nCGAS-Season 0.354798\nCGAS-CGAS_Score 0.388636\nPhysical-Season 0.164141\nPhysical-BMI 0.236869\nPhysical-Height 0.235606\nPhysical-Weight 0.223232\nPhysical-Waist_Circumference 0.773232\nPhysical-Diastolic_BP 0.254040\nPhysical-HeartRate 0.250758\nPhysical-Systolic_BP 0.254040\nFitness_Endurance-Season 0.669697\nFitness_Endurance-Max_Stage 0.812374\nFitness_Endurance-Time_Mins 0.813131\nFitness_Endurance-Time_Sec 0.813131\nFGC-Season 0.155051\nFGC-FGC_CU 0.413636\nFGC-FGC_CU_Zone 0.423737\nFGC-FGC_GSND 0.728788\nFGC-FGC_GSND_Zone 0.731818\nFGC-FGC_GSD 0.728788\nFGC-FGC_GSD_Zone 0.731566\nFGC-FGC_PU 0.416667\nFGC-FGC_PU_Zone 0.426515\nFGC-FGC_SRL 0.417929\nFGC-FGC_SRL_Zone 0.427525\nFGC-FGC_SRR 0.417424\nFGC-FGC_SRR_Zone 0.427020\nFGC-FGC_TL 0.413131\nFGC-FGC_TL_Zone 0.422980\nBIA-Season 0.458333\nBIA-BIA_Activity_Level_num 0.497222\nBIA-BIA_BMC 0.497222\nBIA-BIA_BMI 0.497222\nBIA-BIA_BMR 0.497222\nBIA-BIA_DEE 0.497222\nBIA-BIA_ECW 0.497222\nBIA-BIA_FFM 0.497222\nBIA-BIA_FFMI 0.497222\nBIA-BIA_FMI 0.497222\nBIA-BIA_Fat 0.497222\nBIA-BIA_Frame_num 0.497222\nBIA-BIA_ICW 0.497222\nBIA-BIA_LDM 0.497222\nBIA-BIA_LST 0.497222\nBIA-BIA_SMM 0.497222\nBIA-BIA_TBW 0.497222\nPAQ_A-Season 0.880051\nPAQ_A-PAQ_A_Total 0.880051\nPAQ_C-Season 0.565404\nPAQ_C-PAQ_C_Total 0.565404\nPCIAT-Season 0.309091\nPCIAT-PCIAT_01 0.309848\nPCIAT-PCIAT_02 0.309596\nPCIAT-PCIAT_03 0.310354\nPCIAT-PCIAT_04 0.310354\nPCIAT-PCIAT_05 0.310859\nPCIAT-PCIAT_06 0.310101\nPCIAT-PCIAT_07 0.310859\nPCIAT-PCIAT_08 0.310606\nPCIAT-PCIAT_09 0.310606\nPCIAT-PCIAT_10 0.309848\nPCIAT-PCIAT_11 0.309596\nPCIAT-PCIAT_12 0.310354\nPCIAT-PCIAT_13 0.310859\nPCIAT-PCIAT_14 0.310101\nPCIAT-PCIAT_15 0.310606\nPCIAT-PCIAT_16 0.311111\nPCIAT-PCIAT_17 0.311869\nPCIAT-PCIAT_18 0.311111\nPCIAT-PCIAT_19 0.310606\nPCIAT-PCIAT_20 0.309848\nPCIAT-PCIAT_Total 0.309091\nSDS-Season 0.338889\nSDS-SDS_Total_Raw 0.341162\nSDS-SDS_Total_T 0.341919\nPreInt_EduHx-Season 0.106061\nPreInt_EduHx-computerinternet_hoursday 0.166414\nsii 0.309091\ndtype: float64"},"metadata":{}}],"execution_count":23},{"cell_type":"markdown","source":"Trong dữ liệu có *Fitness_Endurance-Max_Stage*, *Fitness_Endurance-Time_Mins*, *Fitness_Endurance-Time_Sec* (>80%) và *Physical-Waist_Circumference* (77%) và *FGC-FGC_GSND*, *FGC-FGC_GSND_Zone*, *FGC-FGC_GSD*, *FGC-FGC_GSD_Zone* (khoảng 72%)
\nSố phần trăm *PAQ_A-Season*, *PAQ_A-PAQ_A_Total* khoảng 88% ( Đây là chỉ số chỉ dành cho thanh thiếu niên). Chỉ số này liên hệ với hai chỉ số dưới là *PAQ_C-Season*, *PAQ_C-PAQ_C_Total* (chỉ số dành cho thiếu nhi)
\n=> Chỉ số này nhiều cái bị miss là do ít thanh thiếu niên tham gia khảo sát, nên tui định gộp hai cái này thành một cột chỉ là PAQ-Season, \n\n","metadata":{}},{"cell_type":"code","source":"# mean, median, quantile, tổng cho từng feature\ntrain.describe().T","metadata":{},"outputs":[],"execution_count":null},{"cell_type":"markdown","source":"### Visualise dữ liệu","metadata":{}},{"cell_type":"code","source":"import matplotlib.pyplot as plt\nimport seaborn as sns","metadata":{"execution":{"iopub.status.busy":"2024-10-16T10:02:28.421979Z","iopub.execute_input":"2024-10-16T10:02:28.422458Z","iopub.status.idle":"2024-10-16T10:02:29.281929Z","shell.execute_reply.started":"2024-10-16T10:02:28.422408Z","shell.execute_reply":"2024-10-16T10:02:29.280849Z"},"trusted":true},"outputs":[],"execution_count":19},{"cell_type":"markdown","source":"Chỉ số sii của có ô bị bỏ trống
\nThấy code mẫu khi train họ bỏ các dòng mà sii bị trống","metadata":{}},{"cell_type":"markdown","source":"#### Basic","metadata":{}},{"cell_type":"code","source":"","metadata":{},"outputs":[],"execution_count":null},{"cell_type":"markdown","source":"#### Physic","metadata":{}},{"cell_type":"markdown","source":"1. Hình cho Physic có dữ liệu liên tục","metadata":{}},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"markdown","source":"2. Hình cho Physicc có dữ liệu thuộc từng loại ","metadata":{}},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"markdown","source":"#### Fitness","metadata":{}},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"markdown","source":"#### FGC","metadata":{}},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"markdown","source":"#### BIA","metadata":{}},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"markdown","source":"#### PAQ","metadata":{}},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"markdown","source":"#### SDI & PreInt","metadata":{}},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"markdown","source":"#### PCIAT & SII","metadata":{}},{"cell_type":"markdown","source":"1. PCIAT_0 -> PCIAT_1","metadata":{}},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"markdown","source":"2. PCIAT_total","metadata":{}},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"markdown","source":"3. **SII**","metadata":{}},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{"trusted":true},"outputs":[],"execution_count":null},{"cell_type":"markdown","source":"# TÌM HIỂU TẬP SERIES_TRAIN.QARQUET VÀ SERIES_TEST.QARQUET","metadata":{}},{"cell_type":"code","source":"def process_file(filename, dirname):\n df = pd.read_parquet(os.path.join(dirname, filename, 'part-0.parquet'))\n df.drop('step', axis=1, inplace=True)\n return df.describe().values.reshape(-1), filename.split('=')[1]\n\ndef load_time_series(dirname) -> pd.DataFrame:\n ids = os.listdir(dirname)\n \n with ThreadPoolExecutor() as executor:\n results = list(tqdm(executor.map(lambda fname: process_file(fname, dirname), ids), total=len(ids)))\n \n stats, indexes = zip(*results)\n \n df = pd.DataFrame(stats, columns=[f\"Stat_{i}\" for i in range(len(stats[0]))])\n df['id'] = indexes\n \n return df\n\ntrain = pd.read_csv('/kaggle/input/child-mind-institute-problematic-internet-use/train.csv')\ntest = pd.read_csv('/kaggle/input/child-mind-institute-problematic-internet-use/test.csv')\nsample = pd.read_csv('/kaggle/input/child-mind-institute-problematic-internet-use/sample_submission.csv')\n\ntrain_ts = load_time_series(\"/kaggle/input/child-mind-institute-problematic-internet-use/series_train.parquet\")\ntest_ts = load_time_series(\"/kaggle/input/child-mind-institute-problematic-internet-use/series_test.parquet\")\n# EDA trai_ts, test_ts","metadata":{},"outputs":[],"execution_count":null},{"cell_type":"code","source":"train_ts # xem tập tập train_ts","metadata":{},"outputs":[],"execution_count":null},{"cell_type":"markdown","source":"Làm tương tự như tập train.csv","metadata":{}},{"cell_type":"code","source":"","metadata":{},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{},"outputs":[],"execution_count":null},{"cell_type":"markdown","source":"# KẾT HỢP TRAIN.CSV VÀ SERIES_TRAIN.QUARQUET qua ID","metadata":{}},{"cell_type":"code","source":"train = pd.merge(train, train_ts, how=\"left\", on='id')","metadata":{},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{},"outputs":[],"execution_count":null},{"cell_type":"code","source":"","metadata":{},"outputs":[],"execution_count":null}]}