"일꾼이 일을 잘하려면 먼저 도구를 갈고 닦아야 한다." - 공자, 『논어』.
첫 장 > 프로그램 작성 > 데이터 엔지니어링을 통한 건강 추적 - 식사 최적화 장

데이터 엔지니어링을 통한 건강 추적 - 식사 최적화 장

2024-08-07에 게시됨
검색:126

소개

여러분, 안녕하세요! 이것은 내 첫 번째 게시물이 될 것이므로 나에게 가혹한 태도를 취하고 내가 개선할 수 있다고 생각하는 부분을 비판하면 다음 번에 반드시 고려할 것입니다.

지난 몇 달간 건강에 대해 깊이 생각하며 주로 운동을 하고, 먹는 것을 조심했는데, 이제 어느 정도 이해가 된 것 같으니 어떻게 하면 더 최적화할 수 있을지 알아보고 싶었습니다. 제가 놓친 부분이 있을 수도 있으니 참고하세요.

목표

이 장에서는 건강 여행 전반에 걸쳐 식사에 대해 연구하고 다음 주 식사 계획으로 마무리하고 싶습니다. (1) 최소 단백질 요구 사항을 충족하고, (2) 칼로리 한도를 초과하지 않고, (3) 최소 섬유 요구 사항을 충족하고 (4) 비용을 최소화합니다.

데이터세트

크로노미터를 사용하여 추적한 음식인 데이터 세트를 소개하는 것부터 시작합니다. 크로노미터는 저의 여정에서 저와 함께 일해 왔으며 이제 이전에 나열한 목표에 따라 제가 직접 분석하기 위해 입력한 데이터를 내보내게 됩니다.

다행히도 Cronometer를 사용하면 웹사이트에서 쉽게 데이터를 .csv 파일로 내보낼 수 있습니다.
Screenshot of the export options from Cronometer

이 장에서는 '음식 및 레시피 항목' 데이터세트만 내보냅니다.

'Food & Recipe Entries'에서 얻은 데이터를 조사하는 것부터 시작합니다. 데이터 세트는 매우 포괄적이므로 향후 장에서 유용할 것이라고 확신합니다! 이 장에서는 음식의 이름, 양, 단백질, 칼로리, 섬유질로 제한하고 싶습니다.

# Importing and checking out the dataset
df = pd.read_csv("servings.csv")
df.head()

데이터 전처리

'음식 이름', '양', '에너지(kcal)', '섬유질(g)', '단백질(g)'에 대한 몇 가지 열이 이미 설정되어 있습니다. 완벽한! 이제 우리에게 부족한 유일한 것은 데이터 세트에서 추적되지 않았기 때문에 특정 금액이 주어진 각 음식의 비용을 얻는 것입니다. 다행스럽게도 내가 아는 가격을 입력할 수 있도록 데이터를 먼저 입력한 사람이 나였다. 하지만 모든 식품의 가격을 입력하지는 않겠습니다. 대신 우리는 오랜 친구인 ChatGPT에게 견적을 요청하고 .csv 파일을 조정하여 우리가 알고 있는 가격을 입력합니다. 원본 데이터세트에서 '음식 이름' 및 '금액' 열을 가져와 파생된 'cost.csv'에 새 데이터세트를 저장합니다.

# Group by 'Food Name' and collect unique 'Amount' for each group
grouped_df = df.groupby('Food Name')['Amount'].unique().reset_index()

# Expand the DataFrame so each unique 'Food Name' and 'Amount' is on a separate row
expanded_df = grouped_df.explode('Amount')

# Export the DataFrame to a CSV file
expanded_df.to_csv('grouped_food_names_amounts.csv')

# Read the added costs and save as a new DataFrame
df_cost = pd.read_csv("cost.csv").dropna()
df_cost.head()

일부 음식은 단순히 너무 이상하게 구체적이고 저칼로리, 영양가가 높거나 저렴하다는 데이터 범위에 포함되지 않기 때문에 삭제되었습니다(또는 단순히 조리법을 다시 만드는 데 신경 쓸 수 없었기 때문에). ). 그런 다음 가정된 '최종' 데이터 세트를 얻기 위해 원래 데이터 세트와 비용이 있는 데이터 프레임 두 개를 병합해야 합니다. 원본 데이터 세트에는 각 음식에 대한 항목이 포함되어 있으므로 이는 원본 데이터 세트에 동일한 음식, 특히 반복적으로 먹는 음식(예: 계란, 닭 가슴살, 쌀)에 대한 여러 항목이 있음을 의미합니다. 또한 여기서 문제의 원인이 될 가능성이 가장 높은 항목은 '에너지', '섬유질', '단백질' 및 '가격' 열이므로 값이 없는 열을 '0'으로 채우려고 합니다.

merged_df = pd.merge(df, df_cost, on=['Food Name', 'Amount'], how='inner')

specified_columns = ['Food Name', 'Amount', 'Energy (kcal)', 'Fiber (g)', 'Protein (g)', 'Price']
final_df = merged_df[specified_columns].drop_duplicates()
final_df.fillna(0, inplace=True)
final_df.head()

최적화

완벽한! 데이터 세트가 완료되었으며 이제 두 번째 부분인 최적화부터 시작합니다. 연구의 목적을 상기하면서, 우리는 최소량의 단백질과 섬유질, 최대량의 칼로리를 고려하여 최소 비용을 식별하고자 합니다. 여기서 옵션은 모든 단일 조합을 무차별 대입하는 것입니다. 그러나 업계에서는 "선형 프로그래밍" 또는 "선형 최적화"라는 적절한 용어를 사용하지만 그에 대해 인용하지는 않습니다. 이번에는 이를 정확하게 수행하는 것을 목표로 하는 Python 라이브러리인 puLP를 사용하겠습니다. 나는 템플릿을 따르는 것 외에는 그것을 사용하는 것에 대해 많이 알지 못하므로 그것이 어떻게 작동하는지에 대한 비전문적인 설명을 읽는 대신 해당 문서를 찾아보십시오. 하지만 주제에 대한 내 설명을 듣고 싶은 사람들을 위해 기본적으로 y = ax1 bx2 cx3 ... zxn.

에 대해 풀고 있습니다.

우리가 따를 템플릿은 혼합 문제 사례 연구의 템플릿입니다. 여기서는 비슷한 목표를 따르지만 이 경우에는 하루 종일 식사를 혼합하려고 합니다. 시작하려면 DataFrame을 사전으로 변환해야 합니다. 특히 '음식 이름'을 일련의 x 역할을 하는 독립 변수 목록으로 변환한 다음 에너지, 섬유질, 단백질 및 가격을 사전으로 변환해야 합니다. '음식 이름': 각각의 값입니다. 앞으로는 금액이 생략되고 대신 정량적으로 사용되지 않으므로 '음식 이름'과 연결됩니다.

# Concatenate Amount into Food Name
final_df['Food Name'] = final_df['Food Name']   ' '   final_df['Amount'].astype(str)
food_names = final_df['Food Name'].tolist()

# Create dictionaries for 'Energy', 'Fiber', 'Protein', and 'Price'
energy_dict = final_df.set_index('Food Name')['Energy (kcal)'].to_dict()
fiber_dict = final_df.set_index('Food Name')['Fiber (g)'].to_dict()
fiber_dict['Gardenia, High Fiber Wheat Raisin Loaf 1.00 Slice'] = 3
fiber_dict['Gardenia, High Fiber Wheat Raisin Loaf 2.00 Slice'] = 6
protein_dict = final_df.set_index('Food Name')['Protein (g)'].to_dict()
price_dict = final_df.set_index('Food Name')['Price'].to_dict()

# Display the results
print("Food Names Array:", food_names)
print("Energy Dictionary:", energy_dict)
print("Fiber Dictionary:", fiber_dict)
print("Protein Dictionary:", protein_dict)
print("Price Dictionary:", price_dict)

시력이 좋지 않으신 분들은 계속 스크롤하세요. 으스스한 두 줄의 코드를 발견한 사람들을 위해 설명하겠습니다. 식료품 쇼핑을 하는 동안 이것을 보았는데 Gardenia의 고섬유질 밀 건포도 빵에 대한 영양 정보에는 실제로 9g의 섬유질이 1조각이 없고 6g당 2조각이 들어 있습니다. 이것은 큰 일이며 데이터를 잘못 입력했거나 데이터가 오래되게 만드는 성분의 변경으로 인해 값이 부정확할 수 있다는 것을 알고 나에게 헤아릴 수 없는 고통을 안겨주었습니다. 어느 쪽이든, 나는 이 정의를 바로잡아야 했고, 내가 마땅히 받아야 할 것보다 더 적은 섬유질을 지지하지 않을 것입니다. 계속하세요.

우수사례 데이터의 템플릿을 사용하여 우리의 가치를 곧바로 연결합니다. 우리는 단백질과 섬유질에서 원하는 최소값과 섭취하려는 최대 칼로리를 나타내도록 변수를 설정합니다. 그런 다음 마법의 템플릿 코드가 작동하여 결과를 얻도록 합니다.

# Set variables
min_protein = 120
min_fiber = 40
max_energy = 1500

# Just read the case study at https://coin-or.github.io/pulp/CaseStudies/a_blending_problem.html. They explain it way better than I ever could.
prob = LpProblem("Meal Optimization", LpMinimize)
food_vars = LpVariable.dicts("Food", food_names, 0)
prob  = (
    lpSum([price_dict[i] * food_vars[i] for i in food_names]),
    "Total Cost of Food daily",
)
prob  = (
    lpSum([energy_dict[i] * food_vars[i] for i in food_names]) = min_fiber,
    "FiberRequirement",
)
prob  = (
    lpSum([protein_dict[i] * food_vars[i] for i in food_names]) >= min_protein,
    "ProteinRequirement",
)
prob.writeLP("MealOptimization.lp")
prob.solve()
print("Status:", LpStatus[prob.status])
for v in prob.variables():
    if v.varValue > 0:
        print(v.name, "=", v.varValue)
print("Total Cost of Food per day = ", value(prob.objective))

결과

Image description

단백질 120g과 섬유질 40g을 섭취하려면 닭 가슴살 살코기 269g과 녹두 526g에 필리핀 페소 128페소를 써야 합니다. 이건... 제가 두 재료를 얼마나 좋아하는지 생각하면 전혀 나쁘지 않은 것 같습니다. 충분한 영양 섭취에도 불구하고 얼마나 많은 돈을 절약할 수 있는지 확인하기 위해 일주일 또는 한 달 동안 꼭 시도해 볼 것입니다.

데이터 엔지니어링을 통한 건강 추적의 이번 장은 이것이었습니다. 이 장에서 제가 작업한 데이터를 보려면 저장소를 방문하거나 이 페이지의 노트북을 방문하세요. 궁금하신 점 있으시면 댓글 남겨주시고 항상 건강하세요.

릴리스 선언문 이 기사는 https://dev.to/wilyanse/tracking-health-with-data-engineering-chapter-1-meal-optimization-2cl7?1에서 복제됩니다. 침해가 있는 경우, [email protected]으로 문의하시기 바랍니다. 그것을 삭제하려면
최신 튜토리얼 더>

부인 성명: 제공된 모든 리소스는 부분적으로 인터넷에서 가져온 것입니다. 귀하의 저작권이나 기타 권리 및 이익이 침해된 경우 자세한 이유를 설명하고 저작권 또는 권리 및 이익에 대한 증거를 제공한 후 이메일([email protected])로 보내주십시오. 최대한 빨리 처리해 드리겠습니다.

Copyright© 2022 湘ICP备2022001581号-3