사진 찍으면 식단 자동 기록 (Immich + 로컬 AI)
사진만 찍으면 끝. 클라우드 AI 없이 맥 안에서 다 돈다.
1. 전체 구조
flowchart TB
subgraph PHONE["📱 아이폰"]
CAM["📷 카메라<br/>밥·성분표·운동 캡처"]
IAPP["Immich 앱<br/>백그라운드 백업"]
SCR["📊 Scriptable 위젯<br/>오늘 칼로리·단백질"]
end
subgraph NET["🔒 Tailscale"]
TS["사설 VPN<br/>밖에서도 집 맥 접속"]
end
subgraph MAC["💻 맥 (M4 Air)"]
IMM[("🗂 Immich<br/>Docker")]
LD["⏰ launchd<br/>10분마다"]
SC["⚙️ diet-auto.mjs"]
OL["🧠 Ollama<br/>로컬 비전 모델"]
end
subgraph CLOUD["☁️ iCloud Drive"]
JS[("📄 diet-data.json")]
end
HDD[("💾 외장하드")]
CAM --> IAPP
IAPP -->|사진 업로드| TS
TS --> IMM
LD -->|실행| SC
SC -->|새 사진 조회| IMM
SC <-->|사진 → JSON| OL
SC -->|기록 추가| JS
JS -->|동기화| SCR
SC -->|🔔 알림| MAC
IMM -->|꽂으면 자동 백업| HDD
구성 요소와 용도
flowchart LR
A["📱 아이폰"] -->|용도| A1["사진 찍기 · 위젯으로 확인"]
B["🔒 Tailscale"] -->|용도| B1["집 밖 LTE에서도<br/>맥 Immich로 백업"]
C["🗂 Immich"] -->|용도| C1["구글 포토 대신<br/>내 맥에 사진 보관"]
D["⏰ launchd"] -->|용도| D1["10분마다 스크립트 실행<br/>외장하드 꽂으면 백업"]
E["🧠 Ollama"] -->|용도| E1["사진 → 음식/성분표/운동 판단<br/>kcal·단백질 추정"]
F["📄 diet-data.json"] -->|용도| F1["식단·운동 기록 원본<br/>iCloud로 폰과 공유"]
G["📊 Scriptable"] -->|용도| G1["홈 화면 위젯<br/>오늘 먹은 양 표시"]
H["💾 외장하드"] -->|용도| H1["사진·DB 2차 백업"]
주기
flowchart TD
T0["📷 촬영"] -->|"수 분<br/>(백업)"| T1["🗂 Immich 도착"]
T1 -->|"15분 대기<br/>(메모·성분표 붙일 시간)"| T2["분석 대상"]
T2 -->|"최대 10분<br/>(launchd 주기)"| T3["🧠 분석"]
T3 -->|"수 초"| T4["📄 기록 + 🔔 알림"]
2. 사진 이사 (Google 포토 → Immich)
flowchart LR
G["☁️ Google 포토<br/>약 15,000장"] -->|Takeout| T["💻 맥 폴더<br/>21,179개"]
T -->|읽기전용 연결| X["Immich 외부 라이브러리"]
T -->|"immich CLI 업로드<br/>(해시 중복 제거)"| U["Immich 업로드 라이브러리"]
X -.->|삭제| D1(("🗑"))
T -.->|휴지통| D2(("🗑"))
G -.->|휴지통| D3(("🗑"))
U --> H{"해시 대조<br/>빠진 것 0?"}
H -->|OK| B[("💾 외장하드<br/>APFS")]
B --> H2{"해시 대조<br/>빠진 것 0?"}
H2 -->|OK| E["✅ 원본 정리"]
flowchart LR
A["외부 라이브러리 삭제"] -->|"라이브포토 영상 연결돼 있음"| B["⚠️ 영상 983개 같이 삭제"]
B -->|"정리용 사본에서"| C["재업로드"]
C --> D["✅ 해시 0개 누락"]
3. 한 번 실행될 때
sequenceDiagram
autonumber
participant L as ⏰ launchd
participant S as ⚙️ 스크립트
participant I as 🗂 Immich
participant O as 🧠 Ollama
participant J as 📄 diet-data.json
L->>S: 10분마다 실행
S->>I: 최근 사진 + "식단" 앨범 조회
I-->>S: 사진 목록 (설명·촬영시각)
S->>S: 처리한 사진·15분 안 된 사진 제외
loop 사진마다
S->>I: 미리보기 이미지
S->>O: 이미지 + 메모 + JSON 스키마
O-->>S: 분류 + kcal/단백질/나트륨
end
S->>O: 식사 + 근처 성분표 묶어서 재계산
S->>J: 다시 읽기 → 추가 → 저장
S->>S: 🔔 알림
4. 사진 분류
flowchart TD
A["📷 새 사진"] --> B{"올라온 지<br/>15분 지남?"}
B -->|아니오| W["⏳ 다음 차례"]
B -->|예| C{"이미 처리?"}
C -->|예| Z["⏭ 건너뜀"]
C -->|아니오| M["🧠 모델 판단"]
M --> K1["🍚 음식"]
M --> K2["🏷 성분표"]
M --> K3["🏃 운동 화면"]
M --> K4["🐱 기타"]
K4 --> F{"식단 앨범에<br/>넣은 사진?"}
F -->|예| K1
F -->|아니오| Z
K1 --> R1["meals 기록"]
K2 --> G{"±40분 안<br/>음식 사진?"}
G -->|예| R2["음식과 합쳐<br/>성분표 값 우선"]
G -->|아니오| R1
R2 --> R1
K3 --> R3["workouts 기록<br/>활동 칼로리"]
5. 성분표 묶기
flowchart LR
subgraph T["⏱ 12:00 ~ 12:40"]
A["🍚 12:10<br/>제육볶음<br/>메모: 1인분"]
B["🏷 12:20<br/>음료 성분표"]
end
A --> C["🧠 두 장 같이 분석"]
B --> C
C --> D["📄 한 끼로 기록<br/>제육볶음 + 음료"]
6. 날짜 규칙 (오전 7시)
flowchart LR
A["📷 촬영 시각"] --> B{"07:00 전?"}
B -->|예| C["📅 전날"]
B -->|아니오| D["📅 당일"]
E["11/17 02:30 🍜"] -.-> C
F["11/16 12:10 🍚"] -.-> D
7. 중복 방지
stateDiagram-v2
[*] --> 새사진
새사진 --> 대기: 15분 전
대기 --> 새사진: 다음 실행
새사진 --> 분석: 15분 지남
분석 --> 기록: 음식·운동
분석 --> 무시: 기타
기록 --> 처리완료: immichId 저장
무시 --> 처리완료: state.json 저장
처리완료 --> [*]
note right of 처리완료
기록을 지워도
다시 안 들어감
end note
8. 데이터
erDiagram
DIET_DATA ||--o{ MEAL : meals
DIET_DATA ||--o{ WORKOUT : workouts
MEAL {
string id "m20261116a"
string date "7시 규칙"
number t "촬영시각 ms"
string name
number kcal
number protein
number sodium
string immichId
}
WORKOUT {
string id "w20261116a"
string date
number t
string name
number kcal "활동 칼로리"
string immichId
}
9. 파일 저장
flowchart LR
A["기록할 항목"] --> B["📄 파일 다시 읽기"]
B --> C{"immichId<br/>이미 있음?"}
C -->|예| X["⏭"]
C -->|아니오| D["배열에 추가"]
D --> E["임시파일 쓰기"]
E --> F["rename<br/>(통째 덮어쓰기 X)"]
10. 외장하드 자동 백업
flowchart LR
A["💾 외장하드 꽂음"] -->|StartOnMount| B["launchd"]
B --> C["백업 앱"]
C --> D{"6시간 안에<br/>백업했나?"}
D -->|예| X["⏭"]
D -->|아니오| E["DB 덤프"]
E --> F["rsync<br/>추가·변경만"]
F --> G["🔔 뽑아도 돼요"]
11. 구성 요소
mindmap
root((맥 M4 Air 24GB))
아이폰
Immich 앱 백업
Scriptable 위젯
Tailscale
밖에서도 맥 접속
Immich v3
Docker · Colima
localhost:2283
앨범 동기화
Ollama
qwen2.5vl:7b
gemma3:12b
launchd
10분마다 식단 기록
외장하드 꽂으면 백업
iCloud
diet-data.json
12. AI 인수인계용 지도
flowchart LR
subgraph F["📁 ~/immich/diet-auto/"]
M["diet-auto.mjs<br/>본체"]
C["config.json<br/>⚠️ API 키 · 사람이 직접"]
S["state.json<br/>처리한 사진 · startedAt"]
L["diet-auto.log"]
end
P["~/Library/LaunchAgents/<br/>com.lkh.diet-auto.plist<br/>StartInterval 600"] -->|실행| M
M --> C
M <--> S
M --> L
M -->|append only| J["iCloud~dk~simonbs~Scriptable/<br/>Documents/diet-data.json"]
B["~/immich/backup-to-drive.sh<br/>com.lkh.immich-drive-backup<br/>StartOnMount"] --> H[("/Volumes/ImmichBackup")]
flowchart TD
R["🤖 AI 작업 규칙"] --> R1["파일 통째 덮어쓰기 ❌<br/>다시 읽고 추가만"]
R --> R2["API 키 직접 다루기 ❌"]
R --> R3["immichId로 중복 방지"]
R --> R4["오전 7시 전 = 전날"]
R --> R5["나트륨은 기록만<br/>조언 ❌"]
R --> R6["답은 한국어로 짧게"]
node ~/immich/diet-auto/diet-auto.mjs --dry-run # 분석만
node ~/immich/diet-auto/diet-auto.mjs --test a.jpg "1인분" # 모델만 시험
launchctl kickstart gui/$(id -u)/com.lkh.diet-auto # 지금 실행
tail -f ~/immich/diet-auto/diet-auto.log1
2
3
4
2
3
4