본문 바로가기

playwright7

Sense Stock, D+25 📅 Sense Stock 개발 일지 (2025-08-24)n8n, 사용자 질의 기반 경제/시장/주식 분석 자동화 파이프라인 구축 중 진행한 작업들을 정리합니다.오늘은 의존성 지옥부터 파일 권한 문제까지 해결한 작업 내용을 정리했습니다. 지난번에는 기존 자동화 워크플로우를 최적화하고, 오늘은 Parsing 결과 확인과 프롬프트 고도화를 할 예정이었으나.. n8n 버전 업데이트라는 간단해 보이는 작업이 어떻게 의존성 문제와 예상치 못한 권한 문제로 이어졌는지, 그리고 그 모든 과정을 어떻게 해결했는지에 대한 전체 여정을 공유하려 한다.모든 것의 시작은 "Update가 오랫동안 안됐다는 알림"에서 부터이다. ㅋㅋㅋㅋ 기존 docker-compose.yml이 build 명령어로 이미지를 만들고 있었기에, 이걸.. 2025. 8. 24.
Sense Stock 개발 회고, 세 번째 📅 Sense Stock 개발, 세 번째 회고록 (2025-08-12)두번째회고 때보다 시간이 꽤 많이 흘렀는데... 한달이 넘었네 ㅋㅋㅋ, 그만큼 변화된게 엄청 많다.https://cord-ai.tistory.com/237 Sense Stock 개발 회고, 두 번째📅 Sense Stock 개발, 두 번째 회고록 (2025-07-04)https://notebooklm.google.com/notebook/cf4e6f87-9bfb-4284-937e-0b0175090d1c/audio 로그인 - Google 계정이메일 또는 휴대전화accounts.google.com 이번에도 돌아왔다. 나의 회고cord-ai.tistory.com Audio Overview>지루한 글 읽어볼 필요없이 Audio에 모든게 담겨 .. 2025. 8. 12.
Sense Stock, D+20 📅 Sense Stock 개발 일지 (2025-07-28)n8n, 사용자 질의 기반 경제/시장/주식 분석 자동화 파이프라인 구축 중 진행한 작업들을 정리합니다.오늘은 Daily Workflow구조에서 S&P500 실적만 저장하는 구조를 추가하고, 저장한 Data들을 참조하는 Workflow 구조 설계를 진행했습니다. 🚨 문제 발생AI 에이전트에 경제, 실적, S&P500 등 로컬 데이터를 한 번에 제공하려 했으나, 처리할 데이터 양이 너무 많아 토큰 제한(Token Limit) 문제에 부딪혔다. Google Sheets API 연동 시 발생했던 API 요청 수 제한(Rate Limit)에 이은 두 번째 난관이었다. 🏸 해결 과정 토큰 사용량을 줄이고 데이터 처리 효율을 높이기 위해 아래와 같이 데.. 2025. 7. 28.
Sense Stock, D+17 📅 Sense Stock 개발 일지 (2025-07-11)n8n, 사용자 질의 기반 경제/시장/주식 분석 자동화 파이프라인 구축 중 진행한 작업들을 정리합니다.오늘은 S&P500 성과 및 티커 데이터 수집 자동화를 고도화하고, Slack 메시지 루프 이슈를 해결했습니다. ❓ 지난번 고민 내용이제는 수집한 데이터들을 실제로 최종 응답에 어떻게 활용할 것인지, 어떻게 똑똑하게 꺼내 쓸지 S&P500은 단순한 지수 그 이상이다.미국의 증권거래소에 상장된 500개의 가장 큰 기업들의 주가 성과를 추적하는 이 지표는, 전체 시장 흐름을 파악하는 기준점이 되기 때문에 분석 자동화의 핵심이 될 수밖에 없다.처음에는 시각적으로만 보여주는 Heatmap 이미지로 충분하다고 생각했는데, 정작 사용자가 “이 종목 최근 .. 2025. 7. 11.
Sense Stock, D+16 📅 Sense Stock 개발 일지 (2025-07-09) n8n, 사용자 질의 기반 경제/시장/주식 분석 자동화 파이프라인 구축 중 진행한 작업들을 정리합니다.오늘은 Playwright와 BeautifulSoup을 조합해 경제/실적 캘린더, 섹터/티커 정보 크롤링 파이프라인을 구축했습니다. ❓ 지난번 고민 내용각 Data 취합 로직 구현 및 변동률 기준(예: ±3%) 이상일 때만 뉴스 요약 흐름을 실행할지 각 Data 취합 로직 구현 => 금일 진행종목 추천 흐름 설계 시, 어떤 데이터 기준으로 필터링할지 뉴스 요약만으로는 부족했다.경제 지표 일정이나 섹터 퍼포먼스, 개별 티커 정보 같은 기초 데이터를 자동으로 수집하지 않으면, 매번 브라우저를 열어 수동 확인해야 했다. 특히 Investing.com.. 2025. 7. 9.
Sense Stock, D+13 📅 Sense Stock 개발 일지 (2025-06-30)n8n 기반 주식 자동화 시스템 Sense Stock 구축 중 진행한 작업들을 정리합니다.오늘은 Docker Rebuilding, Schedule Workflow 생성, Playwright - Python, DB 저장 작업을 진행했습니다. ❓ 지난번 고민 내용Docker Image 재구성이 최우선 => Docker Rebuilding최근 자료 첨부 구현 => Schedule Workflow 🐳 Docker 재빌드 및 환경 정리 리빌딩 목적 기존 n8n 컨테이너에서 Playwright 기반 Python 자동화를 실행하려 했으나,Playwright, Python, Chromium 등 환경이 기본 이미지에 없음headless 모드의 한계로 DOM.. 2025. 6. 30.
Sense Stock, D+12 📅 Sense Stock 개발 일지 (2025-06-27)n8n 기반 뉴스 요약 자동화 시스템 Sense Stock 구축 중 진행한 작업들을 정리합니다.오늘은 주식 시장 데이터 자동 수집을 위해 Playwright 기반 크롤링 서버를 Docker로 구성했습니다. ❓ 지난번 고민: 응답 신뢰성 부족현재 GPT는 성향 분석 → 시장 요약 → 시나리오 제안의 형태로 응답을 출력하지만,가장 큰 문제는 “정확한 데이터를 기반으로 하고 있는지 확인할 수 없다”는 점이었다.예를 들어, 프롬프트에“당일 날짜는 2025-06-26이며, 해당 날짜 기준으로 분석해줘”라고 명시했음에도 불구하고, GPT가 “오늘 미국 증시는 하락세입니다”라고 응답했을 때,실제로는 상승장이었다면 이건 단순 포맷 문제가 아니라 신뢰성 붕괴다.. 2025. 6. 27.