Skip to content

feat(crawler): whitehouse.py 삭제 및 ucsb.py로 대체#25

Open
lsh8110 wants to merge 1 commit intodevfrom
crawler
Open

feat(crawler): whitehouse.py 삭제 및 ucsb.py로 대체#25
lsh8110 wants to merge 1 commit intodevfrom
crawler

Conversation

@lsh8110
Copy link
Copy Markdown
Collaborator

@lsh8110 lsh8110 commented Apr 5, 2026

  • whitehouse.py 삭제 및 ucsb.py 생성에 따른 전처리 파일 수정
  • fed fomc 코드 개선에 따른 데이터 품질 향상
  • 현재 본문을 Ollama로 요약한 후 sentiment 분석 진행, 추후 요약기 사용하지 않고 청크로 나눠 sentiment를 분석한 뒤 통계치를 사용할 예정.

- whitehouse.py 삭제 및 ucsb.py 생성에 따른 전처리 파일 수정
- fed fomc 코드 개선에 따른 데이터 품질 향상
- 현재 본문을 Ollama로 요약한 후 sentiment 분석 진행, 추후 요약기 사용하지 않고 청크로 나눠 sentiment를 분석한 뒤 통계치를 사용할 예정.
Copy link
Copy Markdown
Contributor

@eom175 eom175 left a comment

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

crawler/collectors/ucsb_keywords.json 이 파일에 있는건 석호 님이 직접 설정한 키워드들인건가요?

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

2 participants