알고리즘
특정 키워드에 의해 소비자글을 Gathering 하다보면 너무 많은 글이 모아진다.
필터링은 3단계를 거친다.
1. 제외 키워드에 의해 기사를 삭제 (Flag 값 변경)
2. 필수 키워드에 의해 기사 선별 ( 필수기사선별 및 제외된 기사중 필수키워드 포함 기사 복구)
3. 제외Url에 의해 특정 소스에서 들어온 기사 삭제