홈페이지 제작시에 이런 기능이 구현가능한가요?

 

 

 

[질문]

 

 

홈페이지를 만들려는데 

 

저희가 생각하는 것은

 

어떠한 이슈에 대해서 그 뉴스 나 기사가 페이스북 타임라인처럼 차례차례 올라오는 내용인데

 

이것이 구현이 가능할까요?

 

검색해본 바로는 rss 방식으로해서 뉴스,기사 사이트의 정보를 긁어오는 것은 가능할 것같은데 

 

키워드 검색은 어떻게 해야할지 감이 잘 안잡히네요

 

 

 

[답변]

 

안녕하세요.  IT전문  컨설턴트입니다

 

기능상으로 구현이 가능하지만, 난이도가 높은 방법입니다.

여러가지 전략을 생각해 볼수 있지만, 어떤 서비스를 생각하고 구상하느냐에 따라서 가능여부가 결정이 될것으로 생각이 됩니다. 키워드와 정보의 매칭도를 높이는데 많은 프로그램기법이 예상됩니다.

 

유사한 구조가 응용되는 기법으로는

컨텐츠에서 자동으로 키워드를 추출하고, 키워드와 유사한 광고를 광고영역을 통해서 보여주는 방법에서도 사용이 되고 있습니다. 네이버 지식인의 하단에 노출되는 키워드 광고의 경우에도 본문에서의 키워드를 읽어들어 해당 키워드와 유사한 광고를 보여주고 있습니다. 이런 시스템 구조를 위해서는 DB에 저장된 컨텐츠(본문)에서 키워드를 저절로 추출하는 기술과 유사키워드 및 연관키워드 키워드우선순위 등을 조절할수 있는 기술이 필요합니다.

한국어의 경우 조사가 발달해서 키워드를 추출하는데 타 언어에 비해서 어려운것이 사실입니다. 형태소 분석이라는 기술과 인덱싱(indexing)등을 활용하여, 내용을 DB에 저장할때 키워드를 추출하는 방법이 가장 많이 사용되고 있습니다. DB에 저장되어야 하는 용량이 많이 늘어난다면, 속도를 향상시키기 위한 다양한 기술들이 추가로 사용되어야 되기 때문에 어떤 서비스를 얼마나 많은 사람들에게 제공하느냐 등의 요인에 따라서 다양한 전략을 구상해야만 합니다.

 

[철수가 학교에 간다. 그 학교는 서울에 있다 ]

라는 문장이 있을때, 키워드 분석을 통해서 [철수][학교][학교][서울]의 단어 중심의 키워드로 1차적으로 분리를 하고, 반복된 순서를 기준으로 [학교]2[철수][서울]로 정렬(sorting)하여, 데이터 베이스에 넣게 됩니다.

만약 [철수]에 대한 기사가 작성되었을때, 데이터 베이스에 있는 컨텐츠중 [철수]라는 키워드를 가장 중요하게 포함하고, 가장 많은 빈도를 가진 컨텐츠와 최근 작성된 컨텐츠 등의 순서로 정열해서 타임라인처럼 정렬해 준다면 현재 구상하는 서비스에 대한 접근이 가능하리라 생각이 됩니다.

 

문제는 [철수]에 대한 기사와 해당 글의 연관성을 높이기 위해서는 키워드가 정밀하게 추출되어야 하며, 비교를 할수 있는 컨텐츠 및 데이터가 다양해야만 좋은 품질의 결과를 예상할수 있다는 점입니다. RSS등의 기술을 통해서 정기적으로 데이터를 수집해서 키워드를 분석하여 DB에 저장하는 기술을 더해서 생각해 본다면, 서비스 구현은 가능합니다.

 

[IT컨설턴트의 생각]

외부 컨텐츠를 추출하는것은 쉽지 않습니다. 컨텐츠를 공급하는 입장에서 상업적으로 사용될 소지가 있다면, 저작권법을 내세우거나 공급을 차단할 가능성이 높습니다. 또한, 트레픽을 과도하게 요청하는 서비스의 경우에도 마찬가지로 문제의 소지가 충분히 있습니다. 공급받는 사이트가 리뉴얼하거나 공급되는 포멧이 변경될때마다 시스템적인 수정을 해야하기 때문에 운영상의 위험 또한 높은 편입니다.

서비스가 고정적이거나, 단순한 매칭을 통한 정보제공을 목적으로하는 경우에는 DB의 용량 또한 많지 않겠지만, 매칭을 상업적으로 사용해야 하는경우 및 정확도를 향상시키기 위해서는 복잡한 개발요인이 사용됩니다. 최악의 경우 검색엔진시스템을 구현하는 이상의 난이도를 가진 시스템을 구상해야 할수도 있습니다. 전문적인 IT컨설턴트의 컨설팅으로 시행착오를 줄이고, 성공가능성이 높은 서비스를 준비해 보실것을 추천드립니다.