그 동안 넷마이너의 토픽 모델링(LDA)를 사용하셨던 분들을 위한 희소식을 가져왔습니다! 이제 NetMiner에서도 토픽 일관성(Coherence)를 활용하여 적절한 토픽 수, α, β 의 추천 값을 확인할 수 있습니다. 토픽 일관성(Coherence Index)란? 토픽 모델을 평가하는 방법 중 하나로, 같은 토픽에 의미론적으로 유사한 단어들끼리 분류되어 토픽 내용이 일관성이 있는지를 알 수 있는 지표입니다. 예를 들어, 아래는 '기후 변화' 뉴스 데이터에서 분석한 2개의 토픽 모델링 결과입니다. 2개의 토픽 모델은 모두 토픽 수는 3개로 했지만, 그 외의 하이퍼파라미터를 다르게 설정했다고 가정하겠습니다. 어떤 결과가 좀 더 적합한 결과로 보이시나요? 첫번째 토픽 모델 두번째 토픽 모델 토픽1 의 주요..

NetMiner 이야기/NetMiner 무료 플러그인 2023. 4. 3. 19:45

뉴시스가 창사 18주년을 맞이하여, 저희 사이람과 함께 문재인 대통령의 연설문 데이터를 분석하였습니다! 2017년 5월부터 2019년 8월까지 약 950 건의 연설문, 담화문, 회의록을 수집하여 NetMiner 를 활용하여 단어(형태소)를 추출하였습니다. 그리고 기계학습 기반의 토픽모델링(LDA) 방법을 활용하여 소주제를 뽑고,이를 크게 정치, 사회문화, 외교안보, 경제로 다시 재분류 하였습니다. 또한 연도별 키워드 네트워크에서 핵심 키워드를 뽑아(Centrality) 연도별로 강조하는 내용이 어떻게 달라졌는지 확인해 보았습니다. 대통령이 그동안 어떤 생각을 하고 있었는지, 앞으로의 국정 운영 방향은 어떻게 될 것으로 예상하는지, 자세한 내용이 궁금하시다면 아래 기사를 확인해 보세요 :) 기사 전문 [文..

소셜 네트워크 분석 활용사례/텍스트 마이닝 분석 2019. 9. 26. 12:41

오는 12월 8일 토요일, 중앙대학교에서 열리는 2018 한국사회학회 정기사회학대회의 특별 세션에 사이람이 함께 합니다. 장덕진 서울대학교 사회학과 교수님의 사회로 진행되는 이번 특별 세션은 김기훈 (주)사이람 대표이사, 조원광 사회발전연구소 발표로 구성되며, 토론자로 박명규 서울대학교 사회학과 교수님과 한준 서울대학교 사회학과 교수님이 참석할 예정입니다. 먼저, 김기훈 (주)사이람 대표이사가 사회과학에서 비정형 빅데이터가 가지는 의미가 무엇인지, 빅데이터 분석을 위해 필요한 기능적 요건은 무엇인지, SNS 빅데이터를 수집하고 분석하는 프로세스에 대해서 소개하려고 합니다. 그리고 이어서 비정형 빅데이터에 대한 텍스트 마이닝 기법들이 담론 분석에 제시하는 가능성과 그 의의를 살펴봅니다. 특히 비지도학습 알..

사이람 이야기/ISSUE & NEWS 2018. 12. 5. 13:32

안녕하세요, 사이람입니다. 최근 사용 편의 향상을 위해 버그를 수정하고 불편했던 점을 개선하여 NetMiner가 4.4.2 로 업데이트 되었습니다! 우선 텍스트 데이터를 불러오는 속도가 매우 빨라졌습니다! 실제 약 5만개의 한글 트윗에서 단어(형태소)를 추출하여 빈도와 TF-IDF 를 계산하고, 문장과 문단을 뽑아 구성하는데까지 단 2~3분!동일한 데이터를 불러오는데 약 4~5시간 정도의 시간이 걸렸던 과거에 비하면 아주 획기적인 변화라고 할 수 있겠죠? 참고로 아래 이미지는 테스트 데이터를 불러올 때 NetMiner 의 Progress Bar 에 표시되는 소요시간 입니다. 텍스트 데이터를 불러올 때는 4단계의 처리 과정을 거치게 되어있는데 그 중 Building Network 를 효율적으로 개선하여 소..

NetMiner 이야기/NetMiner 및 이벤트 소식 2018. 11. 28. 17:25

지난 9월 13일, 정부가 주거안정을 위한 부동산 대책을 발표했습니다. 종부세 인상, 주택담보대출 규제, 공공택지 추가 지정 등 부동산 시장을 다각도에서 접근하려는 시도라는 평가가 있었습니다. 집값과 부동산에 대한 온라인 여론은 어땠을까요? NetMiner 확장프로그램 SNS Data Collector를 이용하여 9.13 부동산대책 발표 전 후, 2주 동안(9.5~9.19)의 '집값' 이라는 단어를 포함한 트위터 데이터를 수집하여 분석해 보았습니다. SNS Data Collector 는 1~2초에 100개씩의 트윗을 수집할 수 있어서 빠른 시간 내 편리하게 데이터를 수집할 수 있습니다:) (※ 단, 트위터 API 에 따라 18,000개의 트윗을 수집한 후에는 15분의 대기 시간이 필요) 먼저 수집된 데이..

소셜 네트워크 분석 활용사례/소셜 미디어 분석 2018. 11. 9. 09:35

NetMiner를 이용한소셜 미디어 데이터 수집과 분석 교육 NetMiner로 직접 소셜 미디어 데이터를 수집하고, 수집한 데이터를 분석하는 방법을 실습을 통해 배울 수 있습니다 지금 바로 신청해주세요~ 교육 신청하러 가기 ▶ 이런 분께 추천합니다! ◀ ○ R, 파이썬 없이도 쉽게 소셜미디어/SNS 데이터를 수집하는 방법을 알고 싶으신 분 ○ 소셜미디어 데이터를 활용한 분석 사례와 방법을 알고 싶으신 분 ○ 유사한 관심사를 가진 소셜미디어 이용자 그룹을 파악하고 싶으신 분 ○ 이슈/브랜드에 대한 여론 인식 및 트렌드를 분석하고 싶으신 분 ※ 참고로 본 교육을 수강하시는 분들께, 1번의 클릭으로 주요 키워드 버즈량을 시각화하는 '키워드 버즈 추이' 플러그인을 제공해드립니다(자세한 내용은 포스팅 참조) 소셜..

사이람 교육/과정 소개 및 후기 2018. 11. 7. 09:50

"빅데이터에는 네트워크 정보와 숨겨진 패턴이 담겨져 있습니다." 지난 7월 5일 IT 전문 라이브 채널 클라우드촌에 사이람이 출연하였습니다. 클라우드촌(https://chontv.com)은 다양한 분야의 전문가를 초대하여 이야기를 들어보는 캐주얼 비즈니스 라이브 채널로, 이번에는 저희 사이람과 '소셜 네트워크 분석을 통해 숨겨진 패턴을 찾아라!' 라는 주제로 진행되었습니다. 소셜 네트워크 분석이란, 빅데이터 속 개체 간 관계(네트워크)를 분석하여 관계의 패턴 및 구조, 확산 과정, 중심부와 군집 그룹 등을 파악하는 기법입니다. "인간은 사회적 맥락 속에서만 개인이 된다(알프레드 아들러)" 이번 생방송을 통해 사이람이 그동안 소셜 네트워크 분석 방법을 적용한 대표적인 사례를 생생한 라이브로 소개해 드릴 수..

사이람 이야기/ISSUE & NEWS 2018. 7. 11. 11:35

안녕하세요. 소셜네트워크분석 전문기업 ㈜사이람입니다. NetMiner를 활용하여 SNS, 뉴스, 논문 등의 text 데이터에서 토픽을 분석하고, 분석 결과를 다양한 형태로 제공하는 ‘자동 토픽 분석 Plug-in’을 소개하고 무료로 여러분께 제공해 드리려 합니다. 토픽 분석(Topic Modeling)은 기계학습 기법 중 하나로 문서 데이터에 내재된 토픽을 파악하여 문서를 분류하거나 토픽을 구성하는 단어 클러스터를 도출할 수 있게 해줍니다. SNA의 2-모드 네트워크 데이터와 연계하여 활용할 수 있는 분석방법으로 더 풍부한 비정형 텍스트 분석을 위해 최근 많은 연구자들과 분석가들이 활용하고 있습니다. □ 자동 토픽 분석 Plug-in 이란? 단 2번의 클릭만으로 아래의 복잡한 토픽 분석 과정을 한 번에 ..

NetMiner 이야기/NetMiner 무료 플러그인 2018. 3. 7. 17:29