크롤링 강의 3일차-1.riss 페이징.ipynb

{
 "cells": [
  {
   "cell_type": "code",
   "execution_count": 13,
   "metadata": {},
   "outputs": [
    {
     "name": "stdin",
     "output_type": "stream",
     "text": [
      " 112\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "키워드 빅데이터 (으)로  5,870 건 검색\n",
      "1.번호: 1\n",
      "2.논문제목: 동형암호를 이용한 개인정보 등 빅데이터의 범죄분석 활용방안 연구\n",
      "3.저자: 정대희\n",
      "4.소속기관: 서울대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 2\n",
      "2.논문제목: 빅데이터를 활용한 대학구조개혁 평가의 키워드 및 토픽 분석\n",
      "3.저자: 김지은\n",
      "4.소속기관: 서울대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 3\n",
      "2.논문제목: 조직, 개인 그리고 경영품질 관점에서 기업의 빅데이터 활용의도에 영향을 미치는 핵심요인에 관한 연구\n",
      "3.저자: 신수행\n",
      "4.소속기관: 전남대학교\n",
      "\n",
      "\n",
      "1.번호: 4\n",
      "2.논문제목: 빅데이터 분석의 사용이 은행 CRM 가치 창출에 미치는 영향 : 고객 상호관계 관점으로\n",
      "3.저자: 박성수\n",
      "4.소속기관: 성균관대학교 경영전문대학원\n",
      "\n",
      "\n",
      "1.번호: 5\n",
      "2.논문제목: 빅데이터 분석 사업의 정보시스템 감리에 대한 연구\n",
      "3.저자: 박성남\n",
      "4.소속기관: 건국대학교 정보통신대학원\n",
      "\n",
      "\n",
      "1.번호: 6\n",
      "2.논문제목: 빅데이터 활용 탐구 수업의 설계 효과 : 빅데이터 활용 역량과 학습만족도를 중심으로\n",
      "3.저자: 윤한나\n",
      "4.소속기관: 한국교원대학교 교육대학원\n",
      "\n",
      "\n",
      "1.번호: 7\n",
      "2.논문제목: IPA기법을 활용한 제조분야의 빅데이터 수용도 분석 : IT 분야 제조 A社 중심\n",
      "3.저자: 주혁\n",
      "4.소속기관: 성균관대학교 일반대학원\n",
      "\n",
      "\n",
      "1.번호: 8\n",
      "2.논문제목: 기후변화 정책 의사결정 지원을 위한 빅데이터 분석\n",
      "3.저자: 정예림\n",
      "4.소속기관: 부산대학교\n",
      "\n",
      "\n",
      "1.번호: 9\n",
      "2.논문제목: 사회과학의 텍스트로서 빅데이터\n",
      "3.저자: 정준석\n",
      "4.소속기관: 경기대학교 정치전문대학원\n",
      "\n",
      "\n",
      "1.번호: 10\n",
      "2.논문제목: 빅데이터를 이용한 부산항신항 ITT 효율적인 운영방안에 관한 연구\n",
      "3.저자: 백용주\n",
      "4.소속기관: 한국해양대학교 해양금융물류대학원\n",
      "\n",
      "\n",
      "1.번호: 11\n",
      "2.논문제목: 음식관광 빅데이터를 이용한 관광목적지 브랜드 개성에 관한 연구: 방한 중국인 관광객을 중심으로\n",
      "3.저자: 연진\n",
      "4.소속기관: 세종대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 12\n",
      "2.논문제목: 빅데이터 기반의 자금세탁방지 시스템 연구\n",
      "3.저자: 김상완\n",
      "4.소속기관: 건국대학교 정보통신대학원\n",
      "\n",
      "\n",
      "1.번호: 13\n",
      "2.논문제목: 빅데이터 환경에서의 개인정보 활용에 대한 소비자인식\n",
      "3.저자: 김인혜\n",
      "4.소속기관: 서울대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 14\n",
      "2.논문제목: 빅데이터 기반의 생체신호 분석 사례 및 연구\n",
      "3.저자: 박요셉\n",
      "4.소속기관: 인제대학교 일반대학원\n",
      "\n",
      "\n",
      "1.번호: 15\n",
      "2.논문제목: 빅데이터를 활용한 도시관광 경쟁력 분석 및 데이터 신뢰성 검정 연구\n",
      "3.저자: 이광용\n",
      "4.소속기관: 전남대학교대학원\n",
      "\n",
      "\n",
      "1.번호: 16\n",
      "2.논문제목: 빅데이터를 통한 다이어트 실태 조사 및 분석\n",
      "3.저자: 정은진\n",
      "4.소속기관: 동덕여자대학교\n",
      "\n",
      "\n",
      "1.번호: 17\n",
      "2.논문제목: 빅 데이터 품질에 미치는 요인에 대한 이론적 연구\n",
      "3.저자: 이민영\n",
      "4.소속기관: 한국교통대학교 글로벌융합대학원\n",
      "\n",
      "\n",
      "1.번호: 18\n",
      "2.논문제목: 다차원 분석기법을 통한 빅데이터 분야 특허 가치 평가\n",
      "3.저자: 노승윤\n",
      "4.소속기관: 충북대학교\n",
      "\n",
      "\n",
      "1.번호: 19\n",
      "2.논문제목: 빅데이터 활용에 있어서의 개인정보 보호법제에 관한 연구\n",
      "3.저자: 김효정\n",
      "4.소속기관: 동아대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 20\n",
      "2.논문제목: 빅데이터 산업의 활성화에 따른 개인정보 보호에 관한 연구\n",
      "3.저자: 차상휘\n",
      "4.소속기관: 전북대학교\n",
      "\n",
      "\n",
      "1.번호: 21\n",
      "2.논문제목: 빅데이터 플랫폼 활용 사회과 수업이 초등학생의 교과 지식과  교과 흥미에 미치는 영향\n",
      "3.저자: 정자연\n",
      "4.소속기관: 서울교육대학교 교육전문대학원\n",
      "\n",
      "\n",
      "1.번호: 22\n",
      "2.논문제목: 빅데이터 기술환경에서 정보의 이용에 따른 침해판단방법론\n",
      "3.저자: 고수윤\n",
      "4.소속기관: 강원대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 23\n",
      "2.논문제목: SNS빅데이터를 활용한 디지털사이니지 영상콘텐츠 디자인 연구 : 디지털사이니지 매거진TV를 중심으로\n",
      "3.저자: 이진우\n",
      "4.소속기관: 홍익대학교 영상대학원\n",
      "\n",
      "\n",
      "1.번호: 24\n",
      "2.논문제목: 빅데이터의 정치적 유용성 : 미국과 한국의 대통령선거 캠페인 분석\n",
      "3.저자: 동성혜\n",
      "4.소속기관: 경기대학교 정치전문대학원\n",
      "\n",
      "\n",
      "1.번호: 25\n",
      "2.논문제목: 빅데이터를 활용한 제조공정 결함 예측에 관한 연구\n",
      "3.저자: 쉬징징\n",
      "4.소속기관: 한세대학교\n",
      "\n",
      "\n",
      "1.번호: 26\n",
      "2.논문제목: 빅데이터를 통한 바이오의약품의 시장 점유율 분석과 추정에 관한 연구\n",
      "3.저자: 봉기태\n",
      "4.소속기관: 성균관대학교 일반대학원\n",
      "\n",
      "\n",
      "1.번호: 27\n",
      "2.논문제목: 빅데이터 분석을 활용한 스포츠산업 서비스화 방안에 관한 연구\n",
      "3.저자: 최재석\n",
      "4.소속기관: 忠南大學校 大學院\n",
      "\n",
      "\n",
      "1.번호: 28\n",
      "2.논문제목: 디지털 잡마켓에서 빅데이터 융합인재 양성을 위한 실무기술역량 연구\n",
      "3.저자: 정재완\n",
      "4.소속기관: 한국기술교육대학교 IT융합과학경영산업대학원\n",
      "\n",
      "\n",
      "1.번호: 29\n",
      "2.논문제목: 빅데이터 플랫폼을 활용한 公共圖書館 빅데이터 分析 硏究 : 大田한밭圖書館을 中心으로\n",
      "3.저자: 온정미\n",
      "4.소속기관: 한남대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 30\n",
      "2.논문제목: 빅데이터 기반의 인적자원개발 교육시스템 아키텍처\n",
      "3.저자: 김용식\n",
      "4.소속기관: 숭실대학교\n",
      "\n",
      "\n",
      "1.번호: 31\n",
      "2.논문제목: 안전한 개인정보 보호조치를 통한 빅데이터 산업 활성화 방안 : 법 제도·비식별화를 중심으로\n",
      "3.저자: 김동환\n",
      "4.소속기관: 순천향대학교\n",
      "\n",
      "\n",
      "1.번호: 32\n",
      "2.논문제목: 빅데이터 비즈니스 모델 분석 연구 : 플랫폼 모형을 중심으로\n",
      "3.저자: 술렌한드체렌\n",
      "4.소속기관: 배재대학교 일반대학원\n",
      "\n",
      "\n",
      "1.번호: 33\n",
      "2.논문제목: 빅데이터 분석을 통한 공기업 이미지 및 주요정책 평가 연구 : 한국토지주택공사(LH) 사례를 중심으로\n",
      "3.저자: 석지연\n",
      "4.소속기관: 고려대학교\n",
      "\n",
      "\n",
      "1.번호: 34\n",
      "2.논문제목: 조직에서의 빅데이터 시스템 도입을 위한 결정요인에 대한 연구\n",
      "3.저자: 이선우\n",
      "4.소속기관: 성균관대학교 일반대학원\n",
      "\n",
      "\n",
      "1.번호: 35\n",
      "2.논문제목: 빅데이터 도입이 중국의 제조업 수익성에 미치는 영향\n",
      "3.저자: HAN BO\n",
      "4.소속기관: 부경대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 36\n",
      "2.논문제목: 시공간 RDF 빅데이터의 효율적인 분산 병렬 처리 기술\n",
      "3.저자: 신인수\n",
      "4.소속기관: 건국대학교\n",
      "\n",
      "\n",
      "1.번호: 37\n",
      "2.논문제목: 정보 사회에 있어 재귀적 지식의 생산에 관한 연구 : '빅 데이터\" 프레임과 한국 IT 정책지식 재구성 사례를 중심으로\n",
      "3.저자: 손준우\n",
      "4.소속기관: 서울대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 38\n",
      "2.논문제목: 빅데이터의 정체성 규명과 의사결정 만족도에 관한 연구와 함의\n",
      "3.저자: 우현종\n",
      "4.소속기관: 韓國外國語大學校 大學院\n",
      "\n",
      "\n",
      "1.번호: 39\n",
      "2.논문제목: 빅데이터 기반 이상트래픽 분석을 통한 보안관제 강화에 대한 연구\n",
      "3.저자: 이지미\n",
      "4.소속기관: 동국대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 40\n",
      "2.논문제목: 빅데이터 교육역량 강화를 위한  H-R도 탐구 프로그램 개발\n",
      "3.저자: 김미림\n",
      "4.소속기관: 한국교원대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 41\n",
      "2.논문제목: 빅데이터 기반 사회과 핵심역량 도출과 평가도구 개발 및 검증 : 지리영역을 중심으로\n",
      "3.저자: 박지수\n",
      "4.소속기관: 부산대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 42\n",
      "2.논문제목: 빅데이터 속성이 의사결정 만족도와 경영성과에 영향을 미치는 요인\n",
      "3.저자: 이병길\n",
      "4.소속기관: 남서울대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 43\n",
      "2.논문제목: 빅데이터를 활용한 방재관련 시민인식 및 전문가인식의 비교 분석\n",
      "3.저자: 김선홍\n",
      "4.소속기관: 서울시립대학교 일반대학원\n",
      "\n",
      "\n",
      "1.번호: 44\n",
      "2.논문제목: 빅데이터를 활용한 밀키트 추천 앱 설계 및 구현\n",
      "3.저자: 정선미\n",
      "4.소속기관: 광운대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 45\n",
      "2.논문제목: 유동인구 빅데이터의 효율적 활용 방안에 관한 연구 : C통신사 사례를 중심으로\n",
      "3.저자: 권용민\n",
      "4.소속기관: 목포대학교 경영행정대학원\n",
      "\n",
      "\n",
      "1.번호: 46\n",
      "2.논문제목: 빅데이터의 보호 및 이용을 위한 법제 연구 : 지식재산권법과 개인정보보호법을 중심으로\n",
      "3.저자: 최종모\n",
      "4.소속기관: 중앙대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 47\n",
      "2.논문제목: 빅데이터 분석을 활용한 국가 자살예방사업의 효율성에 관한 연구\n",
      "3.저자: 민이슬\n",
      "4.소속기관: 성균관대학교 일반대학원\n",
      "\n",
      "\n",
      "1.번호: 48\n",
      "2.논문제목: 기업의 빅데이터 활성화에 따른 개인정보 문제점에 관한 연구\n",
      "3.저자: 홍상진\n",
      "4.소속기관: 동국대학교\n",
      "\n",
      "\n",
      "1.번호: 49\n",
      "2.논문제목: 빅데이터를 활용한 패션디자인 감성분석 연구 : 텍스트마이닝과 의미연결망 분석을 중심으로\n",
      "3.저자: 안효선\n",
      "4.소속기관: 이화여자대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 50\n",
      "2.논문제목: 빅데이터를 활용한 공연예술분야에서의 해외 사례 연구\n",
      "3.저자: 최아리\n",
      "4.소속기관: 이화여자대학교 공연예술대학원\n",
      "\n",
      "\n",
      "1.번호: 51\n",
      "2.논문제목: 하둡에 기반한 빅데이터 관리 시스템 구축 및 사례 연구\n",
      "3.저자: 김정래\n",
      "4.소속기관: 한국해양대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 52\n",
      "2.논문제목: 공간 빅데이터 플랫폼의 실증 및 지하자료에 대한 적용\n",
      "3.저자: 권일룡\n",
      "4.소속기관: 충북대학교\n",
      "\n",
      "\n",
      "1.번호: 53\n",
      "2.논문제목: 빅데이터 처리를 위한 하드웨어 기반 고속압축가속기 연구\n",
      "3.저자: 김상돈\n",
      "4.소속기관: 서울과학기술대학교\n",
      "\n",
      "\n",
      "1.번호: 54\n",
      "2.논문제목: 빅데이터 생명주기를 고려한 개인정보보호 수준 평가항목 개발\n",
      "3.저자: 김민선\n",
      "4.소속기관: 중앙대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 55\n",
      "2.논문제목: 전력 피크타임 예측을 위한 ELG 기반  빅데이터 플랫폼 구축\n",
      "3.저자: 최은선\n",
      "4.소속기관: 충북대학교\n",
      "\n",
      "\n",
      "1.번호: 56\n",
      "2.논문제목: 빅데이터를 활용한 영화마케팅 연구 : SNS 이용자(특성) 중심으로\n",
      "3.저자: 김진욱\n",
      "4.소속기관: 서강대학교 영상대학원\n",
      "\n",
      "\n",
      "1.번호: 57\n",
      "2.논문제목: 빅데이터 활용을 위한 데이터 수집 도구 평가에 관한 연구\n",
      "3.저자: 한수현\n",
      "4.소속기관: 단국대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 58\n",
      "2.논문제목: 빅데이터 기반의 6시그마 적용 방안에  관한 연구 : 솔라셀 공정 최적화 사례 중심으로\n",
      "3.저자: 고동기\n",
      "4.소속기관: 한양대학교 공학대학원\n",
      "\n",
      "\n",
      "1.번호: 59\n",
      "2.논문제목: 농업 빅데이터 플랫폼상의 농업경영데이터 활용의도에 영향을 미치는 요인에 관한 연구\n",
      "3.저자: 손경자\n",
      "4.소속기관: 숭실대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 60\n",
      "2.논문제목: 빅데이터 활용과 분석기법 고찰\n",
      "3.저자: 김지숙\n",
      "4.소속기관: 高麗大學校 大學院\n",
      "\n",
      "\n",
      "1.번호: 61\n",
      "2.논문제목: 빅데이터 시대의 프라이버시 : 윤리적 가치와 보호 방안\n",
      "3.저자: 설재호\n",
      "4.소속기관: 서울시립대학교 일반대학원\n",
      "\n",
      "\n",
      "1.번호: 62\n",
      "2.논문제목: 재난 빅데이터를 활용한 재난안전 경보 시스템에 대한 사례 연구\n",
      "3.저자: 이주찬\n",
      "4.소속기관: 숭실대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 63\n",
      "2.논문제목: 빅데이터를 처리할 수 있는 인공지능 모델 기반의 상황인지 시스템\n",
      "3.저자: 조용성\n",
      "4.소속기관: 숭실대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 64\n",
      "2.논문제목: R을 이용한 빅데이터 분석 : 데이터의 다차원 처리 및 시각화\n",
      "3.저자: 서유형\n",
      "4.소속기관: 이화여자대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 65\n",
      "2.논문제목: 빅데이터 활용을 위한 법제 개선 방안에 관한 연구\n",
      "3.저자: 전우광\n",
      "4.소속기관: 동국대학교\n",
      "\n",
      "\n",
      "1.번호: 66\n",
      "2.논문제목: 주택시장 예측을 위한 부동산 감성지수 개발 연구 : 뉴스와 방송 빅데이터에 대한 AI 기술 적용\n",
      "3.저자: 박재수\n",
      "4.소속기관: 강원대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 67\n",
      "2.논문제목: 빅데이터 역량 평가를 위한 참조모델 및 수준진단시스템 개발\n",
      "3.저자: 천민경\n",
      "4.소속기관: 한양대학교\n",
      "\n",
      "\n",
      "1.번호: 68\n",
      "2.논문제목: 빅데이터를 활용한 항공운송서비스의 혁신사례 연구\n",
      "3.저자: 조유나\n",
      "4.소속기관: 韓國航空大學校\n",
      "\n",
      "\n",
      "1.번호: 69\n",
      "2.논문제목: 빅데이터 분석을 통한 마케팅 활용에 관한연구 : 온라인 마케팅을 중심으로\n",
      "3.저자: 윤태구\n",
      "4.소속기관: 아주대학교\n",
      "\n",
      "\n",
      "1.번호: 70\n",
      "2.논문제목: 빅데이터를 위한 분석기술 활용방안 연구\n",
      "3.저자: 박준규\n",
      "4.소속기관: 세종대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 71\n",
      "2.논문제목: 빅 데이터 활용에 있어서 개인정보보호 문제점 및 개선방안(PIMS 활용)\n",
      "3.저자: 김용빈\n",
      "4.소속기관: 강원대학교 산업대학원\n",
      "\n",
      "\n",
      "1.번호: 72\n",
      "2.논문제목: 빅데이터 분석 작업에서 데이터 저장 서비스 영향 분석\n",
      "3.저자: 이창우\n",
      "4.소속기관: 국민대학교 일반대학원\n",
      "\n",
      "\n",
      "1.번호: 73\n",
      "2.논문제목: 빅데이터 기술이 플랫폼 비즈니스 혁신에 미치는 영향\n",
      "3.저자: 최승혁\n",
      "4.소속기관: 高麗大學校 技術經營專門大學院\n",
      "\n",
      "\n",
      "1.번호: 74\n",
      "2.논문제목: 빅데이터 응용사례 분석을 통한 소스데이터 유형 분류 : BI&A 응용분야와 U-City 서비스 분류체계를 중심으로\n",
      "3.저자: 이현구\n",
      "4.소속기관: 단국대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 75\n",
      "2.논문제목: 빅데이터 환경에서 개인정보 보호에 관한 헌법적 연구\n",
      "3.저자: 정한신\n",
      "4.소속기관: 부산대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 76\n",
      "2.논문제목: 한국의 '빅데이터 정책' 형성에 관한 연구 : 준정부기관의 정책기업가 역할을 중심으로\n",
      "3.저자: 정진우\n",
      "4.소속기관: 전북대학교 행정대학원\n",
      "\n",
      "\n",
      "1.번호: 77\n",
      "2.논문제목: 상품추천시스템의 빅데이터속성과 서비스특성이 소비자의 수용의도에 미치는 영향에 관한 실증적 연구\n",
      "3.저자: 엄경순\n",
      "4.소속기관: 숭실대학교\n",
      "\n",
      "\n",
      "1.번호: 78\n",
      "2.논문제목: 빅 데이터 플랫폼을 이용한 풍력 발전기 SCADA 데이터 분석의 시각화 기술 연구\n",
      "3.저자: 박상준\n",
      "4.소속기관: 단국대학교\n",
      "\n",
      "\n",
      "1.번호: 79\n",
      "2.논문제목: 빅데이터 기반 도서추천시스템 구축을 위한 아키텍처에 관한 연구\n",
      "3.저자: 박대우\n",
      "4.소속기관: 숭실대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 80\n",
      "2.논문제목: 빅데이터를 활용한 통일의식 분석 연구\n",
      "3.저자: 임대규\n",
      "4.소속기관: 서울대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 81\n",
      "2.논문제목: 빅데이터 기술에 기반한 그린IT 분류체계 수립 및 그린IT 활성화를 위한 전략적 과제 연구 : 비즈니스 활성화와 정책수립 관점\n",
      "3.저자: 백현\n",
      "4.소속기관: 한양사이버대학교 경영대학원\n",
      "\n",
      "\n",
      "1.번호: 82\n",
      "2.논문제목: 빅데이터 분석을 통해 살펴본 비화재출동 경감방안에 관한 연구\n",
      "3.저자: 백진우\n",
      "4.소속기관: 조선대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 83\n",
      "2.논문제목: 빅데이터 基盤 人工知能 플랫폼에 대한 分析\n",
      "3.저자: 호태규\n",
      "4.소속기관: 성균관대학교 정보통신대학원\n",
      "\n",
      "\n",
      "1.번호: 84\n",
      "2.논문제목: 빅데이터에 대한 인식과 태도에 관한 연구 : 공무원과 민간기업 종사자 간의 비교를 중심으로\n",
      "3.저자: 윤구홍\n",
      "4.소속기관: 중앙대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 85\n",
      "2.논문제목: 빅데이터를 활용한 마케팅 전략 실행의 실제에 관한 연구\n",
      "3.저자: 송민석\n",
      "4.소속기관: 한국교통대학교 일반대학원\n",
      "\n",
      "\n",
      "1.번호: 86\n",
      "2.논문제목: 빅데이터와 카노모델 비교분석을 통한 배달앱 선택속성이 소비자만족 사용의도에 미치는 영향\n",
      "3.저자: 임정숙\n",
      "4.소속기관: 광운대학교 일반대학원\n",
      "\n",
      "\n",
      "1.번호: 87\n",
      "2.논문제목: 빅데이터 기반 기술을 활용한 반도체 제조공정의 장비 센서 데이터 실시간 분석 방안 제안 : H사 사례에 기반하여\n",
      "3.저자: 권택수\n",
      "4.소속기관: 연세대학교 정경대학원\n",
      "\n",
      "\n",
      "1.번호: 88\n",
      "2.논문제목: 실시간 빅데이터 수집 및 AI 모델링 분석 기반 스마트공장 고도화 연구 : IoT통합 기반의 빅데이터 수집 및 AI 모델링과 SPC 분석 기술의 중심으로\n",
      "3.저자: 김재표\n",
      "4.소속기관: 한성대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 89\n",
      "2.논문제목: 빅데이터 활용을 위한 개인정보 비식별화 관련 지식재산 및 정보보호법률 개선방안\n",
      "3.저자: 이미라\n",
      "4.소속기관: 고려대학교 공학대학원\n",
      "\n",
      "\n",
      "1.번호: 90\n",
      "2.논문제목: 제품 수명주기 관리(PLM)의 빅데이터 활용전략\n",
      "3.저자: 이성창\n",
      "4.소속기관: 고려대학교 기술경영전문대학원\n",
      "\n",
      "\n",
      "1.번호: 91\n",
      "2.논문제목: 빅데이터가 기업의 경쟁력에 미치는 영향에 관한 연구\n",
      "3.저자: 김성원\n",
      "4.소속기관: 경기대학교 일반대학원\n",
      "\n",
      "\n",
      "1.번호: 92\n",
      "2.논문제목: 교회 내 단기목회상담의 초기상담에서 빅데이터 활용 효과 연구\n",
      "3.저자: 김요선\n",
      "4.소속기관: 장로회신학대학교 일반대학원\n",
      "\n",
      "\n",
      "1.번호: 93\n",
      "2.논문제목: 빅데이터 사회에서 개인신용정보의 보호와 이용에 관한 연구\n",
      "3.저자: 백승엽\n",
      "4.소속기관: 성균관대학교\n",
      "\n",
      "\n",
      "1.번호: 94\n",
      "2.논문제목: 개인정보 비식별화 기술 적용수준이 빅데이터 이용활성화 의도에 미치는 영향 : 빅데이터 공급자와 수요자 관점\n",
      "3.저자: 양현철\n",
      "4.소속기관: 광운대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 95\n",
      "2.논문제목: 빅데이터를 활용한 소비자 위험예측모델에 관한 연구\n",
      "3.저자: 김도훈\n",
      "4.소속기관: 서울과학기술대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 96\n",
      "2.논문제목: 빅데이터 도입을 위한 데이터 품질관리의 경영성과 연구 : - 기업의 데이터 품질관리 프로세스를 중심으로 -\n",
      "3.저자: 안희정\n",
      "4.소속기관: 국민대학교\n",
      "\n",
      "\n",
      "1.번호: 97\n",
      "2.논문제목: 기업의 빅데이터 활용 유형별 적용 방안 및 효과 분석\n",
      "3.저자: 이재성\n",
      "4.소속기관: 한신대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 98\n",
      "2.논문제목: 빅데이터를 활용한 헤어 미용분야 패러다임 변화 연구\n",
      "3.저자: 문소희\n",
      "4.소속기관: 광주여자대학교\n",
      "\n",
      "\n",
      "1.번호: 99\n",
      "2.논문제목: 항만물류빅데이터를 활용한 컨테이너 터미널 반출입 트럭 TAT(Turn Around Time) 결정요인\n",
      "3.저자: 양현석\n",
      "4.소속기관: 중앙대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 100\n",
      "2.논문제목: 빅데이터 분석을 활용한 지역맞춤형 평생교육프로그램 개발 모형\n",
      "3.저자: 김현성\n",
      "4.소속기관: 대구한의대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 101\n",
      "2.논문제목: 빅데이터 감성정보 추출을 통한 도심부 활성화 요인 분석 연구 : 서울의 도심부 전통시장을 중심으로\n",
      "3.저자: 박상훈\n",
      "4.소속기관: 서울시립대학교\n",
      "\n",
      "\n",
      "1.번호: 102\n",
      "2.논문제목: 빅데이터 분석을 통한 모바일 RPG의 개선안 연구 : 구글 플레이 국내 상위 3개 RPG를 중심으로\n",
      "3.저자: 염동현\n",
      "4.소속기관: 가천대학교 일반대학원\n",
      "\n",
      "\n",
      "1.번호: 103\n",
      "2.논문제목: 빅데이터로서 수사기록 보존폐기에 대한 연구\n",
      "3.저자: 홍승아\n",
      "4.소속기관: 서울대학교 융합과학기술대학원\n",
      "\n",
      "\n",
      "1.번호: 104\n",
      "2.논문제목: 자원기반관점에서 빅데이터 사용의도에 영향을 미치는 요인에 관한 연구\n",
      "3.저자: 윤수영\n",
      "4.소속기관: 단국대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 105\n",
      "2.논문제목: 빅데이터 활용과 개인정보보호체계의 재구축을 위한 헌법적 고찰\n",
      "3.저자: 김나루\n",
      "4.소속기관: 숙명여자대학교 대학원\n",
      "\n",
      "\n",
      "1.번호: 106\n",
      "2.논문제목: 빅데이터 시대의 개인정보 제공에 영향을 미치는 프라이버시 요인 연구\n",
      "3.저자: 민현홍\n",
      "4.소속기관: 숭실대학교\n",
      "\n",
      "\n",
      "1.번호: 107\n",
      "2.논문제목: 디지털 리터러시 기반의 빅데이터 시각화 소프트웨어의 유지보수 모델\n",
      "3.저자: 한충구\n",
      "4.소속기관: 숭실대학교 정보과학대학원\n",
      "\n",
      "\n",
      "1.번호: 108\n",
      "2.논문제목: 빅데이터 마이닝에 의한 공시지가 민원의 시공간적 특성 분석\n",
      "3.저자: 조태인\n",
      "4.소속기관: 인천대학교\n",
      "\n",
      "\n",
      "1.번호: 109\n",
      "2.논문제목: 빅데이터를 활용한 사용자 경험디자인 요소 추출 방법에 관한 연구\n",
      "3.저자: 홍민석\n",
      "4.소속기관: 한양대학교\n",
      "\n",
      "\n",
      "1.번호: 110\n",
      "2.논문제목: 빅데이터를 활용한 광고 스토리텔링 연구 : 웹 드라마를 중심으로\n",
      "3.저자: 정한솔\n",
      "4.소속기관: 국민대학교 테크노디자인전문대학원\n",
      "\n",
      "\n",
      "1.번호: 111\n",
      "2.논문제목: 빅데이터 로그를 이용한 실시간 예측분석시스템 설계 및 구현\n",
      "3.저자: 이상준\n",
      "4.소속기관: 高麗大學校 情報經營工學專門大學院\n",
      "\n",
      "\n",
      "1.번호: 112\n",
      "2.논문제목: 소셜빅데이터에 나타난 중국 호텔 이미지에 관한 연구\n",
      "3.저자: 오호\n",
      "4.소속기관: 동의대학교 대학원\n",
      "\n",
      "\n",
      "요청하신 작업이 모두 완료되었습니다\n",
      "요청하신 데이터 수집 작업이 정상적으로 완료되었습니다\n"
     ]
    },
    {
     "name": "stderr",
     "output_type": "stream",
     "text": [
      "/Users/mujae/Desktop/anaconda3/lib/python3.10/site-packages/pandas/util/_decorators.py:211: FutureWarning: the 'encoding' keyword is deprecated and will be removed in a future version. Please take steps to stop the use of 'encoding'\n",
      "  return func(*args, **kwargs)\n"
     ]
    }
   ],
   "source": [
    "# riss.kr 에서 특정 키워드로 논문 / 학술 자료 검색하기\n",
    "#Step 1. 필요한 모듈을 로딩합니다                  \n",
    "from selenium import webdriver\n",
    "from bs4 import BeautifulSoup\n",
    "from selenium.webdriver.common.by import By\n",
    "import chromedriver_autoinstaller as ca\n",
    "import pandas as pd \n",
    "import time\n",
    "\n",
    "#Step 2. 사용자에게 검색 관련 정보들을 입력 받고 3. 파일 이름 정하기\n",
    "query_txt ='빅데이터'\n",
    "ft_name = \"c:\\\\py_temp\\\\riss.txt\"\n",
    "fc_name = \"c:\\\\py_temp\\\\riss.csv\"\n",
    "fx_name = \"c:\\\\py_temp\\\\riss.xls\"\n",
    "collect_cnt = int(input())\n",
    "next_num = collect_cnt//100 #다음으로 갈지 말지~\n",
    "#Step 4. 크롬 드라이버 설정 및 웹 페이지 열기\n",
    "driver = webdriver.Chrome()\n",
    "driver.get('https://www.riss.kr/')\n",
    "time.sleep(2)\n",
    "driver.maximize_window()\n",
    "main = driver.window_handles\n",
    "for i in main:\n",
    "    if i !=main[0]:\n",
    "        driver.switch_to.window(i)\n",
    "        driver.close()\n",
    "driver.switch_to.window(driver.window_handles[0]) # driver.switch_to.window(main[0])도 가능\n",
    "time.sleep(1)\n",
    "#Step 5. 자동으로 검색어 입력 후 6 학위논문 클릭\n",
    "driver.find_element(By.ID,'query').send_keys(query_txt+ '\\n')\n",
    "driver.find_element(By.LINK_TEXT,'학위논문').click()\n",
    "time.sleep(2)\n",
    "\n",
    "#Step 7.Beautiful Soup 로 본문 내용만 추출하기\n",
    "soup_1 = BeautifulSoup(driver.page_source, 'html.parser')\n",
    "content_1 = soup_1.find('div','srchResultListW').find_all('li')\n",
    "\n",
    "\n",
    "#Step 8. 총 검색 건수를 보여주고 수집할 건수 입력받기\n",
    "import math\n",
    "total_cnt = soup_1.find('div','searchBox pd').find('span','num').get_text()\n",
    "print('키워드 %s (으)로  %s 건 검색' %(query_txt,total_cnt))\n",
    "collect_page_cnt = math.ceil(collect_cnt / 10)\n",
    "\n",
    "\n",
    "#Step 9. 각 항목별로 데이터를 추출하여 리스트에 저장하기\n",
    "no2 = [ ]        #번호 저장\n",
    "title2 = [ ]     #논문제목 저장\n",
    "writer2 = [ ]    #논문저자 저장\n",
    "org2 = [ ]       #소속기관 저장\n",
    "no = 1\n",
    "def fun(next_num):\n",
    "    global no, collect_page_cnt\n",
    "    for _ in range(next_num):\n",
    "        for a in range(1, collect_page_cnt + 1) :\n",
    "            time.sleep(1)        # 페이지 변경 전 1초 대기 \n",
    "            soup_2 = BeautifulSoup(driver.page_source, 'html.parser')\n",
    "            content_2 = soup_2.find('div','srchResultListW').find_all('li')\n",
    "\n",
    "            for b in content_2 : \n",
    "                #1. 논문제목 있을 경우만\n",
    "                try :\n",
    "                    title = b.find('p','title').get_text()\n",
    "                except :\n",
    "                    continue\n",
    "                else :\n",
    "                    f = open(ft_name, 'a' , encoding=\"UTF-8\")\n",
    "\n",
    "                    print('1.번호:',no)\n",
    "                    no2.append(no)\n",
    "                    f.write('\\n'+'1.번호:' + str(no))\n",
    "\n",
    "                    print('2.논문제목:',title)\n",
    "                    title2.append(title)\n",
    "                    f.write('\\n' + '2.논문제목:' + title)\n",
    "\n",
    "                    writer = b.find('span','writer').get_text()\n",
    "                    print('3.저자:',writer)\n",
    "                    writer2.append(writer)\n",
    "                    f.write('\\n' + '3.저자:' + writer)\n",
    "\n",
    "                    org = b.find('span','assigned').get_text()\n",
    "                    print('4.소속기관:' , org)\n",
    "                    org2.append(org)\n",
    "                    f.write('\\n' + '4.소속기관:' + org + '\\n')\n",
    "\n",
    "                    f.close( )\n",
    "\n",
    "                    no += 1\n",
    "                    print(\"\\n\")\n",
    "\n",
    "                    if no > collect_cnt :\n",
    "                        return\n",
    "            \n",
    "\n",
    "            b = str(a+1)\n",
    "\n",
    "            try :\n",
    "                driver.find_element(By.LINK_TEXT ,'%s' %b).click() \n",
    "            except :\n",
    "                driver.find_element(By.CLASS_NAME, 'next1').click()\n",
    "            time.sleep(1)        # 페이지 변경 전 1초 대기 \n",
    "fun(next_num)\n",
    "print(\"요청하신 작업이 모두 완료되었습니다\")\n",
    "\n",
    "# Step 10. 수집된 데이터를 xls와 csv 형태로 저장하기\n",
    "df = pd.DataFrame()\n",
    "df['번호']=no2\n",
    "df['제목']=pd.Series(title2)\n",
    "df['저자']=pd.Series(writer2)\n",
    "df['소속(발행)기관']=pd.Series(org2)\n",
    "\n",
    "# xls 형태로 저장하기\n",
    "df.to_excel(fx_name,index=False, encoding=\"utf-8\" , engine='openpyxl')\n",
    "\n",
    "# csv 형태로 저장하기\n",
    "df.to_csv(fc_name,index=False, encoding=\"utf-8-sig\")\n",
    "\n",
    "print('요청하신 데이터 수집 작업이 정상적으로 완료되었습니다')"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 17,
   "metadata": {},
   "outputs": [
    {
     "data": {
      "text/plain": [
       "pandas.core.series.Series"
      ]
     },
     "execution_count": 17,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "type(df['번호'])"
   ]
  }
 ],
 "metadata": {
  "kernelspec": {
   "display_name": "Python 3 (ipykernel)",
   "language": "python",
   "name": "python3"
  },
  "language_info": {
   "codemirror_mode": {
    "name": "ipython",
    "version": 3
   },
   "file_extension": ".py",
   "mimetype": "text/x-python",
   "name": "python",
   "nbconvert_exporter": "python",
   "pygments_lexer": "ipython3",
   "version": "3.10.9"
  },
  "vscode": {
   "interpreter": {
    "hash": "8965150514684192fd1d81b86341baebb0ab118aa72b57568cb073ce4741e3b7"
   }
  }
 },
 "nbformat": 4,
 "nbformat_minor": 4
}