Project 2

[CSV to JSON] 공공데이터 자료 변환 후 mongoDB에 넣기

1. 문제점 이번 프로젝트에서 공공데이터를 활용해서 DB에 넣을 필요가 있었다 이때 주어진 csv 파일이 문제가 있었는데, 정규화가 하나도 안된 상태였다 사용한 공공데이터는 아래 링크에서 볼 수 있다 https://www.data.go.kr/data/3038404/fileData.do?recommendDataYn=Y 한국산업인력공단_국가기술자격 종목별 시험정보_20220620 국가기술자격의 종목별 시험정보(종목명, 개요, 변쳔과정, 수행직무, 진로 및 전망, 취득방법)에 대한 데이터입니다. www.data.go.kr 우선 엑셀로 파일을 열어서 확인해봤는데 아래와 같았다 Column이 3개로만 나누어져있었으며 type이라고 정의한 곳에는 사실 column으로 가야하고 contents는 각 컬럼에 맞게 내용..

Project/Python 2022.07.30

[SERVER] FLASK

flask flask 사용 이유 검색을 해보니 django보다 조금 더 가벼운 형태로 사용할 수 있다고 해서 선택하게 되었다. 실제로 사용해보니 문법도 파이썬이라서 간편하고 라우팅 하는 부분만 이해하면 간편하게 쓸 수 있었다. 개발 하는 내용 감정인식 기반의 답변 출력 챗봇 웹 형태로 제작 및 UX/UI 적용 > flask 코드 import os import json import numpy as np import torch from dialogLM.model.kogpt2 import DialogKoGPT2 from kogpt2_transformers import get_kogpt2_tokenizer from flask import Flask,request,Response,render_template ar..

Project/Python 2021.07.28