요약 동인님의 참치상사에서 사용하는 MVP를 제작하였다. DHP 최윤섭 대표님을 만나 지금까지 중 제일 재미있는 커피챗 시간을 가졌다. 회고 배경 최근, AI 업무자동화에서, 분류 작업에서, 비정형 텍스트 분류작업을 활용하는 사업아이템을 외주형태로 모색중에 있다. 비정형 텍스트 분류작업을 효과적으로 활용하는 업무 영역의 경우, VOC (voice of customer)가 가장 잘 형성돼있는 시장 중에 하나였고, 이처럼 텍스트 마이닝 기법들을 활용해서 마케팅 분야에 유용하게 쓸 수 있을 것이라고 생각하고 있었다. 그래서 팀원 K는 마케팅 쪽으로 계속해서 탐색을 진행하고 있었고, 나도 조금씩 커피챗을 통해 마케팅에서 우리가 기여할 수 있는 부분이 어떤 것인지 모색하고 있다. 이번주는.. 동인님(참치 상사)와의 만남 지난주 수요일, 동인님이 최근 내가 업무 자동화 시장을 외주 형태로 탐색하고 있다는 심지 회고 글을 보고 연락을 주셔서, 동인님이 운영하시는 참치상사의 제품에 대한 외주 개발 관련해서 미팅을 가지게 되었다. 비록 내가 사업아이템 탐색 목적으로 외주를 지향하는 것이어서, 완전히 동인님이 희망하시는 방향의 외주 개발은 성사되지 않았지만, 공통적으로 관심 있는 부분인 '지역 카페 모니터링을 통한 이슈 파악'을 발견하게 되었다. 마케팅에서 트렌드 파악 목적 또는 시장 조사 목적으로 SNS 글을 계속 확인하거나, 카페의 글을 분석한 후 이를 필요에 따라 잘 볼 수 있는 형태로 재가공하는 방향을 계속 염두에 두고 있었고, 네이버 카페를 모니터링 하는 프로세스를 구축하면 마케팅 쪽에서도 확장할 수 있을 것 같다는 생각이 들었다. 텍스트 마이닝 기법 개발 내가 구상한 파이프라인은 다음과 같았다. 네이버 카페에서 로그인 정보를 기반으로 자동으로 특정 날짜 까지의 글을 크롤링. 크롤링 된 글을 정제해서 분석할 수 있게 전처리 과정. 전처리한 결과를 바탕으로 AI 기법 & 전통적인 자연어 처리 기법을 활용하여 '이슈(?)'를 추출.

요약 나 또는 우리 팀의 욕구에 '2-3년 내 진짜 열심히 하면 연 10억 달성이 가능한 사업을 하고 싶다'가 있다는 것을 발견했다. 철저히 고객의 관점에서 생각한 결과, 과학 문제 분류에서 유사 문제 검색 기능을 통해 고객의 효용을 얻었다. 회고 배경 나는 AI기반 업무자동화로 사업 분야를 설정하고, 외주를 통해 아이템을 탐색하고 있다. 업무 자동화 내에서, 비정형 텍스트 데이터를 자동으로 분류하는 기술에 니즈가 있다고 보고 이를 탐색하고 있다. 2주 전부터, 학원 강사로 활동하고 있는 친구의 문제를 해결하는 프로젝트를 수행하기로 하였었다. 그 친구에게, 웹 SaaaS 형태로 자동 분류 웹 서비스를 제작해주었다. 이번주는.. 우리가 생각하는 고객이 아닌 사람 1명을 어디까지 만족시켜야해? 이번 주는 팀원들과 의견이 달라 회의하는 시간이 굉장히 많았다. 웹 SaaS 형태로 서비스를 제공하니 생각보다 UI/UX사용성 & 기능적으로 불만족스러워, 우리가 원래 증명하고 싶었던 가설인 '자동 분류에 대한 효용을 정말로 느끼는가?'를 확인하기가 무척 어려웠다. 여기서 나와 팀원 한명의 의견이 갈렸다. 나: 우리가 검증하고 싶은 것은 비정형 텍스트 데이터의 자동 분류에 대한 니즈이다. 우리의 타겟 고객이 아닌 것 같은데 완전 디테일하게 요구 사항을 다 이루어줄 수는 없다. 대충 우리가 필요한 것 만들고 만족못하면 하루정도 수작업해서 종결하자. 팀원 H: 원래 우리의 목표는 분류 작업에 대한 효용을 어느정도까지 만들어주어야 느끼는지 알아보는 것이었다. 지금은 아무것도 검증된 것이 없어서 여기서 대충 끝내버리면 우리는 배운 것이 아무것도 없다. 최소한 만족하게까지라도 프로덕트를 만들어보자. 스타트업에서의 1주일은 생각보다 많은 것을 할 수 있는 시간이다. 당장 이번 SaaS를 만드는데까지는 채 2일밖에 걸리지 않았으며, 웬만한 제품의 MVP는 1주일이면 만들기에 충분한 시간이다.

요약 범용적으로 쓸 수 있을 것 같은 PDF OCR&parsing tool을 만들었다. 1명만을 위한 자동 분류 웹 서비스를 제작하기로 했다. 나는 업무용 SaaS 만드는 걸 재밌어하는 사람이다. 회고 지난주에 '일은 재미있어야 한다'라고 했더니, 일에 미쳐버리는 바람에 회고 조차도 2주가 지난 지금에서야 하고 있다. 배경 지난주에 학원 강사로 활동하고 있는 친구의 문제를 해결하는 프로젝트를 수행하기로 하였었다. 프로젝트 내용은 본인이 가지고 있는 과학 문제들이 굉장히 많은데, 이걸 분류하는 것을 도와주는 것이었다. 우리팀은 AI로 업무를 자동화하는 아이템을 탐색하고 있고, 이를 위한 전략으로 외주라는 엄청난 노력이 드는 작업을 통해 정말 심도깊게 니즈를 탐색하려 하고 있었다. 그 중 업무 자동화 중에 분류 하는 작업에 대한 니즈가 가장 해볼만하다는 생각이 들었기 때문이다. 이번주는 궁극의 PDF OCR&parsing 처음엔 일주일 정도의 시간을 투자할 것이라고 예상했고, 정작 과학 문제 분류를 하면 될 줄 았았는데 가장 큰 문제는 PDF로 된 과학 문제들을 데이터베이스화 하는 것이었다. 받은 PDF는 7권 정도 되었었는데, 그야말로 개판이라고 하지 않을 수 없었다. 나중에 끝내보니 문제가 3600개나 있었다. 어떤 교재는 그나마 텍스트로 된 PDF로 돼있고, 어떤 교재는 이미지로만 되어있고, 문제 양식도 다 들쭉날쭉 달라서 머리가 아팠다. 이 텍스트/이미지로 된 PDF 자료를 먼저 동일한 포맷의 텍스트로 통일하고, 어떤 논리에 의해서 어디서부터 어디까지가 한 문제인지 찾고, 해당하는 부분을 이미지로 캡쳐해서 저장하는 그런 작업을 해야했었다. 이런 PDF OCR&parsing하는 데에만 40시간 정도 사용한 것 같다. 팀 내에서 진행하는 회고도 위와 같이 작성했었다.