본문 바로가기

자연어분석2

[NLP] 텍스트 전처리 (Text Preprocessing) 안녕하세요! 지난 포스팅에서 자연어 처리의 4단계에 대해 다루었는데요, (관련 내용은 아래의 포스팅을 참고하시면 됩니다.) [NLP] 자연어 분석의 4단계 및 기계학습에의 적용 방식 본 포스팅에서는 자연어 처리에 앞서 자연어 처리의 개념과 그 분석 단계, 및 기계 학습에의 적용 방식에 대해 설명하였습니다. 자연어 처리는 인공지능 분야로부터 파생된 영역으로, 인공지능 marketingscribbler.tistory.com 오늘은 자연어 처리 기법이 잘 적용될 수 있도록, 용도에 맞게 텍스트를 사전에 처리하는 텍스트 전처리에 대해 다루도록 하겠습니다. 목차 일단 텍스트에 대한 전처리는 크게 텍스트를 토큰으로 나누는 과정과 불필요한 토큰을 제거하는 과정, 그리고 그 이후에 코딩을 좀 더 편하게 하기 위한 원-.. 2021. 6. 11.
[NLP] 자연어 분석의 4단계 및 기계학습에의 적용 방식 본 포스팅에서는 자연어 처리에 앞서 자연어 처리의 개념과 그 분석 단계, 및 기계 학습에의 적용 방식에 대해 설명하였습니다. 목차 자연어 처리는 인공지능 분야로부터 파생된 영역으로, 인공지능은 기계가 생각하고 판단할 수 있도록 인공적으로 지능을 만드는 분야입니다. 인공적인 지능 생성을 위해서는 인간의 언어를 이해할 수 있는 기능이 요구되며, 따라서 컴퓨터가 인간의 언어인 자연어를 이해하고, 처리할 수 있도록 하는 자연어 처리가 중요하게 되었습니다. NLP는 인간의 언어가 사용되는 실세계의 모든 영역에서 활용될 수 있으며, 예를 들어 아래의 영역에 있어 활용될 수 있습니다. 정보검색, 질의응답 시스템 기계번역, 자동통역 문서작성, 문서 요약, 문서 분류, 철자 오류 검색 및 수정, 문법 오류 검사 및 수정.. 2021. 5. 26.
반응형