[개발이야기#047] 인공지능 이야기 내글을 요약해서 다른곳에 보내 보자.
안녕하세요 가야태자 @talkit 입니다. 오늘 할려고 하는 인공지능 관련 내용은 그냥 python으로 한글 문서를 요약해줄 수 있을까라는 생각에 ^^ 해봤습니다. 그랬다가 결국에는 T5모델까지 가게 되었습니다. ^^ 관련글 [AI] 무료 사용 가능한 LLM API 서비스 — Steemit - @anpigon [개발이야기#045] 인공지능 이야기 윈도우에서 Ollama 사용해보기 — Steemit [개발이야기#046] 인공지능 이야기 윈도우에서 Ollama 사용해보기 with Python — Steemit 소스코드 ``` import pymysql from krwordrank.sentence import summarize_with_sentences from transformers import AutoTokenizer, AutoModelForSeq2SeqLM MySQL 연결 정보 db_host = "mysql_server_address" db_user = "mysql_user_id" db_password = "mysql_user_password" db_name = "steemit_postings" KoT5 모델 및 토크나이저 로드 tokenizer = AutoTokenizer.from_pretrained("lcw99/t5-large-korean-text-summary") model = AutoModelForSeq2SeqLM.from_pretrained("lcw99/t5-large-korean-text-summary") postings 테이블에서 데이터 가져오기 함수 def get_post_content(post_id): connection = pymysql.connect( host=db_host, user=db_user, password=db_password, db=db_name ) try: with c...
댓글