링크가 복사되었습니다.

퍼블리시랩(PUBLISHLAB), 뉴스 추천·블록체인 인덱스 등 4개 혁신 프로토타입 공개

하이레 기자

2020-12-21 월 18:42

댓글 [92]
추천 [0]

글로벌 미디어 테크 기업 퍼블리시(PUBLISH)가 내부 미디어 혁신 연구소 '퍼블리시랩(PUBLISHlab)'의 공식 사이트를 개설했다고 지난 18일 발표했다.

퍼블리시랩은 첨단 기술을 활용해 독자 참여 개선, 가짜 뉴스 퇴치, 언론사 수익 구조 개선에 필요한 디지털 툴을 개발하기 위해 지난 5월 출범했다.

퍼블리시랩 사이트는 저널리즘 발전을 위한 4개 프로토타입 솔루션 △콘텐츠 추천 기능, △뉴스 정서 분석 툴, △자동 이미지 태그 기능, △퍼블리시투블록체인 툴을 지원한다. 사이트 구축에는 파이썬 기반 웹개발 프레임워크 플라스크(Flask)가 사용됐다.


토큰포스트 주요 기사를 뉴스레터를 통해 만나보세요 (구독하기)


콘텐츠 추천 기능(Content recommender)

콘텐츠 추천 기능은 관련 뉴스를 자동 제안하는 프로토타입이다. 먼저, 1개 이상의 뉴스 피드를 읽어들여 파이썬 기반 구문 분석 모듈 '유니버셜피드파서(Universal Feed Parser)'를 통해 구문을 분석한다.

이어 판다스(pandas)의 데이터 프레임으로 변환시킨다. 판다스는 파이썬 언어로 작성된 데이터 분석·조작하는 소프트웨어 라이브러리다.

자연어 처리 라이브러리 스페이시(spaCy)en-core-sm 영어 모델을 사용해, 무작위로 선정한 뉴스 기사에서 헤드라인을 추출하고, 본문에서 인명, 장소, 단체, 조직 등 명명된 개체를 식별하는 개체명 인식(named-entity recognition.NER)을 수행한다.

끝으로, 파이썬 기반 머신러닝 라이브러리 sci-kit learn에서 지원하는 카운트벡터라이저(CountVectorizer)코사인 유사도(cosine_similarity) 모듈을 활용해 문서 단어 행렬(document-term matrix)을 만들고 헤드라인 유사성을 판별한다.

카운트벡터라이저와 코사인 유사도는 문서 간 유사성을 측정하는 모듈이다. 각각 데이터 값의 횟수, 데이터 값 사이 각도를 기준으로 평가한다.


뉴스 정서 분석 툴(Sentiment analysis tool)

뉴스 정서 분석 툴은 텍스트가 얼마나 긍정적인지, 부정적인지를 기반으로 뉴스 정서 점수를 평가하는 툴이다.

사전 처리 단계에서 사용자가 입력한 텍스트의 주요 용어를 식별하고, 필요시 구글 트랜스파이선 라이브러리를 통해 영어로 변환시킨다.

이어 자동 정서 분석 프로그램 베이더(VADER)를 통해 텍스트 정스를 분석한다. 해당 툴은 부정문, 느낌표, 대문자, 정도 부사, 정서를 표현한 속어, 유니코드 이모티콘 등을 통해 텍스트 정서를 도출해낸다.

해당 프로토콜은 본문 전체 및 문장 단위마다 정서 지수를 매길 수 있다. 문장 색상을 바꿔 정서 점수를 나타낼 수 있다. 뉴스나 제품 리뷰 등에서 긍정적인 표현, 부정적인 표현 등을 잡아낼 수 있다.


자동 이미지 태깅 기능(Automatic image tagger)

자동 이미지 태킹 프로토타입은 딥러닝 이미지 모델을 사용해 이미지에 자동으로 태그한다. 사용자가 업로드한 이미지는 파이썬 기반 머신러닝 라이브러리 파이토치(PyTorch)를 통해 크기 조정, 잘라내기 등의 사전 처리를 거친다.

이어 컴퓨터 비전 모델을 통해 사전 처리된 이미지 속 사물을 식별하고 신뢰도 점수 기반 상위 태그 5개를 만들어낸다.

컴퓨터 비전은 컴퓨터를 통해 인간의 시각 인식 능력을 재현하는 인공지능 기술을 말한다. 퍼블리시는 현재 유일한 옵션인 이미지넷(ImageNet) 기반 컴퓨터 비전 모델 ResNet-50을 사용했다.

해당 프로토타입은 콘텐츠 허브에서 이미지를 검색 가능하도록 만들는 데 사용할 수 있다.


퍼블리시투블록체인툴(Publish-to-blockchain tool)

퍼블리시투블록체인툴 프로토타입은 EOSIS 블록체인에 뉴스 콘텐츠에 대한 색인을 만들 수 있다.

먼저, 뉴스를 ninjs(News in JSON)에서 파생된 블록체인 및 뉴스 미디어 친화적인 형식으로 변환시키고, 결과값을 이오스IO 테스트넷인 정글 테스트넷(Jungle Testnet)에 트랜잭션으로 게재한다.

트랜잭션을 실행하기 전 SHA-256 해싱알고리즘을 통해 콘텐츠를 암호화시키는 것도 가능하다. 해당 기술은 저작권 보호, 저널리즘 투명성 향상, 데이터 손실 및 검열 방지 등 다양한 부문에 활용할 수 있다.

한편, 퍼블리시랩은 4가지 프로토타입 외에도 더욱 컴퓨터 비전 모델과 뉴스 자동화, 뉴스 요약 등 여러 기능을 개발하고 있다. 이를 위해 데이터가 풍부한 분야에서 훈련된 모델을 재사용하는 머신러닝 학습 기법 '전이학습((transfer learning)'을 활용하고 있다.

퍼블리시는 언론 산업의 혁신을 위해 퍼블리시 프로토콜 기반의 미디어 댑 발굴과 유기적인 생태계 성장을 위한 새로운 미디어 표준을 만들어가고 있다. 자체 개발한 미디어 콘텐츠관리시스템(CMS) '퍼블리시소프트'를 출시하고, 산업 전반에서 블록체인 기술 도입을 위한 글로벌 미디어·기술업체·학문기관 연합체인 '퍼블리시얼라이언스'를 설립했다.

지난 9월 국내 1위 인터넷 언론 컨텐츠 관리시스템(CMS) 서비스 기업 엔디소프트(NDSoft)와 전략적 제휴(MOU)를 맺었다. 11월에는 중소벤처기업부 '2020년 글로벌 액셀러레이팅 지원사업'의 일환으로 팀 드레이퍼(Tim Draper) 재단이 주최한 IR 피칭 프로그램에서 국내 팀 가운데 1위를 차지하기도 했다.

또한 퍼블리시는 한국민영방송연합과 협력해 블록체인 기술에 기반한 지역 뉴미디어 플랫폼을 개발할 예정이다.

토큰포스트 | [email protected]

<저작권자 © TokenPost, 무단전재 및 재배포 금지 >

이 기사가 마음에 들었다면
GOOD NEWS 추천하기

0

기사 추천하기 pointer

리워드 받기
댓글
댓글 서비스는 로그인 후 이용하실 수 있습니다.
진정성 있는 댓글은 토큰포스트에 큰 힘이 됩니다.
전체댓글 [92]
댓글보기
  • 사랑스런
  • 2021.04.02 14:56:53
좋아요
답글 달기
  • 2
  • ·
  • 0
  • sens28
  • 2021.03.31 21:20:49
감사합니다.
답글 달기
  • 0
  • ·
  • 0
  • ocn5025
  • 2021.03.20 15:15:18
감사합니다
답글 달기
  • 0
  • ·
  • 0
  • 아리랑동동
  • 2021.03.20 07:55:34
정보감사합니다
답글 달기
  • 0
  • ·
  • 0
  • ocn5025
  • 2021.03.19 10:28:27
감사합니다
답글 달기
  • 0
  • ·
  • 0
  • 로이
  • 2021.02.01 22:05:26
기사 감사합니다
답글 달기
  • 0
  • ·
  • 0
  • 꽃미남
  • 2021.01.30 18:55:22
좋아요
답글 달기
  • 0
  • ·
  • 0
  • 매니아
  • 2021.01.26 10:18:51
감사합니다
답글 달기
  • 0
  • ·
  • 0
  • 김길임
  • 2021.01.22 10:22:49
조은정보감사합니다
답글 달기
  • 1
  • ·
  • 0
  • 에드워드김
  • 2021.01.22 06:21:39
정보 잘 봤습니다
답글 달기
  • 2
  • ·
  • 0
  • 김길임
  • 2021.01.21 09:57:50
조은정보감사합니다
답글 달기
  • 1
  • ·
  • 0
  • 새똘똘이
  • 2021.01.20 07:09:44
기대
답글 달기
  • 2
  • ·
  • 0
  • darksabre
  • 2021.01.19 19:51:35
ㄱㅅ
답글 달기
  • 2
  • ·
  • 0
  • 새똘똘이
  • 2021.01.19 00:20:47
기대
답글 달기
  • 2
  • ·
  • 0
  • 새똘똘이
  • 2021.01.18 00:06:46
기대
답글 달기
  • 2
  • ·
  • 0
  • 새똘똘이
  • 2021.01.18 00:00:50
기대
답글 달기
  • 2
  • ·
  • 0
  • 즐거운하루
  • 2021.01.17 15:44:36
.
답글 달기
  • 2
  • ·
  • 0
  • 즐거운하루
  • 2021.01.17 15:44:15
잘 봤습니다.
답글 달기
  • 2
  • ·
  • 0
  • darksabre
  • 2021.01.17 10:38:18
감사합니다
답글 달기
  • 2
  • ·
  • 0
  • 더나세
  • 2021.01.16 11:25:40
감사합니다
답글 달기
  • 1
  • ·
  • 0
  • 새똘똘이
  • 2021.01.16 07:32:02
기대
답글 달기
  • 2
  • ·
  • 0
  • 머랭이
  • 2021.01.15 11:57:28
감사합니다
답글 달기
  • 2
  • ·
  • 0
  • 새똘똘이
  • 2021.01.15 00:19:59
기대
답글 달기
  • 3
  • ·
  • 0
  • 강군
  • 2021.01.14 11:56:16
감사합니다.
답글 달기
  • 3
  • ·
  • 0
  • 새똘똘이
  • 2021.01.14 00:17:46
기대
답글 달기
  • 3
  • ·
  • 0
  • 새똘똘이
  • 2021.01.13 06:56:32
기대
답글 달기
  • 3
  • ·
  • 0
  • 새똘똘이
  • 2021.01.13 01:20:15
기대
답글 달기
  • 3
  • ·
  • 0
  • 새똘똘이
  • 2021.01.13 00:06:25
기대
답글 달기
  • 3
  • ·
  • 0
  • 새똘똘이
  • 2021.01.11 00:51:50
기대
답글 달기
  • 4
  • ·
  • 0
  • 새똘똘이
  • 2021.01.11 00:38:30
기대
답글 달기
  • 4
  • ·
  • 0
  • 새똘똘이
  • 2021.01.10 16:58:34
기대
답글 달기
  • 4
  • ·
  • 0
  • 아카시아
  • 2021.01.10 10:14:06
소식 감사합니다
답글 달기
  • 4
  • ·
  • 0
  • 에드워드김
  • 2021.01.09 18:12:35
정보 잘 봤습니다
답글 달기
  • 5
  • ·
  • 0
  • 에드워드김
  • 2021.01.09 18:09:18
정보 잘 봤습니다
답글 달기
  • 5
  • ·
  • 0
  • 아리랑동동
  • 2021.01.08 06:47:22
좋아요.앱섳치 안되여?
답글 달기
  • 4
  • ·
  • 0
  • 새똘똘이
  • 2021.01.08 00:33:24
기대
답글 달기
  • 4
  • ·
  • 0
  • ocn5025
  • 2021.01.07 21:10:50
감사합니다
답글 달기
  • 4
  • ·
  • 0
  • 더킹
  • 2021.01.07 19:38:54
잘봤습니다
답글 달기
  • 4
  • ·
  • 0
  • 21세기
  • 2021.01.07 18:11:10
좋은정보 감사합니다...
답글 달기
  • 4
  • ·
  • 0
  • 퍼블
  • 2021.01.07 11:18:56
감사합니다
답글 달기
  • 3
  • ·
  • 0
  • 새똘똘이
  • 2021.01.07 07:01:19
기대
답글 달기
  • 4
  • ·
  • 0
  • 새똘똘이
  • 2021.01.06 00:06:41
기대
답글 달기
  • 3
  • ·
  • 0
  • 떨뚜
  • 2021.01.04 22:48:51
기대많이합니다
답글 달기
  • 4
  • ·
  • 0
  • 퍼블
  • 2021.01.04 08:53:05
감사합니다
답글 달기
  • 4
  • ·
  • 0
  • 새똘똘이
  • 2021.01.04 02:09:45
기대
답글 달기
  • 3
  • ·
  • 0
  • 새똘똘이
  • 2021.01.04 02:07:03
기대
답글 달기
  • 4
  • ·
  • 0
  • 주운돌
  • 2021.01.03 22:47:40
정보 감사합니다.
답글 달기
  • 3
  • ·
  • 0
  • 사용자_bmt
  • 2021.01.03 19:05:47
언론사내에 연구소가 그것도 기술연구소가 있다는 것이 새로운 시도인 것으로 보입니다.
답글 달기
  • 4
  • ·
  • 0
  • 새똘똘이
  • 2021.01.03 01:14:43
기대
답글 달기
  • 3
  • ·
  • 0
  • 즐거운하루
  • 2021.01.03 00:56:20
달립시다..
답글 달기
  • 4
  • ·
  • 0
  • 새똘똘이
  • 2021.01.02 07:47:35
기대
답글 달기
  • 4
  • ·
  • 0
  • 즐거운하루
  • 2021.01.02 01:18:43
좋은 날..
답글 달기
  • 4
  • ·
  • 0
  • 도리도리
  • 2021.01.01 23:57:08
기대기대
답글 달기
  • 4
  • ·
  • 0
  • 새똘똘이
  • 2021.01.01 00:25:29
기대
답글 달기
  • 3
  • ·
  • 0
  • 새똘똘이
  • 2020.12.31 01:05:28
기대
답글 달기
  • 4
  • ·
  • 0
  • 새똘똘이
  • 2020.12.30 01:36:36
기대
답글 달기
  • 2
  • ·
  • 0
  • 전장군
  • 2020.12.29 10:56:39
정보 잘보고감니다.
답글 달기
  • 5
  • ·
  • 0
  • Myung
  • 2020.12.29 09:17:51
좋은 소식이네요 ㅎ
답글 달기
  • 2
  • ·
  • 0
  • 즐거운하루
  • 2020.12.29 01:31:22
잘봤습니다.
답글 달기
  • 4
  • ·
  • 0
  • 새똘똘이
  • 2020.12.29 00:57:45
기대
답글 달기
  • 4
  • ·
  • 0
  • 바이든
  • 2020.12.28 13:51:07
기대되네요
답글 달기
  • 5
  • ·
  • 0
  • imsob
  • 2020.12.28 09:26:02
기대됩니다
답글 달기
  • 5
  • ·
  • 0
  • 퍼블
  • 2020.12.26 07:56:43
감사합니다
답글 달기
  • 3
  • ·
  • 0
  • 즐거운하루
  • 2020.12.26 01:50:03
잘봤습니다.
답글 달기
  • 5
  • ·
  • 0
  • Beaver
  • 2020.12.26 01:10:37
잘 읽었습니다.
답글 달기
  • 5
  • ·
  • 0
  • 더킹
  • 2020.12.26 00:44:11
잘봤습니다
답글 달기
  • 5
  • ·
  • 0
  • 금코러
  • 2020.12.24 08:27:48
4가지 핵심 툴의 기능에 가치상승이 기대되네요~~성공적인 안착을 기원합니다.
답글 달기
  • 10
  • ·
  • 0
  • 새똘똘이
  • 2020.12.24 00:05:38
기대
답글 달기
  • 7
  • ·
  • 0
  • 바이든
  • 2020.12.23 09:10:08
엄청난 연구의 결과인 것 같습니다
답글 달기
  • 5
  • ·
  • 0
  • 도리도리
  • 2020.12.22 18:08:06
정보 감사합니다.
답글 달기
  • 6
  • ·
  • 0
  • 푸우
  • 2020.12.22 14:24:30
좋아요 !
답글 달기
  • 4
  • ·
  • 0
  • Coinomy
  • 2020.12.22 14:00:34
PUBLISHLAB이 공식 사이트를 개설하였군요. 축하드리고, 앞으로 블록체인 기반 미디어 기술 개발과 확보, 그리고 활용에 있어 선구적인 역할을 해 줄 것으로 기대하겠습니다.
답글 달기
  • 10
  • ·
  • 0
  • ocn5025
  • 2020.12.22 11:59:31
감사합니다
답글 달기
  • 6
  • ·
  • 0
  • jjangdol69
  • 2020.12.22 10:10:39
좋아요~~~
답글 달기
  • 7
  • ·
  • 0
  • 아리랑동동
  • 2020.12.22 10:01:49
감사합니다
답글 달기
  • 7
  • ·
  • 0
  • 아카시아
  • 2020.12.22 09:57:35
정보 감사합니다
답글 달기
  • 6
  • ·
  • 0
  • 구리구리
  • 2020.12.22 09:36:51
감사합니다
답글 달기
  • 7
  • ·
  • 0
  • NCWT
  • 2020.12.22 09:15:39
감사합니다.
답글 달기
  • 8
  • ·
  • 0
  • mopxy
  • 2020.12.22 09:09:59
잘봤습니다
답글 달기
  • 7
  • ·
  • 0
  • Myung
  • 2020.12.22 08:12:24
드디어 개설이군요!
답글 달기
  • 8
  • ·
  • 0
  • 김종수
  • 2020.12.22 07:55:12
Good
답글 달기
  • 8
  • ·
  • 0
  • 오대지
  • 2020.12.22 02:48:41
뉴스 잘 읽었습니다.
감사합니다.
답글 달기
  • 7
  • ·
  • 0
  • sot1012
  • 2020.12.22 02:34:39
굿입니다
답글 달기
  • 8
  • ·
  • 0
  • 퍼블
  • 2020.12.22 02:06:45
감사합니다
답글 달기
  • 6
  • ·
  • 0
  • cryptoworld
  • 2020.12.22 00:42:55
굿뉴스 잘 보았습니다
퍼블리시랩의 발전을 기원합니다
답글 달기
  • 11
  • ·
  • 0
  • 새똘똘이
  • 2020.12.22 00:16:13
기대
답글 달기
  • 9
  • ·
  • 0
  • dejavu
  • 2020.12.21 23:53:49
감사합니다
답글 달기
  • 9
  • ·
  • 0
  • oversoul71
  • 2020.12.21 21:02:25
밀단 열심히 해주쇼
답글 달기
  • 7
  • ·
  • 0
  • 디지털거지
  • 2020.12.21 19:47:51
건승하세요
답글 달기
  • 10
  • ·
  • 0
  • 더킹
  • 2020.12.21 19:32:25
잘봤습니다
답글 달기
  • 9
  • ·
  • 0
  • raonbit
  • 2020.12.21 18:52:22
퍼블리시랩의 저널리즘 발전을 위한 4개 프로토타입 솔루션 콘텐츠 추천 기능, 뉴스 정서 분석 툴, 자동 이미지 태그 기능, 퍼블리시투블록체인 툴 지원 기능의 미디어 발전의 기본 솔루션이 되기를 기원합니다.
답글 달기
  • 14
  • ·
  • 0
  • 디스나
  • 2020.12.21 18:44:05
'퍼블리시랩(PUBLISHlab)'의 공식 사이트를 개설을 축하드립니다!
답글 달기
  • 10
  • ·
  • 0
더 보기

TPC가 적립되었습니다.

적립내역
  • PUBLISH (NEWS) ₩ 33.14(-17.1%)
  • Bitcoin (btc) ₩ 39,303,600(+2.1%)
  • Ethereum (eth) ₩ 2,485,840(+2.4%)
  • Tether (usdt) ₩ 1,145.31(+0.0%)
  • Binance Coin (bnb) ₩ 343,570(+0.4%)
  • Cardano (ada) ₩ 1,408.73(+1.7%)
  • PUBLISH (NEWS) ₩ 33.14(-17.1%)
2021-07-25 일요일
00:11:18
코인니스 뉴스 제공 시간 안내
00:09:42
전날 새벽, BTC 7월말 만기 33000~35000 달러 콜옵션 대규모 주문
2021-07-24 토요일
23:37:32
ETH 개발자 툴 하드햇, 8월 4일 v2.6.0 배포..런던 하드포크 활성화
21:33:32
화웨이 블록체인 총괄 "블록체인, 기술 성장과 확장성 간 충돌 불가피"
19:56:11
터키, 이르면 10월 암호화폐 규제 법안 발의
17:56:54
샌티멘트 "거래소 BTC 보유량, 18개월래 최저 근접... 매도세 감소"
17:10:34
메타버스 AI, 수백만 달러 투자 유치... 폴리곤 등 투자
16:58:48
블룸버그 전략가 "비트코인, 6만 달러 회복 가능성 크다"
16:43:02
분석가 "AXS, 잘하면 연내 100달러 도달"
15:38:25
디시인사이드 알트마이너 갤러리, 천안함 유족 대상 기부 진행
14:51:24
미러 프로토콜, 인센티브 풀 유니스왑→스시스왑 제안
14:39:40
미국, 비트코인 ATM 3만8000대 이상
14:08:59
버몬트 주, 블록파이 BIA 위법 여부 조사 중
13:22:50
크립토 '공포·탐욕 지수' 22... 극단적 공포 지속
13:14:08
솔라나 재단, 500만 달러 규모 크리에이터 펀드 출범
11:55:23
게임스타터, 다오메이커에서 SEED SHO 진행
11:41:19
뉴욕 주 마세나, 90일간 신규 암호화폐 사업 유예 계획
11:05:14
이더리움클래식, 마그네토 하드포크 완료
10:47:00
쿠사마, 무허가 자산생성 허가 제안 투표 진행
10:31:10
英 유명 금융사 CEO "비트코인 하락할때 사야...1.3만달러 찍고 12만달러 전망"
[토큰포스트] GOOD NEWS 추천하고 NEWS받자!
21.07.21(수) 17:30 ~ 21.08.31(화) 17:30
루니버스 파트너스 데이
21.07.29(목) 14:30 ~ 21.07.30(금) 17:00
[토큰포스트] 핵!인싸 NEWS人을 찾아라!
21.07.08(목) 09:30 ~ 21.12.31(금) 09:30
맨위로 가기
기사추천
Copyright ⓒ TokenPost. All Rights Reserved.
제호 : 토큰포스트   |   법인명 : (주)토큰포스트   |   주소 : 서울특별시 영등포구 선유로49길 17, 부윤빌딩 5층
인터넷신문등록번호 : 서울 아 52481   |   등록일자 : 2018.01.02   |   청소년 보호정책(책임자 : 서원진)
발행인 : 권성민   |   대표 · 편집인 : 도요한  |   발행일자 : 2021.07.25
TokenPost.kr의 모든 컨텐츠와 기사는 저작권법의 보호를 받은바, 무단 전재, 복사, 배포 등을 금합니다.
대표전화 : 02-6332-2245 / 광고문의 : 02-6674-1012 / [email protected]
인터넷신문 위원회
PUBLISHsoft