Source Identification Problem Research 🍯

Watermark in Word Embedding

2 min read · January 31, 2024

Watermark Points and Paths

2 min read · January 29, 2024

Watermark Invariant 표현의 불가능성에 대하여

4 min read · January 29, 2024

Experimental Design

1 min read · January 28, 2024

문서와 함께 넣고, 생성한 결과물로부터 문서를 유도하는 인-아웃 구조

6 min read · January 10, 2024

Regulated Transformer

데이터의 사용을 강제적으로 제한하여 원천에 대한 명시적인 사용과 데이터 보호를 증진할 수 있는 모델 구조의 제안.

3 min read · December 5, 2023

[7] Mathematically modeling SIP

SIP에 대한 수학적인 모델링

8 min read · October 29, 2023

[6] SIP with BCE for extended 1000 classes with Shortlist Modeling [KSC 2023]

100개의 클래스를 넘어서 1000개의 클래스에 대해서 학습을 유도한다.

2 min read · October 20, 2023

[5] SIP with BCE for 100 Classes [KSC 2023]

BCE loss를 활용하면 100개의 클래스에 대해서도 학습이 가능함을 확인하였다. 데이터 PG19, Wikitext500, Amazon131K 에 대해서 학습하였고, perplexity, silhouette, probing 을 통해서 문장 이해의 적절한 수준이 있음을 밝힌다.

2 min read · October 20, 2023

[4] Related Work for SIP [XML]

Related work: document similarity, membership inference, backdoor attack, and watermark

3 min read · October 13, 2023

[3] SIP with wikitext for 10 classes

GPT 모델 파라미터로 문장을 인코딩하여, 다음 단어 예측 표현으로 원천소스를 맵핑한다. 모델 사이즈별로 유의미한 차이가 있음을 발견하였다.

9 min read · October 4, 2023

[2] Related Work for SIP [Data Provenance]

Literature Review of Provenance.

12 min read · September 17, 2023

[1] Prompt Tuning of Pre-trained GPT
with Twitter Complaints Dataset

Series of experiments conducted for SIP for GPT

4 min read · August 24, 2023

Source Identification for Generative Models

Can we provide the source of generation?

18 min read · July 10, 2023