신토그래피

Synthography
미세 조정된 안정적 확산 모델과 아웃페인팅으로 생성된 합성 이미지

합성법[1] 기계 학습을 이용하여 디지털 미디어를 합성적으로 생성하는 방법입니다.이것은 합성 매체를 생성하기 위해 인공지능 예술 텍스트-이미지 모델을 사용한다는 점에서 다른 그래픽 생성 및 편집 방법과 구별됩니다.이는 일반적으로 [2][3]원하는 이미지를 만들거나 편집하기 위한 입력으로 엔지니어링 텍스트 설명을 프롬프트로 표시하여 수행할 수 있습니다.

텍스트-이미지 모델, 알고리즘 및 소프트웨어는 인간 입력을 기반으로 인공지능 아트 출력 결과를 생성하는 데 기술적 숙련도를 갖도록 설계된 합성법에 사용되는 도구입니다.합성법은 일반적으로 텍스트 이미지 모델을 사용하여 텍스트 이미지 모델이 훈련된 훈련, 검증 테스트 데이터 세트의 파생물로 새로운 이미지를 합성합니다.

합성법은 사용되는 방법이지 출력 자체가 아닙니다.인공지능 예술의 더 넓은 범주와는 반대로 생성적인 기계 학습 모델에 의해 특별히 생성된 출력을 합성 [1]그래프라고 합니다.합성술을 연습하는 사람들을 합성술사라고 [4][5]부릅니다.합성 기술자는 생성 모델을 길들이기 위해 언어 구성 능력을 활용할 수 있습니다.다른 경우에는 생성 가능성을 확장하기 위해 데이터 세트에서 모델을 미세 조정하는 것도 포함됩니다.

합성 사진의 실용적인 사용에는 인공지능 기반 제품 사진, 스톡 사진, 심지어 합성 사진이 [6]사진의 미래가 될 수 있다는 예측이 있는 잡지 표지가 포함됩니다.

어원

라틴어 합성 "수집, 구성"에서, 그리스어 합성 "구성,[7] 조립"에서 유래.
"-graphy"는 "쓰기 또는 기록의 과정" 또는 "쓰기, 기록 또는 설명"을 의미하는 단어 형성 요소입니다.프랑스어 또는 독일어-그래픽, 그리스어-그래픽 "description of"에서 유래한 것으로, 이전의 "그리는 선으로 표현하기 위해", 원래 "스타일러스가 [8]있는 점토판에서 긁고 긁기 위해" 그라핀의 추상 명사에 사용되었습니다.

방법론

신토그래피는 인공지능 시각을 생성하는 방법을 의미하기 때문에, 이것들은 방법에 사용되는 매체 또는 클래스입니다.

신토그래피 매체
입력 \ 출력 본문 이미지 3차원 모델 비디오
본문 챗봇 텍스트에서 이미지로 텍스트에서 3D로 텍스트에서 비디오로
이미지 이미지에서 텍스트로 이미지 대 이미지 이미지에서 3D로 영상 대 영상
비디오 비디오 대 비디오
뇌에서 이미지로
범례
흰 바탕 아직 존재하지 않음
연두색 배경 현재 학계 또는 베타에 존재합니다.
녹색 배경 상업적으로 또는 광범위하게 사용 가능

(참고: 텍스트 음성 변환 및 음성 음성 변환은 단순히 받아쓰기/전사 소프트웨어로 수행할 수 있으므로 '텍스트' 행과 열로 암시되기 때문에 표에서 의도적으로 생략합니다.또한 나열된 매체는 ChatGPT 대신 챗봇이라는 구체적인 사례가 아닌 매체 등급에 속합니다.)

신토그래피와 인공지능 예술의 차이점

인공지능(인공지능 예술)과 생성 모델(합성법)의 관계, Venn diagram

합성법은 생성 모델을 사용하여 합성 매체를 만드는 데 사용되는 방법입니다. 인공지능 예술(음악, 요리 및 비디오 게임 레벨 디자인 포함)은 인공지능을 사용하여 생성된 출력물로, 지나치게 광범위하고 점점 더 광범위한 [citation needed]범주입니다.

Elke Reinhuber는 "Synthography – 급변하는 디지털 이미지 생성 툴킷을 재고하기 위한 초대"라는 논문에서 "합법적 위기"라는 용어를 만들었습니다.생성 모델이 사용되기 전에 인공지능 아트 알고리즘은 다양한 인공지능 도구를 사용하는 그래픽 편집 소프트웨어(즉, 콘텐츠 인식 채우기, 예술적 스타일 적용, 해상도 향상), DSLR 및 스마트폰 카메라(즉, 객체 인식,카메라 내 초점 스태킹, 저조도 기계 학습 알고리듬) 모두 빠른 [1]개발을 계속하고 있습니다.

인공지능기계 학습의 슈퍼셋입니다.기계 학습은 신경망의 초집합입니다.신경망은 GAN(생성적 적대 네트워크) 확산 모델과 같은 생성 모델의 초집합입니다.이 모든 것들 사이의 관계는 여기에 표시된 벤 다이어그램에 나와 있습니다.Synthography는 특히 DALL-E, Midjourney 안정적 [citation needed]확산과 같은 소프트웨어에 의해 대중화된 생성 모델을 사용합니다.

레퍼런스

  1. ^ a b c Reinhuber, Elke (2 December 2021). "Synthography–An Invitation to Reconsider the Rapidly Changing Toolkit of Digital Image Creation as a New Genre Beyond Photography". Google Scholar. Retrieved 20 December 2022.
  2. ^ Smith, Thomas (26 October 2022). "What is Synthography? An Interview With Mark Milstein - Synthetic Engineers". syntheticengineers.com. Synthetic Engineers. Retrieved 20 December 2022.
  3. ^ Oosthuizen, Megan (20 December 2022). "Artist Shows Us What A Live-Action Movie Could Look Like". fortressofsolitude.co.za. Fortress Entertainment. Retrieved 10 February 2023.
  4. ^ Ango, Stephan (3 July 2022). "A Camera for Ideas". stephanango.com. Retrieved 10 February 2023.
  5. ^ Growcoot, Matt (17 March 2023). "AI Photographers or 'Synthographers'". petapixel.com. PetaPixel. Retrieved 25 March 2023.
  6. ^ Katz, Neil (8 March 2023). "Synthography is the Future of Photography". thisismeteor.com. Meteor. Retrieved 2 April 2023.
  7. ^ "synthesis". etymonline.com. Online Etymology Dictionary. Retrieved 27 December 2022.
  8. ^ "-graphy". etymonline.com. Online Etymology Dictionary. Retrieved 27 December 2022.