가장 특이한 카메라

아직 들어보지 못했다면 인스타그램은 끝났다. 카메라 자체의 개념도 그것과 함께 있는 것 같다. 위치 데이터와 다양한 AI 도구를 사용하여 구식, 광자 대신 이미지를 생성하는 렌즈 없는 "카메라"인 Paragraphica를 만나보라.

Paragraphica는 위치 데이터와 인공지능을 사용하여 특정 장소와 순간의 "사진"을 시각화하는 컨텍스트 투 이미지 카메라이다. 카메라는 실제 프로토타입과 시도할 수 있는 가상 카메라로 존재한다. 가상 카메라는 현재 트래픽이 많고 로드되지 않거나 작동하지 않을 수 있다.

뷰파인더는 현재 위치에 대한 실시간 설명을 표시하고 트리거를 누르면 카메라가 설명의 신티그래픽 표현을 생성한다.

카메라에는 기존 카메라 작동 방식과 유사하게 사진의 모양에 영향을 주는 데이터 및 AI 매개변수를 제어할 수 있는 3개의 물리적 다이얼이 있다.

카메라는 개방형 API를 사용하여 해당 위치에서 데이터를 수집하여 작동한다. 주소, 날씨, 시간, 주변 장소를 활용한다. 이러한 모든 데이터 포인트를 결합하여 Paragraphica는 현재 장소와 순간을 자세히 설명하는 단락을 구성한다.

텍스트-이미지 AI를 사용하여 카메라는 단락을 "사진"으로 변환한다.

결과 "사진"은 단순한 스냅샷이 아니라 현재 위치와 AI 모델이 해당 위치를 "보는" 방식을 복잡하고 미묘하게 반영한 것이다.

흥미롭게도 사진은 그 장소에서 연상되는 분위기와 감정을 포착하지만 묘한 방식으로 사진이 내가 있는 곳과 정확히 똑같지는 않다.

지하에서 살며 사냥하는 별코두더지는 빛이 쓸모없다고 생각한다. 결과적으로 손가락 모양의 더듬이를 통해 세상을 인식하도록 진화하여 독특하고 지능적인 "보기" 방식을 부여했다. 이 놀라운 동물은 다른 지능과 공감하고 세상을 인식하는 방식이 인간의 관점에서 상상하기 거의 불가능하다는 것을 보여주는 완벽한 은유이자 영감이 되었다.

AI 언어 모델이 점점 더 의식화됨에 따라 우리도 그들이 세상을 어떻게 볼 것인지에 대한 상상력이 제한될 것이다.

카메라는 시각적 인식에만 국한되지 않고 우리 주변의 세계를 경험하는 방법을 제공한다. 위치 데이터 및 AI 이미지 합성을 통해 "Paragraphica"는 다른 지능의 관점을 통해 순간의 본질에 대한 더 깊은 통찰력을 제공한다.

첫 번째 다이얼은 광학 렌즈의 초점 거리와 유사하게 작동하지만 대신 카메라가 장소와 데이터를 검색하는 영역의 반경(미터)을 제어한다. 두 번째 다이얼은 0.1과 1 사이의 값이 AI 이미지 확산 프로세스를 위한 노이즈 시드를 생성하므로 필름 그레인과 비슷하다.

세 번째 다이얼은 안내 척도를 제어한다. 안내를 늘리면 AI가 단락을 더 가깝게 따라간다. 기존 카메라의 비유에서 값이 높을수록 "선명"하고 값이 낮을수록 사진이 "흐리게" 되므로 초점을 나타낸다.

위는 위치 기반 프롬프트와 이미지 자체를 생성하기 위해 카메라와 여러 API 간에 통신하는 웹 앱을 빌드하는 데 사용한 Noodl의 스크린샷이다.

하드웨어: Raspberry Pi 4, 15인치 터치스크린, 3D 프린팅 하우징, 맞춤형 전자 장치

소프트웨어: Noodl, pyhton 코드, 안정적인 확산 API