쵸코쿠키의 연습장

Stochastic Gradient Descent이란 무엇일까요?SGD(Stochastic Gradient Descent)에 대해 이야기하기 전에 먼저 Gradient Descent 란 무엇일까요? 그라디언트 디센트는 머신 러닝 및 딥 러닝에서 널리 사용되는 최적화 기술이며 대부분의 학습 알고리즘과 함께 사용할 수 있습니다. 그라디언트는 기본적으로 함수의 기울기입니다. 다른 파라미터의 변화량에 따른 파라미터의 변화 정도. 수학적으로 입력과 관련하여 매개 변수 집합의 부분 파생으로 설명 할 수 있습니다. 기울기가 많을수록 경사가 더 가파릅니다. 그라디언트 하강은 볼록한 기능입니다. 그라디언트 디센트는 비용 함수를 가능한한 최소화하는 함수의 매개 변수 값을 찾는 데 사용되는 반복적 방법으로 설명 할 수 있습..

소프트웨어 에이전트에이전트”에 대한 공식적인 정의 [Wooldridge, 2002]는 다음과 같습니다. 에이전트는 일부 환경에 위치한 컴퓨터 시스템입니다. 설계를 충족시키기 위해 환경에서 자율적인 작업 가능합니다. 목표• 주요 속성– 자율성 : 독립적으로 행동 할 수 있으며, 통제력을 보여줍니다- 내부 상태와 행동– 상황 • 살 곳 : 일부 환경에서 • 지각 능력 : 환경을 지각하는 능력 • 이펙터 기능 : 환경을 수정하는 기능– 지속성 : 살아있는 한 계속 작동합니다. • 적응 : 상담원은 환경과 사용자에 적응 경험– 기계 학습, 지식 발견, 데이터 마이닝 등을 통해– 메타 데이터 교환, 중개 및 촉진을 통해– 인터페이스 에이전트는 사용자 모델을 획득하고 사용합니다.– 환경에 위치하고 있습니다. • 협..

에이전트는 무엇입니까? - “에이전트는 센서를 통해 환경을 인식하고 이펙터를 통해 해당 환경에 작용하는 것으로 볼 수있는 모든 것입니다.” - "자율 에이전트는 복잡한 동적 환경에 거주하고이 환경에서 자율적으로 감지 및 행동하는 컴퓨팅 시스템이며, 이를 통해 일련의 목표나 작업을 실현할 수 있습니다." - "자율 에이전트는 환경에 감지되고 환경을 감지하고 시간이 지남에 따라 자체 안건을 추구하고 미래에 감지되는 영향을 미치기 위해 환경에 작용하는 시스템입니다." - "자율성, 사회적 능력, 반응성, 능동성이라는 속성을 즐기는 하드웨어 또는 소프트웨어 기반 컴퓨터 시스템" - “지능형 에이전트는 세 가지 기능을 지속적으로 수행합니다. 환경의 동적 조건에 대한 인식; 환경 조건에 영향을 미치는 행동; 지각을..

지능형 에이전트지능형 에이전트는 설계 목표를 달성하기 위해 유연한 자율 작업을 수행 할 수있는 에이전트입니다. 즉 에이전트와 유연성을 둘 다 가지고 있다고 생각하면 좋습니다. 유연성에 대한 속성– 반응성 : 에이전트는 환경을 인식하고 디자인 목표를 충족시키기 위해 환경 변화에 적시에 대응할 수 있습니다.– 사전 대응성 : 지능형 에이전트는 설계 목표를 충족시키기 위해 이니셔티브를 취함으로써 목표 지향적 행동을 보일 수 있습니다.– 사회적 능력 : 지능형 에이전트는 설계 목표를 충족시키기 위해 다른 에이전트 (및 가능한 사람)와 상호 작용할 수 있습니다. 공개 연구 문제– 순전히 반응성은 구현이 쉽다.– 반응하는 것 자체는 어려운 것은 아닙니다– 그러나 유연성 사이의 균형을 잡을 수 있는 에이전트 디자인은..

Activation 함수뉴런의 상호 작용을 담당합니다. 이러한 중요한 역할을 하는 Activation 함수들의 종류도 다양한 데 어떠한 것을 선택해야 할까요? 우선 주목해야 할 것은 비선형성입니다. 현실의 데이터는 n차원 비선형 분포로 존재합니다. 따라서 활성화 함수는 신경망에서 비선형 분포를 반영할 수 있도록 하는 역할을 담당합니다. 무엇이 좋은 activation 함수일까요? 이전에는 시그모이드 함수를 사용해왔습니다. 하지만 시그모이드 함수는 문제점이 존재하였고, 대책으로 좋은 RELU 활성화 함수가 제안되었습니다. One Hot EncodingN개의 Class를 가진 데이터의 Y Target 값을 설정할 때 One Hot Encoding을 사용합니다. N 사이즈의 배열에서 0, 1을 사용하여 해당하..

Binary Classification Output Y (Target 출력)딥 러닝에서는 그룹이라는 용어를 사용하지 않고 Class 용어를 사용합니다. 분류 출력은 입력이 어떤 Class에 속할지에 대한 확률을 의미합니다. 신경망은 확률을 0~1로 표현합니다. 바이너라 분류의 경우 Y 타겟을 0, 1로 표현합니다. X (입력)신경망에서 보통 하나의 입력은 하나 이상 여러가지 특징을 가지고 있습니다. 하나의 특징을 지칭할 떄 Feature라는 용어를 사용합니다. 신경망 입력은 n개의 feature 정보를 가진 입력을 n 사이즈의 배열로 입력받을 수 있습니다. 선형 함수는 다항의 1차 함수입니다. Sigmoid Function어떤 입력을 받아도 0 ~ 1 사이에서 값을 얻을 수 있습니다. 분류를 할때는 확률..

Error Function, Cost Function, Loss Function이 세 함수는 다 같은 것을 의미합니다. 신경망 모델이 피드포워드 계산한 값과 실제 타겟 값을 비교하는 데 사용되는 함수입니다. 다양한 손실 함수들이 존재하며, 데이터 성격에 맞는 함수를 사용합니다. 대표적으로는 MSE (mean square error), categorical cross-entropy를 많이 사용합니다. MSE (mean square error)평균 제곱근 편차를 의미합니다. Optimizer신경망에서 1차 함수에 w, b를 어떻게 업데이트 시킬 것인지에 사용되는 알고리즘을 의미합니다. 다양한 최적화 메소드가 존재합니다. Gradient descent가 대표적입니다. Back Propagation아웃풋 값의 ..

딥 뉴럴 네트워크프로그램 인공 신경은 인풋, 히든, 아웃풋 레이어로 이루어져 있습니다. 퍼셉트론도 역시 유사합니다. 하지만 히든 레이어 부분이 활성화 함수와 선형 함수가 포함되어있습니다. Supervised 학습은 이 input과 output을 입력하여 신경망을 학습시키는 구조입니다. 인풋 값을 히든 레이어에서 처리한 값이 아웃풋과 같아질 수 있도록 학습을 하는 방식입니다. Regression해당 학습을 통해 만약 x 값이 입력되면 y 값이 무엇이 될지에 대해 학습을 하고자하는 것이다. 따라서 여러개의 인풋이 들어가면 각각 선형 함수와 활성화 함수를 통해 아웃풋이 나오게 됩니다. Classification새로운 점은 어떠한 그룹인지 구별을 하는 것을 의미합니다. 여러 점의 포인트 값을 주고 해당하는 그룹..

신경망에서의 배치 정규화배치 정규화를 간단한 방법으로 설명합니다. Fast.ai와 deeplearning.ai에서 배운 내용을 읽은 후, 기사를 번역하였습니다. 필요한 이유, 작동 방식, VGG와 같은 사전 훈련된 네트워크에 포함시키는 방법부터 시작하겠습니다. 배치 정규화를 사용하는 이유는 무엇입니까?활성화를 조정하여 입력 레이어를 정규화합니다. 예를 들어 0에서 1까지, 1에서 1000까지의 기능이 있으면 학습 속도를 높이기 위해 정규화해야합니다. 입력 레이어가 이익을 얻는다면, 항상 변경되는 숨겨진 레이어의 값에 대해서도 동일한 작업을 수행하고 훈련 속도를 10 배 이상 향상 시키십시오. 배치 정규화는 숨겨진 단위 값이 이동하는 양 (공분산 이동)에 따라 양을 줄입니다. 공분산 변화를 설명하기 위해 ..

딥 네트워크의 앙상블 모델의 앙상블은 여러 통계 모델의 예측을 결합하여 하나의 최종 예측을 형성하는 방법을 나타냅니다. 이것은 모델의 표현력의 다양성에 대한 기회를 열어줍니다. 이 개념은 여러 의사의 의견을 구하는 것과 같은 일화와 유사합니다. 모델의 앙상블은 의사 결정 트리를 임의의 포리스트로 업그레이드하는 것과 같이 기존의 머신 러닝 모델을 매우 일반적으로 향상시킵니다. 머신 러닝 모델과 달리 딥 모델은 학습하는 데 시간이 오래 걸리므로 처음부터 학습한 딥 모델의 앙상블을 형성하는 것은 실용적이지 않습니다. FMoW는 특정 작업에 사용되는 데이터 세트이며 Hydra의 바디는 ResNet 및 DenseNet 설계에 따라 조립 된 많은 신경망 레이어로 구성됩니다. Hydra의 각 헤드는 FMoW 데이터 ..

소개ReLU(Rectified Linear Unit)는 딥 러닝 모델에서 가장 일반적으로 사용되는 활성화 함수입니다. 이 함수는 음의 입력을 받으면 0을 반환하지만 양수 x의 경우 해당 값을 다시 반환합니다. 따라서 f (x) = max (0, x)로 쓸 수 있습니다. 그래픽적으로는 다음과 같습니다 이러한 간단한 함수(두 개의 선형 부분으로 구성된 함수)가 모델이 비선형과 상호 작용을 잘 설명 할 수 있다는 것은 놀라운 일입니다. 그러나 ReLU 기능은 대부분의 응용 프로그램에서 훌륭하게 작동하며 결과적으로 매우 널리 사용됩니다. 작동하는 이유 인터랙션 및 비선형성 소개활성화 기능은 두 가지 주요 목적으로 사용됩니다. 1) 모델이 인터랙션 효과를 설명하도록 도와줍니다.인터랙션 효과는 무엇입니까? B의 가..

분류법은 유기체의 명명, 묘사 및 분류 과학이며 세계의 모든 식물, 동물 및 미생물을 포함합니다. 분류 학자들은 형태 학적, 행동적, 유전적, 생화학적 관찰을 사용하여 과학에 새로운 것들을 포함하여 종을 분류하고 분류합니다. 분류법은 생물학적 다양성에 관한 협약의 관리 및 이행을 뒷받침하는 기본 지식을 제공하는 생물학적 다양성의 구성 요소를 식별하고 열거합니다. 불행하게도 분류학 지식은 완전하지 않습니다. 지난 250 년간의 연구에서 분류 학자들은 약 1,78 백만 종의 동물, 식물 및 미생물을 명명했지만, 총 종 수는 알려져 있지 않으며 아마도 5 천에서 3 천만 사이 일 것입니다. 종의 이름을 지정하는 방법 : 분류 과정분류 학자들은 종을 대표한다고 생각되는 세트를 분리하기 위해 표본을 분류하는 것으..

에이전트와 개체에이전트는 다른 이름으로 객체라 할 수 있을까요? 개체란 어떤 상태를 캡슐화하고, 메시지 전달을 통해 의사소통을 합니다. 또한, 특정 상태에서 수행될 수 있는 작업과 방법이 존재합니다. 에이전트와 개체의 주요한 차이점은 무엇일까요? 에이전트는 자율적입니다. 에이전트는보다 자율성 개념을 구현합니다. 특히 에이전트는 수행할지 여부를 스스로 결정합니다. 다른 에이전트의 요청에 따른 조치를 취할 줄 압니다. 에이전트은 영리합니다 : 유연한 (사후, 능동적, 사회적) 행동이 가능합니다. 표준 객체 모델은 이러한 유형의 행동에 대해 아무 반응도 하지 않습니다. 에이전트가 활성 상태인 경우 : 다중 에이전트 시스템은 본질적으로 다중 스레드입니다. 각 에이전트는 하나 이상의 활성 제어 스레드를 가지고 있..

에이전트와 전문가 시스템에이전트는 다른 이름의 전문가 시스템이 아닐까요? 전문가 시스템은 일반적으로 일부에 대해 '전문 지식'을 구현한 것입니다. 예를 들어 MYCIN은 인간의 혈액 질환에 대해 알고 있습니다. 규칙의 형태로 혈액 질환에 대한 풍부한 지식을 가지고 있습니다. 의사는 MYCIN 사실을 알려 혈액 질환에 대한 전문가의 조언을 얻을 수 있습니다. 질문에 대답하고 질문을 제기에이전트와 주요 차이점에 대해 알아보겠습니다. – 에이전트 : MYCIN은 세계를 인식하지 못합니다.사용자는 단지 질문을 통해 정보를 얻는 것입니다. – 에이전트 행동 : MYCIN은 환자에게 작동하지 않습니다.일부 실시간 (일반적으로 프로세스 제어) 전문가 시스템은 에이전트입니다.

Intelligent Agents VS AI지능형 에이전트는 AI와 다른 것일까요? AI는 도대체 무엇일까요? AI가 에이전트를 구축하는 것일까요? AI는 자연 언어를 (궁극적으로) 이해하고, 장면을 인식하고 이해하며, 상식을 사용하고, 창의적으로 생각하는 등의 시스템을 구축하는 것을 목표로합니다. 에이전트를 만들기 위해 모든 분야의 AI를 구현할 필요가 있을까요? 에이전트를 구축 할 때 일반적으로 제한된 도메인에서 수행 할 올바른 작업을 선택할 수있는 시스템을 원합니다. 유용한 에이전트를 만들기 위해 AI의 모든 문제를 해결해 구현할 필요는 없습니다. 에이전트를 개발해서 큰 돈을 번 사람이 이런 이야기를 하였다고 합니다. 우리는 에이전트를 멍청하고 멍청하게 만들었다. 마침내 에이전트는 돈을 벌어 들였다..

지능형 에이전트의 애플리케이션 종류 지능형 에이전트는 환경, 사용자 입력 및 경험에 따라 결정을 내리거나 서비스를 수행 할 수 있는 프로그램입니다. 이러한 프로그램을 사용하여 정기적으로 프로그래밍 된 일정에 따라 또는 사용자가 실시간으로 메시지를 표시 할 때 자율적으로 정보를 수집 할 수 있습니다. 지능형 에이전트는 로봇의 약자 인 봇이라고도합니다. 일반적으로 사용자가 제공 한 매개 변수를 사용하는 에이전트 프로그램은 인터넷의 전체 또는 일부를 검색하고 사용자가 관심있는 정보를 수집하여 정기적 또는 요청에 따라 제공합니다. 데이터 지능형 에이전트는 포함된 키워드 또는 게시 날짜와 같은 특정 정보를 추출 할 수 있습니다. 인공 지능 (AI)을 사용하는 에이전트에서 사용자 입력은 마이크나 카메라와 같은 센서..

CMU : RADAR 프로젝트RADAR는 분산 적응 추론을 통한 반사 에이전트를 의미합니다. 이 에이전트는 스케줄 설계 및 자원 배분을 위한 기술이 적용되었습니다. 웹 사이트의 효과적인 설계 및 유지를 위한 기술 중 하나입니다. 또, 전자 메일 기반의 사용자 지원 프로그램으로 개발할 수 있습니다. 그렇다면, CMRADAR는 무엇일까요? 바로 달력 관리를 위한 개인 비서 에이전트입니다. 이 에이전트에는 자동화된 협상 기술을 보유하고 있습니다. 비동기식으로 정보를 교환하고 조치합니다. 그것에 맞게 일정을 설계하고 최적화합니다. 동적인 조건에서 빛을 발합니다. 사용자에 맞게 적응하여, 사용자의 선호도를 분석합니다. 학습을 통해 일정을 설계하고 성과를 개선합니다.

CMU : RETSINA 에이전트 모델 이 에이전트는 어떤 특징을 가지고 있을까요? 바로 작업 중심의 지능형 커뮤니케이션을 담당하는 에이전트입니다. 이걸 실현하기 위해서는 인터페이스 에이전트, 작업 에이전트, 정보 에이전트, 매개 에이전트 등이 필요합니다. 그렇다면 어떠한 모듈들이 필요할까요? 우선 통신 / 조정 모듈이 필요합니다. 그리고 계획 모듈이 필요합니다. 그리고 스케줄 모듈이 필요합니다. 이것들을 실행할 실행 모듈이 필요합니다. 이걸로 만들 수 있는 응용 프로그램으로는 어떤 것이 있을까요? 바로 The Calendar Apprentice, the WebWatcher, the Visitor-Hoster 등이 있습니다.

CALO(칼로) 칼로는 학습을 하고 조직하고 인지하는 조수의 역할을 수행합니다. 칼로 프로그램의 목표는 무엇일까요? 바로 담당자와 의사 결정권자를 지원하는 것입니다. 학습, 추론, 지각, 다중 모델 상호 작용을 목표로 수행합니다. 그렇다면 이러한 칼로는 어떠한 서비스를 제공해줄까요? 우선 정보를 구성하고 관리 하는 서비스를 제공합니다. 또 정보 제품을 준비합니다. 상호 작용을 관찰하고 중재하는 역할도 수행합니다. 추가적으로 작업 모니터링 및 관리를 수행하고 시간에 맞추어 일정을 잡기도 합니다. 자원을 확보하고 할당하는 역할도 수행합니다. 이러한 칼로에게는 어떠한 기술이 필요할까요? IRIS : LITW 플랫폼이 필요합니다. 또, 과제를 학습할 줄 알고, 적응할 줄 알아야 합니다. 트랜스퍼 학습이 가능해야..

시리시리는 가상 개인 비서를 뜻합니다. 현재는 아이폰에서 주요한 역할을 해내고 있습니다. 시리에 기본적인 정보들을 탐구해보았습니다. 목표시리의 최종 목표는 무엇일까요? 바로 대화를 통해 개인적인 작업들을 수행하는 것입니다. 현재 시리에 기능은 날이 갈수록 파워풀해지고 있다는 것은 여러분도 알고 있을 것입니다. 과연 시리의 발전의 끝은 어떤 모습일까요. 서비스시리의 주요 서비스들에 대해 알아보겠습니다. 먼저 시리는 대화 기반으로 상호작용합니다. 추가적으로 추천 서비스 역할도 합니다. 레스토랑, 영화, 이벤트, 지역, 택시, 날씨 등을 알려주고 추천해줍니다. 또 소셜 커뮤니케이션 역할도 합니다. 시리와 상호작용을 위한 대화식 인터페이스가 있습니다. 이러한 인터페이스를 이해하면 시리의 기능을 잘 활용할 수 있..