망상 센서

Retinomorphic sensor
상단: 시간 함수로 센서에 입사하는 광도의 단계적 변화.중간:시간의 함수로서 기존의 광학 센서로부터의 출력 형태.하단:시간의 함수로써 변형 센서의 출력 형태.

망상 센서는 광강도 [1]자체가 아니라 광강도 변화에 따라 신호를 생성하는 이벤트 구동 광학 센서의 한 종류입니다.기존 광센서인 전하결합소자(CCD)나 상보금속산화물반도체(CMOS) 기반 센서와는 대조적이다.레티모픽 센서는 움직임에만 반응하기 때문에 기존 이미지 센서보다 빠르게 움직이는 물체를 추적할 수 있고 자율주행차, 로봇공학,[2][3][4][5] 뉴로모픽 공학 등에 응용할 수 있을 것으로 기대된다.

이름 및 이력

최초의 인공 망막은 1980년대 후반에 Carver Mead와 그의 박사과정 학생인 Misha Mahowald, Tobias Delbruck[6][7]의해 보고되었다.이러한 실리콘 기반 센서는 차동 증폭기, 캐패시터저항포함하는 작은 회로를 기반으로 했습니다.이 센서는 조명 강도의 단계적 변화에 따라 스파이크와 그에 따른 출력 전압 감쇠를 발생시켰습니다.이 반응은 동물의 망막 세포와 유사하며, 1920년대에 빛의 강도가 [8]일정할 때보다 변화할 때 더 자주 발생하는 것으로 관찰되었다.따라서 실리콘 레티나라는 이름은 이러한 [9]센서를 설명하기 위해 사용되어 왔다.

레티모픽이라는 용어는 1990년 [10]Lex Akers에 의해 컨퍼런스 논문에 처음 사용되었습니다.이 용어는 스탠포드 공대 Kwabena Bohen 교수에 의해 널리 사용되었으며, 이후 다양한 이벤트 중심 감지 [11]전략에 적용되었습니다.이 단어는 뇌가 정보를 처리하는 방식을 복제하도록 설계된 하드웨어 요소(프로세서 등)에 적용되는 뉴로모픽과 유사합니다.

동작 원리

저항기와 직렬로 감광 캐패시터 플레이트의 전하 그림.t시간0 전에는 캐패시터가 어두운 상태이며 플레이트상의 전하가 C에 의해dark 결정된다.시간 tµt에서0 캐패시터는 조명되고 캐패시턴스는 C로light 변화하며, 그 결과 플레이트가 수용할 수 있는 전하가 변화한다.그러면 과도한 전하가 저항기 R에 의해 결정된 기간에 걸쳐 플레이트의 온/오프에 흐릅니다.

유사한 반응을 보이는 몇 가지 레티모픽 센서 설계가 있습니다.첫 번째 설계에서는 차동 증폭기를 사용하여 기존 센서(예: 포토 트랜지스터)의 입력 신호를 필터링된 [6]출력 버전과 비교함으로써 입력이 일정할 경우 점진적인 붕괴를 초래했다.1980년대 이후 이 센서는 훨씬 더 복잡하고 견고한 [1]회로로 발전해 왔습니다.

레티모픽 센서의 보다 콤팩트한 디자인은 [12]감광 캐패시터와 직렬 저항기로 구성되어 있습니다.이러한 변형 센서의 출력 인 V t\ V_은 저항기 전체에서 전압 강하로 정의됩니다.감광 캐패시터는 입사광 강도의 함수인 캐패시턴스를 갖도록 설계되었습니다.이 RC 회로에 n {이 인가되면 수동 하이패스 필터로 작동하며 모든 전압이 캐패시터 전체에서 떨어집니다(: t 0{} =충분한 시간이 지나면 캐패시터의 플레이트는 각 플레이트에서 Q ± a ( n- t) { Q = \ C_ 완전히 됩니다. 서 C .지속적인 조명 하에서 V { V_}=이므로 Q ± r { Q=\ C_으로 단순화할 수 있습니다.

그런 다음 캐패시터에 빛이 인가되면 캐패시턴스가 새로운 l t{로 변경됩니다.따라서 플레이트가 수용할 수 있는 전하가 Q ± t ( n- t) { Q = \ C_로 변경되어 각 플레이트에 잉여/부족이 남습니다.과도한 전하가 강제로 플레이트를 떠나 접지 또는 입력 전압 단자로 흐릅니다.전하 흐름 속도는 R R의 저항과 캐패시터의 캐패시턴스에 의해 결정됩니다.이 충전 흐름은 저항기 전체에서 0이 아닌 전압이 강하되어 이 아닌 V t { style 이(가) 됩니다. 충전 흐름이 중지되면 은 다시 캐패시터 전체에서 모든 전압이 강하되고 t 0 {} }이(가) 됩니다.

왼쪽: 감광 콘덴서의 단면도 개략도.중심: 감광 캐패시터를 상단에 배치한 레티모픽 센서의 회로도.우측: 일정한 조명 적용에 대한 레티모픽 센서의 과도 응답 예상.

콘덴서가 조명 하에서 캐패시턴스를 변경하려면 플레이트 간 [13]절연체의 유전율 또는 콘덴서의 유효 치수가 조도에 의존해야 합니다.유효 치수는 플레이트 사이에 절연체반도체로 구성된 2층 재료를 사용하여 변경할 수 있습니다.적절한 조명 조건 하에서 반도체는 빛에 노출되면 전도성을 증가시켜 캐패시터의 플레이트를 서로 가깝게 이동하는 프로세스를 에뮬레이트하여 캐패시턴스를 증가시킵니다.이를 위해서는 반도체에는 어두운 곳에서 낮은 전기전도율이 있어야 하며 조명 하에서 전하를 발생시킬 수 있는 적절한 밴드 갭이 있어야 한다.또한 장치는 투명 플레이트(예: 투명 전도성 산화물 사용)를 통해 반도체에 광학적으로 접근할 수 있어야 합니다.

적용들

기존 카메라는 작업과 관련이 있는지 여부에 관계없이 이미지의 모든 부분을 캡처합니다.모든 픽셀이 측정되기 때문에 기존 이미지 센서는 상대적으로 낮은 프레임 속도(일반적으로 초당 30~240 프레임)에서만 시야를 샘플링할 수 있습니다.동영상에 사용되는 프로페셔널 고속 카메라에서도, 풀 해상도의 화상에 대해서는, 프레임 레이트가 초당 수10, 수천 프레임으로 제한됩니다.이 제한은 고속 이동 물체를 식별할 때 성능 병목 현상을 나타낼 수 있습니다.이는 특히 자율 주행 차량과 같이 이동의 신속한 식별이 중요한 애플리케이션에서 중요하다.

반면에, 망상 센서는 설계에 의해 움직임을 식별한다.즉, 프레임환율은 설정되어 있지 않고 이벤트 구동이며 필요한 경우에만 응답합니다.이러한 이유로, 레티모픽 센서는 기존의 실시간 영상 [4]분석 전략보다 훨씬 더 빠르게 움직이는 물체를 식별할 수 있기를 희망합니다.따라서 망상 센서는 자율 차량,[14][15] 로봇 [16]공학 [17]및 신경형 공학 분야에서 응용될 것으로 기대된다.

이론.

망상 센서 동작은 단순한 RC 회로와 유사한 기술을 사용하여 정량화할 수 있으며 유일한 차이점은 망상 [18]센서에서의 시간 함수로서 정전용량이 일정하지 않다는 것이다.입력전압이 n{ V _ { } 로 되고 저항기 전체에서 전압이 V o t { V}로 정의되며 캐패시터 전체에서 전압이 강하된 Kirchhoff의 전압법칙을 사용하여 다음과 같이 나타낼 수 있습니다.

저항을 통과하는 전류를 I I로 정의하면 옴의 법칙을 사용하여 다음을 기록할 수 있습니다.

전류의 정의에서 아래 플레이트에서 흐르는 전하의 관점에서 Q(\ Q과 같이 쓸 수 있습니다.

서 tt는 시간입니다.캐패시터 플레이트의 전하는 캐패시턴스 C와 캐패시터 전체의 전압 (\C})의 곱으로 정의됩니다.따라서 다음과 같이 말할 수 있습니다.

변형 센서의 캐패시턴스는 시간의 이므로C {\ C 도함수에서 상수로 제거할 수 없습니다.곱셈 규칙을 사용하여 다음과 같은 형상 센서 응답의 일반 방정식을 얻을 수 있습니다.

또는 출력 전압의 관점에서:

강도 변화에 대한 반응

위의 방정식은 C t 형태에 유효하지만, 광학 자극의 입력 형태를 알지 못하면 분석적으로 해결할 수 없습니다.광학 자극의 가장 단순한 형태는 t t({ t에서 유한 밀도 P({ 가는 단계 함수이다.레티모픽 센서의 실제 적용은 이러한 이벤트로 정확하게 설명될 것 같지 않지만, 레티모픽 센서의 성능을 이해하고 벤치마킹할 수 있는 유용한 방법이다.특히 조명을 켠 의 V t\ \ V _ {out }의 최대 높이에 주로 관심이 있습니다.

이 경우 캐패시턴스는 다음과 같이 설명할 수 있습니다.

조명 아래에서 그 용량 P{P\displaystyle}에. 반도체는 어떤 사건 광 출력 밀도에를 바로 멱함수 의존도를 증가가 전도도, G{G\displaystyle},:G∝ P({\displaystyle G\propto P^{\gamma}},γ{\displaystyle \gamma}은 dimensio known[19]이 달려 있다.nless 지수G G 전하 밀도에 선형 비례하고 정전용량은 특정 전압의 플레이트 상의 전하와 선형 비례하므로 망상 센서의 정전용량도 P P에 의존합니다.따라서 스텝 함수에 대한 응답 시간의 함수로서의 캐패시턴스는 다음과 같이 쓸 수 있습니다.

0 _ 캐패시턴스 프리팩터입니다. 함수의 경우 V의 차분 방정식으로 다시 쓸 수 있습니다

여기서 C{ style \_ { } 、 C { style \ C} 、 δ C { \ C {\ where,,, where where where where as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as as where where where where C CC})는 조명이 켜진 직후 캐패시터 및 캐패시턴스에서 각각 전압 강하로 정의됩니다., V V )의 약자이며 C 0의 약자이며, C({는 센서가 오랫동안 어두운 곳에 유지되었다고 가정합니다. V CC})는 다음과 같이 쓸 수 있습니다.

마찬가지로 C C 변경은 다음과 같이 기술할 수 있습니다.

n\ _ { }의 차분 방정식에 대입하면 다음과 같습니다.

상단:광도가 0에서P({P 변경되었을 때 반응하는 망상 의 과도 응답( V t { 그림 하단:실험적인 망상 센서 데이터에서 망상 유형상 를 추출하는 방법.x축의1/ 1 대하여 의 V m })의 비율을 그린 후 직선으로 맞추면 구배는 1/ 1이 된다

이것을 곱하면:

조명이 매우 빨리 켜지는 것으로 가정하기 때문에 약 t 0을 얻을 수 있습니다.그 결과 다음과 같이 됩니다.

C + t{ { V_{ } = 를 사용하여 출력 전압으로 기록할 수 있습니다.

여기서 피크 높이를 V x t( {max}=로 정의했습니다. 이는 조명이 켜진 직후에 피크가 발생하기 때문입니다.

망상 수치인(\[18]암중에서의 망상 센서의 망상 프리팩터와 망상 센서의 캐패시턴스의 비율로 정의됩니다.

이 파라미터를 사용하면 피크 높이 대 입력 전압의 역비를 다음과 같이 기록할 수 있습니다.

γ{\displaystyle \gamma}의 값은 재결합의 semiconductor,[20]은 자연만 band-to-band 재결합하며, 전자와 홀의 전하 밀도가 같다면 γ)0.5{\displaystyle \gamma =0.5}. 그러한 경우 시스템이 abo기 위해 대략 true[21]다음의 간소화 위해 달려 있다.equatveion an 만들기:

이 방정식은 실험 데이터로부터 망상적 가치를 평가하기 위한 간단한 방법을 제공합니다.이 작업은 광도가 에서P({ P로 변화한 것에 따라 망상 센서의 높이인 m {max를) 측정하여 할 수 있습니다 P {\ P V {/ V a {\} A.P / ({ { - / } )의 n은 1/ ( \ 1/ \ 의 구배를 갖는 직선을 생성해야 합니다.이 에서는 V x ( \ V_})는 V ( \ 에 선형 한다고 가정합니다.

「 」를 참조해 주세요.

레퍼런스

  1. ^ a b Posch, Christoph; Serrano-Gotarredona, Teresa; Linares-Barranco, Bernabe; Delbruck, Tobi (2014). "Retinomorphic Event-Based Vision Sensors: Bioinspired Cameras With Spiking Output". Proceedings of the IEEE. 102 (10): 1470–1484. doi:10.1109/JPROC.2014.2346153. hdl:11441/102353. ISSN 1558-2256. S2CID 11513955.
  2. ^ Mahowald, Misha A.; Mead, Carver (1991). "The Silicon Retina". Scientific American. 264 (5): 76–82. doi:10.1038/scientificamerican0591-76. PMID 2052936. Retrieved 2021-12-28.
  3. ^ Gilder, George F. (2005). The Silicon Eye. W. W. Norton & Company. ISBN 978-0-393-05763-8.
  4. ^ a b Hambling, David. "AI vision could be improved with sensors that mimic human eyes". New Scientist. Retrieved 2021-10-28.
  5. ^ "An eye for an AI: Optic device mimics human retina". BBC Science Focus Magazine. Retrieved 2021-10-28.
  6. ^ a b Delbrück, T.; Mead, C. A. (1989), Touretzky, D. S. (ed.), An Electronic Photoreceptor Sensitive to Small Changes in Intensity, vol. 1, San Mateo, CA: Morgan Kaufmann Publishers, pp. 720–727, ISBN 978-1-55860-015-7, retrieved 2021-12-23
  7. ^ Mead, Carver A.; Mahowald, M. A. (1988-01-01). "A silicon model of early visual processing". Neural Networks. 1 (1): 91–97. doi:10.1016/0893-6080(88)90024-X. ISSN 0893-6080.
  8. ^ Adrian, E. D.; Matthews, Rachel (1927). "The action of light on the eye". The Journal of Physiology. 63 (4): 378–414. doi:10.1113/jphysiol.1927.sp002410. ISSN 1469-7793. PMC 1514941. PMID 16993896.
  9. ^ Delbruck, T. (1993). "Silicon retina with correlation-based, velocity-tuned pixels". IEEE Transactions on Neural Networks. 4 (3): 529–541. doi:10.1109/72.217194. ISSN 1941-0093. PMID 18267755.
  10. ^ Rao, A.; Akers, L.A. (1990). "A retinomorphic VLSI smart sensor for invariant geometric object recognition". 1990 IJCNN International Joint Conference on Neural Networks: 949–954 vol.2. doi:10.1109/IJCNN.1990.137961.
  11. ^ Boahen, K. (1996). "Retinomorphic vision systems". Proceedings of Fifth International Conference on Microelectronics for Neural Networks: 2–14. doi:10.1109/MNNFS.1996.493766. ISBN 0-8186-7373-7. S2CID 62609792.
  12. ^ Trujillo Herrera, Cinthya; Labram, John G. (2020-12-07). "A perovskite retinomorphic sensor". Applied Physics Letters. 117 (23): 233501. doi:10.1063/5.0030097. ISSN 0003-6951. S2CID 230546095.
  13. ^ Dillman, Norman (1965). "Photodielectric effect in semiconductors". PhD Thesis.
  14. ^ IOM3. "Optical sensor mimics human eye for self-driving cars". www.iom3.org. Retrieved 2021-12-29.
  15. ^ "Simple Eyelike Sensors Could Make AI Systems More Efficient". Inside Science. Retrieved 2021-12-29.
  16. ^ "Bigger boost in robot's field of view". ZME Science. 2021-01-05. Retrieved 2021-12-29.
  17. ^ "Perovskite sensor sees more like the human eye". Physics World. 2021-01-18. Retrieved 2021-12-29.
  18. ^ a b Trujillo Herrera, Cinthya; Labram, John G (2021-09-16). "Quantifying the performance of perovskite retinomorphic sensors". Journal of Physics D: Applied Physics. 54 (47): 475110. doi:10.1088/1361-6463/ac1d10. ISSN 0022-3727. S2CID 237541793.
  19. ^ "Photoelectronic Properties of Semiconductors Materials science". Cambridge University Press. Retrieved 2021-12-28.
  20. ^ Balberg, I. (1994-01-15). "The two carriers' mobility‐lifetime products and their light intensity dependencies in hydrogenated amorphous silicon". Journal of Applied Physics. 75 (2): 914–923. doi:10.1063/1.356447. ISSN 0021-8979.
  21. ^ Levine, Igal; Gupta, Satyajit; Brenner, Thomas M.; Azulay, Doron; Millo, Oded; Hodes, Gary; Cahen, David; Balberg, Isaac (2016-12-15). "Mobility–Lifetime Products in MAPbI3 Films". The Journal of Physical Chemistry Letters. 7 (24): 5219–5226. doi:10.1021/acs.jpclett.6b02287. PMID 27973905.