فناوری نیروی دفاعی اسرائیل از هوش مصنوعی برای دیدبانی و تعریف اشیا و تصاویر دیده‌شده در فیلم‌های ضبط شده استفاده می‌کند.

یک افسر شاخه‌ی تحقیق و توسعه ابراز داشت سامانه‌ی تازه قادر به ممانعت از دیدبانی انسانی یافته‌های دوربین‌های امنیتی است و می‌تواند موارد خطر ضبط شده در فیلم‌ها را تشخیص دهد .

شاخه‌ی تحقیق و توسعه‌ی نیروی دفاعی اسرائیل موفق به یافتن راهی برای تبدیل اتوماتیک تصویر به متن شده است، شیوه‌ای که ممکن است روزی در فیلم‌های دوربین‌های امنیتی نیز بکار رود.

این فناوری، که بر اساس هوش مصنوعی تنظیم شده، قادر به خواندن و درک تصاویر ویدئویی و ترجمه‌ی آن به کلمه است. می‌تواند تصاویری که مشاهده می‌کند را با اطلاعات مربوط تقابل دهد و چشم‌انداز وسیع‌تری برای تعریف تصاویر بیابد، و در صورت مشاهده‌ی هر موردی که نیاز به توجه ویژه دارد، می‌تواند هشدارهای فوری ارسال کند.

سرگرد صفی کوهن، ۳۳ ساله، که فرمانده‌ شاخه‌ی آمار عملیاتی و پژوهش نیروی دفاعی است، به تایمز اسرائیل گفت «سربازانی که در مرزها نگهبانی می‌دهند و یا هر عملیات دیگری را با استفاده از تصاویر صفحه‌ی کامپیوتری صورت می‌دهند، بیشتر اوقات قادرند دقیقا ببینند که در محل چه اتفاقی دارد می‌افتد».

وی گفت اما دیدبان‌های انسانی ناظر بر ویدئوها در هر مقطع زمانی تنها مقدار محدودی اطلاعات می‌توانند به دست آورند در حالیکه که این نرم‌افزار، می‌تواند با مشاهده‌ی همزمان شمار زیادی از تصاویر، آنها را با داده‌ّهای دیگر و مربوط، مقابله کند و تشخیص دهد.

هنوز معلوم نیست این فناوری که هنوز در مراحل اولیه است، ممکن است از سوی ارتش توسعه یابد و تولید شود یا نه. کوهن گفت «هنوز معلوم نیست». «اما ما در حال تکمیل هرچه بیشتر این فناوری هستیم».

این نرم‌افزار دو گونه‌ی هوش مصنوعی را ترکیب می‌کند:‌ شبکه‌ی عصبی کان‌ولوشین، و شبکه‌های عصبی راجعه.

کوهن گفت «ما ویدئوها و تصاویر را [به شبکه‌ی عصبی کان‌ولوشین] دادیم و به سامانه آموزش دادیم که چطور آنها را به درستی تشخیص دهد». «سپس ما این اشیا را برداشتیم و به شبکه‌های عصبی راجعه آموختیم چگونه رشته‌ای از اشیا را تشخیص داده و آنچه می‌بیند را تبدیل به کلمه کند. شبیه به مغز کودک نوزاد، ما به این زمینه‌ی خالی میلیون‌ها تصویر ویدئویی منتقل کردیم. سپس، مانند مغز، نرم‌افزار این اطلاعات را تحلیل می‌کند و تعریفی به دست می‌دهد».

کوهن گفت برای مثال، هنگامی که تصویر جمعیتی از مردم را می‌بیند که در حال دویدن‌اند و به سینه‌هاشان شماره‌ای سنجاق شده، بخش تبدیل به کلمه، این تصویر را تبدیل می‌کند به شرکت‌کنندگان مسابقه‌ی دو یا ماراتون.

وی همچنین گفت «ما همچنین سعی کردیم نرم‌افزار را فریب دهیم و به آن تصویری دادیم از سگی نشسته روی دوچرخه». نرم‌افزار آن را به درستی تشخیص داد».

وی گفت این نرم‌افزار هنوز کامل نیست و نارسایی‌هایی دارد. «اطلاعاتی که در این نرم‌افزار تعبیه شده بر اساس تصاویر و زبان غیرنظامی بوده است. هنوز به اندازه‌ی کافی اطلاعات نظامی در آن تعبیه نشده است و برای همین گاهی بعضی موارد را درست نمی‌فهمد. داریم سعی می‌کنیم این مورد را تکمیل کنیم». همچنین، برای مثال، این سامانه هنوز نمی‌تواند سگ را گرگ تشخیص دهد.

تیم کوهن از ۱۰ سرباز از برنامه‌ی معتبر تالپیوت نیروی دفاعی تشکیل شده است که دانش‌جویان را برای مشاغل کلیدی فناوری در واحدهای مختلف ارتش آموزش می‌دهد. برای تولید این فناوری، به مدت سه ماه یک سرباز تمام‌وقت و یک سرباز پاره‌وقت کار کردند.

وی گفت «ما به محل می‌رویم و می‌بینیم چه چیزهایی مورد نیاز است. سپس فهرستی از پروژه‌ها تنظیم می‌کنیم و اقدام به توسعه‌ی فناوری مربوط می‌کنیم. بعضی پروژه‌های موفق‌اند و بعضی دیگر نه. ما بر پروژه‌های هزینه‌ی‌بالا نیز کار می‌کنیم».