Họ nói rằng một bức tranh đáng giá cả ngàn lời nói, nhưng liệu một ngàn lời nói có đáng giá một bức tranh không? Nhà sản xuất và nhà phát triển Diego Trujillo Pisanty đã tìm cách tìm hiểu bằng quả mâm xôi-được hỗ trợ máy ảnh mù dự án. Thay vì sử dụng một thấu kính để thu ánh sáng để tạo ra một bức ảnh, nó lắng nghe âm thanh và xây dựng một ước tính gần đúng về những gì có thể xảy ra xung quanh nó dựa trên âm thanh được phát hiện.
Thiết bị này hoạt động tương tự như một chiếc máy ảnh thông thường ở chỗ bạn hướng máy ảnh vào thứ bạn muốn chụp và nhấn một nút để tạo ảnh. Tuy nhiên, trong trường hợp này, nó có một chiếc sừng khổng lồ ở phía trước được sử dụng để giúp khuếch đại khả năng thu âm thanh. Người dùng nên hướng chiếc còi này về hướng muốn chụp trước khi nhấn nút. Sau đó, máy ảnh sẽ phân tích cú pháp âm thanh thông qua bộ lọc AI và tạo ra hình ảnh.
Theo Pisanty, anh ấy đã phát triển một mạng thần kinh nhân tạo tùy chỉnh (hoặc ANN) chỉ dành cho dự án này. Anh ấy đã huấn luyện AI bằng các mô hình của riêng mình dựa trên một bộ video được quay quanh Thành phố Mexico.
Mô hình được tạo bằng cách lấy từng khung hình của video và kèm theo đó là giây cuối cùng của âm thanh. Điều này giúp xây dựng sự liên kết giữa âm thanh và video mà hệ thống có thể sử dụng để tạo hình ảnh. Bởi vì nó được đào tạo theo cách này, mọi thứ nó tạo ra đều dựa trên hình ảnh nội thành của Thành phố Mexico.
Đối với dự án này, Pisanty đang sử dụng mô-đun Raspberry Pi 3B. Tuy nhiên, có thể tạo lại nó bằng Raspberry Pi 4. Miễn là Pi có thể xử lý Tensorflow, nó sẽ hoạt động. Máy ảnh này cũng có một màn hình nhỏ đóng vai trò như một loại kính ngắm. Nó cho phép người dùng biết khi hình ảnh đang được xử lý và cung cấp bản xem trước của hình ảnh được tạo. Mọi thứ được đặt bên trong lớp vỏ in 3D tùy chỉnh.
Mô hình AI được sử dụng để đào tạo máy ảnh mù được tạo bằng Python 3. Nó được thiết kế để hoạt động với Tensorflow 2 và chạy trên Raspberry Pi bằng TFLite. Nếu bạn muốn tạo lại dự án Raspberry Pi này hoặc muốn xem kỹ hơn cách nó kết hợp với nhau, hãy xem video do Pisanty chia sẻ trên YouTube và đọc thêm về dự án trên trang web của anh ấy.