Tuy vậy, công nghệ nhận diện khuôn mặt không phải là không có điểm yếu. Bản thân công nghệ này không ổn định, hệ thống dễ bị lỗi, do đó nhiều kết quả tìm ra bị sai lệch và không đúng với yêu cầu. 

Theo TheGuardian, việc nhận diện khuôn mặt sẽ xâm phạm tới quyền riêng tư của người dùng một khi công nghệ này được tích hợp với hệ thống camera công cộng. 

Lúc này, giám sát viên có thể lựa chọn bất kỳ một ai đó trên đường phố, hệ thống sẽ nhận diện và trả về kết quả với toàn bộ thông tin về tên tuổi, quê quán, quốc tịch hay hồ sơ lý lịch. Nhìn chung, công nghệ nhận diện khuôn mặt dễ bị biến thành công nghệ giám sát chung cho mọi cư dân trong khi không hề được sự đồng ý của họ. 

Trung Quốc chính là quốc gia đầu tiên trên thế giới triển khai công nghệ nhận diện khuôn mặt để giám sát cư dân một cách đại trà. Điều đó dấy lên một làn sóng phản đối, bởi nhiều người cho rằng công nghệ nhận diện khuôn mặt cũng đáng sợ như vũ khí hạt nhân.

Theo TheGuardian, các chính phủ sẽ có 2 cách tiếp cận để kiểm soát công nghệ nhận diện này. Ở cách thứ nhất, chúng ta có thể coi đây như một loại vũ khí và cấm sử dụng nó vào mục đích dân sự. 

Với phương án thứ hai, cách tiếp cận này coi công nghệ nhận diện khuôn mặt giống như một loại đồng vị phóng xạ. Lúc này, các lợi thế của công nghệ nhận diện khuôn mặt sẽ được nhà quản lý xem xét và điều chỉnh một cách thích hợp.