본 발명은 차량용 블랙박스 영상을 이용하여 도로 크랙을 검출하는 딥러닝 기반의 도로 크랙 검출 장치 및 도로 크랙 검출 방법에 관한 것으로, 본 발명의 실시예에 따른 도로 크랙 검출 장치는, 차량용 블랙박스에 의해 촬영되며 위치 정보를 포함하는 복수개의 영상 데이터를 수집하는 데이터 수집부; 상기 수집된 복수개의 영상 데이터에 포함된 위치 정보를 이용하여 산출된 차량의 이동 거리 정보를 기반으로 복수개의 기준 이미지를 추출하는 이미지 추출부; 상기 이미지 추출부에서 추출된 기준 이미지를 일정 크기의 픽셀 단위로 선택하여 도로 크랙, 차선 및 손상되지 않은 도로 각각에 대한 클래스를 분류하고, 분류된 클래스 각각에 대한 패치 이미지를 생성하는 패치 이미지 생성부; 상기 패치 이미지 생성부로부터 생성된 각각의 패치 이미지를 신경망 모델을 이용하여 도로 크랙을 추출하도록 훈련시키는 모델 훈련부; 및, 임의의 차량용 블랙박스로부터 위치 정보를 포함하는 복수개의 영상 데이터가 입력되면, 입력된 복수개의 영상 데이터에 포함된 위치 정보를 이용하여 산출된 차량의 이동 거리 정보를 기반으로 복수개의 기준 프레임을 추출하고, 추출된 복수개의 기준 프레임에서 도로 표면에 대한 이미지를 추출하고, 추출된 이미지에 상기 모델 훈련부로부터 훈련된 신경망 모델을 적용하여 도로 크랙을 검출하는 크랙 검출부;를 포함한다.