본 발명은 연산기능을 가진 제어서버(10) 및 점군 데이터 정보가 저장된 데이터베이스(20)가 네트워크로 연결되고, 전이학습을 이용하여 3차원 모델링을 형성하는 시스템으로서, 제어서버(10)는 이동체(110)에 장착된 점군 데이터 취득수단(120)을 통해 시설물에 대한 점군 데이터를 수집하는 데이터 취득부(100); 상기 취득된 점군 데이터를 정합하는 데이터 정합부(200); 및 상기 정합된 데이터로 3차원 의미적 분할 모델을 선정하는 모델 선정부(310) 및 전이학습을 수행하는 전이학습 수행부(320)를 갖는 모델 학습부(300)를 포함하는 것을 특징으로 하는 이동체를 이용한 점군 데이터 수집 및 딥러닝 기반 3차원 모델링 형성 시스템이다.