가능합니다. 각 카테고리의 마커를 생성할 때 커스텀 오버레이도 같이 생성해주세요.
map 옵션을 적용해서 오버레이를 생성해서 바로 지도에 표시하거나
마커 클릭 이벤트를 등록해서 마커 클릭 시 overlay.setMap(map); API를 호출해서 커스텀 오버레이를 지도에 표시해주세요.
주의하실 점은 커스텀 오버레이 생성 시 content는 문자열이 아닌 HTMLElement로 생성해서 이벤트를 등록해주시고
스코프 유지를 위해 forEach 반복문을 사용하거나
for 반복문 내 변수를 ES6의 let 또는 const로 선언해주세요.
아래 답변 함께 참고해주세요.
https://devtalk.kakao.com/t/topic/103147/2?u=lea.ju