[수군수군_데이터엔지니어_밋업_1회]

간단 요약

• 일시: 2023년 1월 12일 목요일 오후 7시 ~ 오후 9시 30분
• 장소: 당근마켓 오피스
• 행사 일정
  • 19:00 ~ 19:10: 밋업 소개
  • 19:10 ~ 19:30: ELT 기반 데이터 로드 도구 Airbyte 살펴보기, 전시흠 (라인)
  • 19:35 ~ 19:55: 데이터 파이프라인 테스트 환경 구축하기, 그랩 (쏘카)
  • 20:00 ~ 20:20: 당근마켓과 함께 성장하며 데이터 신뢰성 지켜내기, 김범수(당근마켓 데이터 가치화 팀)
  • 20:20 ~ 21:30: 피자, 음료와 함께하는 자유로운 네트워킹
• 관련 링크

 

후기

Airbyte 설명

마지막 당근마켓 데이터 팀 설명

[행사]

• 해당 행사는 링크드인에서 신청을 받았고 170여명에 달하는 사람들 중 30여명만 추첨으로 선발
• 추첨이 된 사람은 1인당 1만원의 비용을 내고 피자와 함께 밋업 수강 가능
• 정말 운좋게 뽑혀서 시야를 넓힐 수 있는 기회를 얻었다고 생각됨
• 피자가 부족해서 더 시켜주신 당근마켓 분들께 무한한 감사

[내용]

• 여러 기업의 데이터 파이프라인 구조와 데이터를 보는 관점을 공유
• 라인은 특정 기업의 데이터 흐름을 소개하기 보다는 airbyte라는 신기술에 대해 간략하게 소개하는 자리였는데, airflow에 비해 정말 많이 추상화된 기능이라 한번쯤은 써보고 싶다라는 생각이 들 정도로 좋았음
• 쏘카는 확실하게 기술에 대한 리뷰 형식이 강했고, 현업에서 일하는 사람이 아니면 이해하기 어려울 수도 있겠다라는 생각이 들었지만 차량업계에서 데이터를 어떻게 처리하는지에 대해 알 수 있는 기회였음
• 당근마켓은 전체적인 데이터에 대한 흐름과 그 중요성을 되짚는 내용으로 진행, 개인적으로는 일반적인 타 직군의 주니어도 알아들을 수 있는 편한 세션이어서 가장 기억에 많이 남는다.

[개인적인 생각]

• IT업계에서는 커뮤니케이션에 방해가 되는 장벽들을 낮추고, 좀더 자유로운 네트워킹이 가능하도록 신경을 많이 쓴 것이 느껴지며, 현업에서 많이 배워야하겠다라는 생각이 드는 기획이었음
  • 1) 밋업 중간에 피자를 두고 먹으면서 자연스럽게 자기를 소개하고 얘기할 수 있는 기회를 창출
  • 2) 오픈된 공간에서 자유롭게 들을 수 있는 가벼운 분위기를 형성
  • 3) 현업에서 권한이 큰 사람이 직접 돌아다니면서 명함 교환, 대화 참여