CJ ENM, Mnet Plus Data ÆÀ Data Engineer °æ·ÂÁ÷ ä¿ë

CJ ENMÀÌ ±Û·Î¹ú K-POP Ç÷§Æû Mnet PlusÀÇ µ¥ÀÌÅÍ ÀÎÇÁ¶ó¸¦ ´ã´çÇÒ Data Engineer °æ·ÂÁ÷ ä¿ëÀ» ÁøÇàÇÑ´Ù. À̹ø ä¿ëÀº Mnet Plus Data ÆÀ ³» µ¥ÀÌÅÍ ¿£Áö´Ï¾î Æ÷Áö¼ÇÀ¸·Î, º°µµÀÇ Àοø ±Ô¸ð ¾øÀÌ Ãæ¿ø ½Ã ¸¶°¨µÇ´Â ¹æ½ÄÀ¸·Î ¿î¿µµÈ´Ù.

À̹ø¿¡ ÇÕ·ùÇÏ°Ô µÇ´Â Data Engineer´Â Apache Kafka µîÀ» Ȱ¿ëÇÑ ´ë¿ë·® ½Ç½Ã°£/¹èÄ¡ µ¥ÀÌÅÍ ÆÄÀÌÇÁ¶óÀÎ(ETL/ELT) ¼³°è, °³¹ß ¹× ¿î¿µÀ» ´ã´çÇÏ°Ô µÇ¸ç, ´ë±Ô¸ð µ¥ÀÌÅÍ Á¤Á¦, ó¸® ¹× ºÐ»ê µ¥ÀÌÅÍ ÀúÀå¼Ò(Data Lake / Data Warehouse) °ü¸® ¾÷¹«µµ ÇÔ²² ¸Ã°Ô µÈ´Ù. ¶ÇÇÑ µ¥ÀÌÅÍÀÇ ¹«°á¼º º¸Àå ¹× ÆÄÀÌÇÁ¶óÀÎ ¸ð´ÏÅ͸µ ½Ã½ºÅÛ ±¸ÃàÀ» ÅëÇØ ¾ÈÁ¤ÀûÀÎ µ¥ÀÌÅÍ È帧À» À¯ÁöÇÏ´Â ¿ªÇÒÀ» ¼öÇàÇϸç, ºÐ¼®°¡ ¹× ¼­ºñ½º °³¹ßÆÀ°úÀÇ Çù¾÷À» ÅëÇÑ µ¥ÀÌÅÍ ¸¶Æ®(Data Mart) ±¸Ãà ¹× µ¥ÀÌÅÍ Á¢±Ù¼º Çâ»ó¿¡µµ ±â¿©ÇÏ°Ô µÈ´Ù.

Áö¿ø ÀÚ°ÝÀ¸·Î´Â µ¥ÀÌÅÍ ¿£Áö´Ï¾î¸µ °ü·Ã ½Ç¹« °æ·Â 3³â ÀÌ»ó(¶Ç´Â ÀÌ¿¡ ÁØÇÏ´Â ¿ª·®À» º¸À¯ÇϽŠºÐ), Apache Kafka¸¦ Ȱ¿ëÇÑ ½Ç½Ã°£ µ¥ÀÌÅÍ ½ºÆ®¸®¹Ö ÆÄÀÌÇÁ¶óÀÎ ±¸Ãà ¹× ¿î¿µ °æÇè, ´ë±Ô¸ð µ¥ÀÌÅÍ(PB/TB ½ºÄÉÀÏ)¸¦ ¾ÈÁ¤ÀûÀ¸·Î ó¸®, ºÐ»ê, ÀúÀåÇØ º» °æÇè, Java, Scala, Python, Go Áß 1°³ ÀÌ»óÀÇ ¾ð¾î¿¡ ´É¼÷Çϰí Clean Code¸¦ ÁöÇâÇϽô ºÐ, Ŭ¶ó¿ìµå ȯ°æ(AWS, GCP µî)¿¡¼­ ´ë¿ë·® µ¥ÀÌÅÍ ·¹ÀÌÅ©(S3 µî) ±â¹ÝÀÇ ÆÄÀÌÇÁ¶óÀÎÀ» ¿î¿µÇØ º» °æÇè, SQL ¹× RDBMS(Bigquery, Snowflake µî), NoSQL µ¥ÀÌÅͺ£À̽º¿¡ ´ëÇÑ ±íÀº ÀÌÇØ¸¦ °®Ãá ºÐÀ̶ó¸é Áö¿øÇÒ ¼ö ÀÖ´Ù. ¿ì´ë»çÇ×À¸·Î´Â AWS, GCP, Azure µî Ŭ¶ó¿ìµå ȯ°æ ±â¹ÝÀÇ µ¥ÀÌÅÍ ÀÎÇÁ¶ó ±¸Ãà ¹× ºñ¿ë ÃÖÀûÈ­ °æÇèÀÌ ÀÖÀ¸½Å ºÐ, Airflow, Prefect, Dagster µîÀÇ ¿ÀÄɽºÆ®·¹ÀÌ¼Ç ÅøÀ» ÀÌ¿ëÇÑ ¿öÅ©ÇÃ·Î¿ì °ü¸® °æÇèÀÌ ÀÖÀ¸½Å ºÐ, Kubernetes, Docker ±â¹ÝÀÇ ÀÎÇÁ¶ó ¿î¿µ ¹× CI/CD ÆÄÀÌÇÁ¶óÀÎ ±¸Ãà °æÇèÀÌ ÀÖÀ¸½Å ºÐ, Data Lakehouse(Iceberg, Delta Lake, Hudi µî) ¾ÆÅ°ÅØÃ³ µµÀÔ °æÇèÀÌ ÀÖÀ¸½Å ºÐ, ´ë¿ë·® Æ®·¡ÇÈ ¹× ½Ã½ºÅÛ Àå¾Ö ´ëÀÀ, ¼º´É Æ©´×(Troubleshooting) °æÇèÀÌ ¸¹À¸½Å ºÐÀ» ¿ì´ëÇÑ´Ù.

°í¿ëÇüÅ´ Á¤±ÔÁ÷À̸ç, ±Ù¹«Áö´Â ¼­¿ï½Ã ¸¶Æ÷±¸ »ó¾Ïµ¿ CJ ENM¼¾ÅÍ·Î Áö¿ø Á¢¼ö´Â ä¿ë ½Ã ¸¶°¨µÈ´Ù. ÀÚ¼¼ÇÑ ³»¿ëÀº 'CJ ENM'ÀÇ È¨ÆäÀÌÁö¿¡¼­ È®ÀÎÇÒ ¼ö ÀÖ´Ù.