2024/03 45

Java + Kotlin 프로젝트 QueryDSL QFile을 찾지 못하는 이슈(소스 세트 구성 오류)

도입 최근 내가 스타트업에서 하고 있는 프로젝트는 기존에 Php 라라벨로 작성되었다가 Java Spring으로 넘어와 지금은 Kotlin+Spring으로 짜여져있다. 이미 자바로 중요한 비지니스 로직이 짜여져있다보니 한 번에 모든 코드를 Kotlin으로 마이그레이션 하는 것은 비용적인 면에서 좋지 않기 때문에, 도메인 단위로 쪼개어서 필요하다면 마이그레이션을 진행하고 있는 상황이었다. 다행이도 Java와 Kotlin은 같은 JVM언어로 서로 호환이 매우 잘 되는 편이지만(물론, 아직 경험이 그다지 많지 않아서 확실하진 않지만 대체로 그런 것 같다.) 외부 오픈소스 프로젝트를 사용하게 된다면 가끔 언어가 다르다는 이유로 Build할 때 예상하지 못한 문제를 겪기도 한다. 비교적 최근에 겪었던 문제인데, 만..

함께 자라기와 나의 생각

헬로 스타트업 다음으로 CTO님과 인턴 넷이 함께 읽은 책은 "함께 자라기"라는 책이다. 따로 알고 있었던 책은 아닌데, 소프트웨어 엔지니어 사이에서 꽤 유명한 책이라고 해서 얼핏 들어봤던 것 같은 기억은 난다. 소프트웨어 개발 문화에 대한 이야기가 많았다. 이번 글에서는 책의 줄거리보다는, 세미나에서 나왔던 이야기들과 그에 관련된 내 생각에 대해서 정리해보는 시간을 가지는 것이 목표다. 소포트웨어의 본질은 곧 문화다. Sendy라는 회사에 가면 CTO는 Technical한 것(Kotlin, Spring, NextJS같은 것)들을 가르쳐주는 것이 메인 역할이 아니다. 곧 문화를 알려주고 내가 어떤 난간에 봉착했을 때 그것을 이겨내는 방법, 새로운 기술을 만났을 때 더 효율적으로, 잘 대처하는 방법들과 같..

스타트업 인턴 2024.03.28

Kotlin+Spring Kinesis 비동기 처리 EFO(Coroutine)

요구사항 이번 게시물의 배경이 되는 Context를 설명하도록 하겠다. Kinesis로 모바일 유저들에 위치/속도 등 여러가지 데이터가 실시간으로 1명당 10초에 1번 꼴로 수집되는 상황이다. 약 10000명 이상의 유저가 있으며 스트림 데이터로서 관리하여야 한다. Kinesis + Lambda를 통해서 비동기적으로 데이터가 들어올 때마다 API Gateway를 거쳐서 websocket으로 전송되던 구조에서, Spring 백엔드 서버로 Kinesis에 수집되는 데이터를 비동기적으로 수집하고 이를 또다시 비동기적으로 구독한 Client에게 실시간으로 데이터를 전송하여야 하는 상황이다. 도입 이번 게시물은 Kotlin언어 + Spring 프레임워크에서 Amazon Kinesis에서 코틀린의 코루틴과 EFO(..

Backend 2024.03.20

동시성 문제 - RedisTemplate

Redis Template을 활용하여 동시성 문제를 해결한다. redistemplate에 있는 락을 활용해서 문제를 해결한다. 락을 건다라는 표현이라기 보다, orderId로 활용중인 자원을 redis에 저장해서 관리한다. 처음에는 Redis에서 별도로 Lock에 관련된 기능을 제공하는 줄 알았는데, 그건 아니었다. Redis는 key-value로 이루어진 딕셔너리 구조이기 때문에 이 딕셔너리에 일종의 접근/변경하면 안되는, 즉 lock이 걸린 것처럼 동작해야하는 공유자원(어떤 트랜잭션이 동작하고 있는 공유자원)의 값들(그 공유자원을 특정할 수 있는 값)을 lock이름 - 해당 공유자원의 키 로 저장해두고 동시성 문제를 유발할 수 있는 method에서 Redis 내에 현재 그 키값이 존재한다면(즉, 키 ..

java.io.StreamCorruptedException: invalid stream header: 30313031 (공간 데이터 처리)

역직렬화 문제인가?? 얼마 전에 처음보는 에러가 발생했다!! 그리고 이번 에러는 구글에서 검색하면 사람들이 꽤나 많이 겪었음에도 불구하고 이에 대해서 정리해놓은 게시물 또는 답변을 찾아보지 못해서 다른사람들에게 도움이 되고자하는 마음으로 남겨본당 :D java.io.StreamCorruptedException: invalid stream header: 30313031 at java.base/java.io.ObjectInputStream.readStreamHeader(ObjectInputStream.java:958) ~[na:na]근데 분명히 hibernat나 querydsl 설정도 잘못된게 없었던 것이닷... 그래서 가장 최근에 나랑 비슷한 문제를 겪었던 빅터한테 질문했는데 의존성 두개만 추가하면 해결됐..

multi-thread 에서 두 가지 task를 번갈아가도록

공유 객체 여러 개의 스레드가 동일한 객체를 참조 및 공유하고 있을때, 해당 객체를 공유객체 공유 변수 사용하기 💡 ReentrantLock이나 Synchronized키워드 없이 번갈아가려고 하면 ”공유변수” 를 사용하면 된다. Busy Waiting이나 Spinlock과 같은 형태를 포함할 수 있기 때문에 CPU 자원을 비효율적으로 사용할 수도 있다. 또한 코드의 복잡성을 증대시키고, 잘못할 경우 데드락(Deadlock)이나 라이브락(Livelock)과 같은 문제를 일으킬 수 있다. public class WorkObject { private static int counter = 0; private volatile int turn = 1; public void methodA() { for (int i ..

Language Study/Java 2024.03.18

스타트업 한 달치 밀린 회고

그간 기술 블로그 관리를 많이 못했다. 단순히 하루하루 돌아가는 코드를 만들기 위해서 노력했던 것 같다.스프링 공부를 실질적으로 많이 해보지 않은 채로, (스프링 기초 MVC패턴공부만 하고 갔다) 정말 DTO와 Entity의 구분조차 못한 채로 시작된 인턴이, 이제는 간단한 도메인 분석, 도메인 설계, 프록시에 관한 것들도 이해하기 시작했다.이번 글은 정말 대략적인 회고, 했던 것들에 대한 정말 간단한 기록들이다.기록하지 않으면 휘발된다. 정말 그간 남들에 비해 뒤쳐져있다는 생각으로 달리기만 해서 기록할 시간이 많이 없었다. 그렇게 달리던 과정속에서 기록을 했으면 좋았을 텐데 조금은 아쉽지만, 지금이라도 흐르는 물을 담아보자는 마음으로 써본다.1. 비용계산기 코딩처음 들어가고 1~2주간 회사에 존재하는 ..

스타트업 인턴 2024.03.18

"헬로 스타트업" 세미나

우리는 매주 세미나를 한다. Tech Start-up이란 무엇인가부터 테크 스타트업에서 일한다는 것은 무엇인지, 혁신이란 무엇이며 혁신기업이란 어떤 것인지. 그리고 비지니스적인 것도 배우면서 함께 기술 스택들의 비지니스적인 역할들에 관한 생각을 책을 읽으며 CTO 김태훈 박사님(라이언)과 대화를 나눈다. 스타트업에서의 3개월은 대기업 1년에 비해 더 많은 것을 배운다. 비지니스적으로도 스타트업과 중/소기업,대기업은 정말 상충되는 부분이 많다. 1. 스타트업이란 무엇인가? 라이언이 나누어준 서적에 가장 앞 chapter는, 스타트업이란 것이다. 특히 "tech" 스타트업은 무엇인가? tech스타트업이라하면 가볍게 "음~ 기술적인걸 쓰는 작은 회사겠죠~"라는 생각 무심결에 많이 했던 것 같다. 그러나 단순히..

스타트업 인턴 2024.03.18

[함께자라기] 세미나 1회차

소프트웨어의 본질은 문화라고 생각하신다. 만들 사람은? 곧 문화에서 나온다. 이미 오픈소스… 세미나로 테크니컬한 것들은 알 수 있다. 함께자라기 → 소프트웨어는 “문화”다! 혁신/에자일은 실리콘벨리에서 디폴트다!! 의도적수련 단축키로만 개발 해보자! 새롭게 배우고 싶은 내용? → 이건 무조건 봐야해! 의도적 수련만이 당신이 학습하고 발전할 수 있는 길이다. → 네가 개선이 안된다. 100년 택시를 몰더라도, 길을 잘찾는것 뿐. 레이싱을 잘하는게 아니다. 의도적 수련만이 성장할 수 있다. 의도적 수련의 조건: 내가 무엇을 향상시킬지, 반복적인 훈련&피드백, 정량성이 높아야한다. 사람들은 무언갈 배울 때 가르쳐줄 사람이나 그런 사람들을 찾지만 사실 우리의 능력중에 그렇게 구해진 것은 아무것도 없다. 영화를 ..

스타트업 인턴 2024.03.18

AWS Kinesis - data stream

Kinesis란 실시간으로 데이터 스트림(data stream)을 수집,처리,분석해주는 서비스 📎스트리밍 데이터 데이터 스트림을 수집할 수 있고 저장할 수 있다. 데이터를 실시간 처리해 S3와 같은 스토리지에 저장해서 다양한 일괄 처리를 수행한다. Kinesis data stream은 set of shards다! 샤드의 수를 조절하여 스트림을 얼마나 받을지 조절할 수 있다. (DynamoDB) 리샤딩(Resharding) 모든 data record에는 sequence가 존재한다. Capacity Mode on-demand mode: 자동으로 샤드의 개수를 관리한다. provisioned mode: 필요햔 샤드의 개수를 사용자가 명시해야한다. Kinesis & Lambda Lambda Kinesis와 La..

Backend/Infra 2024.03.18