버티의 블로그

지금까지 본 강화학습은 모두 value-based로, value function값을 예측하고, greedy하게 policy를 선택했었다. 이러면 특정 state에 대한 optimal action이 하나로 결정되는 deterministic model을 생성하는데, 이는 가위바위보와 같이 랜덤하게 다양한 선택을 하는 것이 중요한 stochastic한 상황에서는 한계가 있다. 따라서 이젠 policy-based로 시도해보고자 한다. 8장에서 본 value function approximation과 비슷하게, policy-based에서는 policy 자체를 approximation한다. 7장에서는 w라는 파라메터를 사용하는 approximator였다면, 여기서는 θ를 사용한다.이 방식의 장단점은 다음과 같다.빠..

Hybrid-ARQARQ는 통신 과정에서의 오류 검출 및 재전송 메커니즘을 뜻하는데, 수신측에서 에러를 감지하면 송신측으로 NACK를 보고 이때 송신측에서 다시 재전송을 하는 과정이다. 그러나 기존 ARQ는 한 비트만 에러가 발생해도 ARQ를 하기에 latency가 커지고 많은 양의 패킷을 재전송했어야 하므로 전송 효율이 떨어지면서 overhead가 증가했다. 그래서 오류 정정 기능과 ARQ를 합친 HARQ가 탄생했다. 이때 수신자가 이전에 수신한 데이터를 버리지 않고 재사용해서 새로 받은 데이터와 결합하여 decoding하는 방법을 HARQ with Soft Combining이라 하고, 2가지가 존재한다. CC(Chase Combining)송신자가 NACK를 받으면 처음 전송한 데이터 형태 그대로 재전..

Scheduling 스케쥴링은 동일한 셀 내의 여러 유저들한테 한정된 resource를 효율적으로 할당하여 최대한 많은 사람들이 resource를 받게 하는 기술이다. LTE에서는 frequency와 time으로 구성된 2차원 resource를 사용한다. 스케쥴링은 base station 내 스케쥴러가 진행하고 스케쥴링을 진행하는 스케쥴링 알고리즘이 모두 다르다.Max C/I : 가장 C/I가 좋은 단말기한테만 할당하는 방법으로, throughput은 가장 좋지만 형평성이 떨어진다.Round Robin : 모든 단말기가 차례대로 할당받는 방법으로, 형평성이 좋지만 throughput이 떨어진다.Proportional Fair (PF) : 위 두 방식을 적절히 섞은 방법으로 채널 상태와 time durat..

Channel Capacity우선 앞서 계속 SNR이 증가하면 Data Rate가 증가한다 했는데, 이는 아래의 Shannon's Channel Capacity에서 나왔다.여기서 C는 channel capacity(bps), W는 channel bandwidth, S는 Rx Power, N은 Noise Power다. 즉 SNR은 S/N으로 나타낼 수 있는데, 이를 이해하고 다시 식을 보면 Noise가 적어야 SNR 값이 커져 C가 커질것이고, 그래야만 data rate가 증가할 것이다. 그러나 SNR 쪽은 log함수라 뒤로 갈수록 C가 크게 증가하지 않으므로, 높은 대역이 받쳐줘야만 비로소 C가 증가할 수 있다. 이 개념을 다음과 같이 확장할 수 있는데 이를 Channel Capacity with Spa..

Beamforming은 주파수를 빔 모양으로 만들어 신호를 수신 측에 집중시키는 기술이다. 주로 진폭과 위상을 조절하여 특정 방향으로 신호를 집중시키고 다른 방향에서는 신호를 최소화하는 방식으로 동작한다. Multi-Tx-Antenna Beamforming 가장 기본적으로 Multi-Tx-Antenna Beamforming은 단말기 쪽으로 downlink하는 상황에서 송신 측에서 다중 안테나를 사용하여 Beamforming하는 방식이다. 이때 수신 측에서 받는 신호의 세기는 송신 측의 안테나 수에 비례하여 SNR과 Data Rate가 증가한다. Beamforming의 타입은 크게 2가지로 나눌 수 있다.High correlation between Tx antennas : 위상만으로 조정하는 classic..

Multi Antenna Technology는 송신자와 수신자측 중 한 곳 이상이 여러 안테나를 사용하여 신호 처리를 하는 기술인데, 이로 인해 전송의 퀄리티를 높일 수 있다. 이를 MIMO라고 부르기도 한다. MIMO는 좁은 의미로는 Spatial Multiplexing만 칭하고, 넓은 의미로는 Diversity, Beamforming, Spatial Multiplexing을 모두 통틀어 말하는데, 앞으로 이 3가지를 모두 공부해볼 예정이다. Mutual Correlation그 전에 우선 안테나 간의 상호 상관도를 보고 넘어가겠다.안테나 간 거리가 멀어짐 : Correlation 감소안테나 간 거리가 가까워짐 : Correlation 증가여기서 이 Correlation의 값은 기술에 따라 요구치가 다르..