본문 바로가기

분류 전체보기66

펌웨어(Firmware) 임베디드 시스템 개발 업무를 담당하면서 가장 많이 들은 단어가 펌웨어이다. 다만 펌웨어가 무엇인지에 대한 정확한 개념이 정립되어있지 않아 꽤나 고생을 했다. Firmware(펌웨어)는 전자 장비의 HW와 SW를 이어주는 다리 정도로 이해할 수 있다. 따라서 펌웨어는 하드웨어와 소프트웨어의 특성을 동시에 가지며 하드웨어의 논리 회로의 기능을 보완하가너 대신하며 소프트웨어가 구동할 수 있는 환경을 구성한다. 새로운 소프트웨어가 나올 때마다 전용의 하드웨어를 새로 생산할 수 없기에 하드웨어의 제한된 논리회로를 가지고 여러 소프트웨어의 기능을 가능케 하는 펌웨어의 영역은 매우 중요하다. 펌웨어는 기본적으로 하드웨어의 제어와 구동이 가능하며 주로 Flash나 PROM에 저장된다. 기능의 업데이트가 있을 시 이 펌.. 2022. 8. 5.
Stanford CS234 Lecture 3 Lecture 3 Stanford CS234: Reinforcement Learning | Winter 2019 | Lecture 3 recap MDP evaluation of Dynamic Programming Dynamic Programming case where we know exact model (not model free) Initialize $V_0 (s)=0$ for all s for k = 1 until convergence for all $s$ in $S$ $V^\pi_k(s)=r(s,\pi(s)) + \gamma \sum_{s' \in S} P(s'|s,\pi(s))V^\pi_{k-1}(s')$ and we iterate until it converges → $||.. 2022. 8. 5.
Stanford CS234 Lecture2 Stanford CS234: Reinforcement Learning | Winter 2019 | Lecture 2 Given the model of the world Markov Property → stochastic process evolving over time(whether or not I investi stocks, stock market changes) Markov Chain sequence of random states with Markov property no rewards, no actions Let $S$ be set of states ($s \in S$) and $P$ a transition model that specifies $P(s_{t+1}=s'|s_t=s)$ for finit.. 2022. 8. 5.
Stanford CS234 Lecture 1 Stanford CS234: Reinforcement Learning | Winter 2019 | Lecture 1 What is Reinforcement Learning(RL) How an intelligent agent learns to make good sequences of decisions according to repeated interactions with World Key aspects of RL Optimization → goal is to find an optimal way to make decisions! Delayed consequences → decisions now can impact future situations... Exploration→ only get censored d.. 2022. 8. 4.
산업기능요원 훈련소(3주) 후기 2편 _ 6일 ~ 11일차(1주차) 본 글은 2022년 07월 07일부터 07월 28일까지 산업기능요원 보충역 훈련소 후기입니다. 2편은 6일차 ~ 11일차 1주차 훈련까지의 이야기입니다. * 본인은 육군훈련소 29연대 3교육대 11중대 2소대 소속이었습니다. 타 연대는 운영이 다를 수 있습니다. 6일차(07.12 화) 6시 기상, 일어나자마자 체력측정 시작 3km 뜀걸음 29등/201명 아침식사(힘들어서 많이 못먹음) 바로 푸시업, 윗몸일으키기 체력측정(푸시업 62개, 윗몸일으키기 62개) 첫 체력측정이 진짜 중요하다. 무조건 3종목 다 4급 이상 받아두자. 뒤에 적겠지만 여기서 하나라도 5급 이하인 경우 주말마다 추가체력단련 불려나간다... 우리 중대 200명 중 본인 포함 30명 빼고 나머지는 주말마다 욕하면서 강제운동 하러 나갔다;.. 2022. 8. 3.
산업기능요원 훈련소(3주) 후기 1편 _ 입소 준비 ~ 격리기간 본 글은 2022년 07월 07일부터 07월 28일까지 산업기능요원 보충역 훈련소 후기입니다. 1편은 입소 직전 ~ 격리기간(5일차)까지의 이야기입니다. * 본인은 육군훈련소 29연대 3교육대 11중대 2소대 소속이었습니다. 타 연대는 운영이 다를 수 있습니다. 입소 전 보충역은 목요일 입소라서 화요일까지 회사 나가고 수요일은 연차 쓰고 하루 놀고 가기로 했습니다. 대망의 목요일 아침, 부모님 차로 서울에서 9시 반 즈음 출발해 12시 반 정도에 논산에 도착했고 미리 알아본 훈련소에서 멀리 떨어진 가게에서 냉면을 먹었습니다. 맛있는 집이라던데 기분이 별로라 그런지 그냥저냥 했습니다. 입소 전에 이제 연락 못할 줄 알고 여기저기 전화하고 괜히 마음이 시큰거리더군요. 1시 40분 즈음 대망의 호국요람의 문을.. 2022. 8. 2.
반응형