[Ray RLlib로 강화학습 쉽게 사용하기] 7편: 사용자 정의 환경, 관측/행동 전처리, 콜백 활용하기

이전까지는 주로 Gym에 내장된 표준 환경(CartPole, MountainCar, Atari 등)을 활용했습니다. 그러나 실제 문제 해결 과정에서는 고유한 시뮬레이터나 데이터 소스에서 얻은 관측을 RL 환경으로 구성하고, 에이전트가 특정 형식의 행동을 내도록 설계해야 할 수 있습니다. 또한 RL 실험 중간에 특정 이벤트에 반응하거나, 관측값을 가공하는 등의 커스터마이징이 필요할 수도 있습니다.이번 글에서는 다음 내용을 다룹니다.사용자 정의 Gym 환경을 RLlib에 등록하고 적용하기Observation/Action Wrapper를 통한 관측, 행동 전처리콜백(Callbacks)을 활용한 로그 확장, 성능 조건부 로직 삽입사용자 정의 환경 연동RLlib은 기본적으로 Gym 인터페이스에 맞는 환경이면 어떤..

• format_list_bulleted 개발 이야기/PyTorch (파이토치)
• · 2024. 12. 25.
• textsms

벤쿠버 2025년 새해 맞이: 폭죽 쇼와 다채로운 이벤트 총정리

안녕하세요, 벤쿠버 여행객 여러분! 다가오는 2025년 새해를 맞이하며, 벤쿠버에서 열리는 다양한 행사와 폭죽(불꽃놀이) 스펙터클에 대해 꼼꼼하게 소개해 드리겠습니다. 벤쿠버는 산 정상부터 바다 위, 도심 곳곳까지 새해 축하 열기로 가득 차는데요. 아래 행사들을 살펴보고 취향에 딱 맞는 방법으로 새해 첫날을 즐겨보세요!1. 그라우스 마운틴 (Grouse Mountain)행사: The Peak of Vancouver 새해 맞이 행사위치: 그라우스 마운틴, 노스 밴쿠버주요 일정스키·스노보드: 오전 9시 ~ 오후 10시Light Walk: 해질녘 ~ 오후 11시산정 스케이트장: 오전 10시 ~ 오후 11시폭죽 쇼: 오후 9시스케이트장 라이브 DJ 공연: 오후 6시 ~ 10시특별 디너The Observatory..

• format_list_bulleted 미국 생활/기타
• · 2024. 12. 25.
• textsms

2025년 새해, 벤쿠버에서 즐기는 아름다운 해돋이 명소

안녕하세요, 벤쿠버 여행객 여러분! 다가오는 2025년 새해를 맞이하며, 벤쿠버에서 일출(해돋이)를 볼 수 있는 최고의 장소들을 소개해 드리려고 합니다. 이 도시의 아름다운 자연과 함께 새해의 첫 태양을 맞이하면 더욱 뜻깊은 시간이 되겠죠? 각 명소마다 특징과 링크를 함께 정리했으니, 가이드 삼아 계획해보세요.1. 사이프러스 마운틴 전망대 (Cypress Mountain Viewpoint)위치: Cypress Mountain Viewpoint특징파노라마 뷰가 뛰어나, 도시·산·바다가 어우러진 웅장한 풍경일출·일몰 모두 인기지만, 사진작가들 사이에선 일출 명소로도 유명장점고지대에서 멀리 내려다보는 시야가 탁 트여서, 벤쿠버 스카이라인·스탠리 파크·라이온스 게이트 브리지 등 다양한 뷰를 한눈에 담을 수 있음..

• format_list_bulleted 미국 생활/기타
• · 2024. 12. 25.
• textsms

시애틀에서 출산 준비하기: 병원 선택과 한국인을 위한 특별 서비스

안녕하세요, 예비 부모님들! 이번 글에서는 시애틀 지역에서 출산을 고민하시는 분들을 위해 우수한 병원들과, 한국인 임산부가 이용하기 좋은 특별 서비스를 자세히 소개해볼까 합니다. 시애틀에는 여러 훌륭한 의료 시설이 있고, 한인들을 위한 맞춤형 지원도 점점 늘어나는 추세예요. 출산은 인생에서 정말 특별한 순간이니, 꼼꼼하게 정보를 모아 안전하고 편안한 출산을 준비해보세요!1. 시애틀의 주요 출산 병원들1.1 Swedish Medical Center - First Hill Campus병원 정보Swedish Medical Center는 시애틀에서 가장 규모가 크고 명망 있는 의료기관 중 하나예요.First Hill, Issaquah, Edmonds 등 총 세 곳에 출산 센터가 있어, 시애틀 도심이나 이스트사이..

• format_list_bulleted 미국 생활/기타
• · 2024. 12. 25.
• textsms

SSN 없이 미국에서 주식 거래하기: 가능한 방법과 주의사항, 더 깊게 살펴보기

안녕하세요, 투자에 관심 많은 여러분! 오늘은 미국에서 SSN(Social Security Number) 없이 주식 계좌를 만들고 거래하는 방법에 대해 조금 더 길고, 친절하게 살펴보려고 해요. 해외 투자에 문을 두드리고 싶지만 SSN이 없어 고민이신 분이라면, 도움이 되는 정보가 되길 바랍니다. 미국 주식 시장은 글로벌하게 다양한 투자 기회를 제공하고 있죠. SSN이 없다고 해서 이 기회를 전부 놓치지는 않아도 된다는 사실, 알고 계셨나요? 함께 보시죠!1. SSN이 왜 필요할까?미국 금융기관의 기본 신원 확인 수단SSN은 미국 시민·영주권자에게 발급되는 고유 식별 번호로, 세금 보고나 사회 보장 혜택 추적에 필수.금융기관의 세금 보고 의무브로커·은행 등은 고객 정보를 신고할 때 SSN을 활용해 세금 ..

• format_list_bulleted 미국 생활/재테크
• · 2024. 12. 25.
• textsms

한국의 빅테크 오피스 현황과 기술 인재 시장 동향

안녕하세요, 여러분! 오늘은 한국에 위치한 주요 빅테크 기업들의 오피스 현황과 최근 동향을 살펴보려 합니다. 글로벌 기업들의 한국 진출, 국내 기업들의 대응, 그리고 이로 인해 변화하는 기술 인재 시장까지 폭넓게 알아보겠습니다. 빅테크 기업들의 움직임을 보면, 한국의 디지털 전환과 IT 생태계가 얼마나 역동적으로 변하고 있는지 체감할 수 있을 거예요.1. 구글 (Google)위치: 강남 파이낸스센터, 서울특별시 강남구 테헤란로 152직원 수: 약 800명주요 역할: 스타트업·기업가 지원, 멘토링 프로그램, 클라우드 서비스 등오피스 환경접근성을 고려한 유니버설 디자인 적용점자 표지판·넓은 휠체어 이동 공간·자동 슬라이딩 도어 등 설치포용적 업무 환경 조성한국 내 사업클라우드 컴퓨팅, 광고 기술, AI 등 ..

• format_list_bulleted 미국 빅테크/빅테크 커리어
• · 2024. 12. 25.
• textsms

일본 빅테크 오피스 한눈에 보기

안녕하세요, 여러분! 오늘은 일본에 위치한 주요 빅테크 기업들의 오피스를 함께 살펴보려고 해요. 일본은 아시아에서 기술 혁신이 활발히 이뤄지는 대표적인 국가 중 하나로, 많은 글로벌 기업들이 이곳에 주요 거점을 운영합니다. 여러분이 일본에서 커리어를 찾으시거나, 기술 분야 소식을 알고 싶다면 꼭 눈여겨보셔야 하는 회사들이죠. 그럼 시작해볼까요?1. Amazon위치: 메구로, 도쿄, 일본직원 수: 1만 1천 명 이상주요 역할: 소프트웨어 개발, 기술 프로그램 관리, 제품 관리, AWS 서비스AWS에 집중AWS Loft Tokyo 운영스타트업·개발자 이벤트·워크샵 개최오피스 특징현대적이고 개방적 업무 환경다양한 협업 구역 & 회의 공간직원용 카페테리아AWS 관련 연구·개발·지원 전문화전자상거래 + 클라우드 ..

• format_list_bulleted 미국 빅테크/빅테크 커리어
• · 2024. 12. 25.
• textsms

시애틀 및 주변 도시(벨뷰, 레드몬드, 커클랜드)의 빅테크 오피스

안녕하세요, 여러분! 이번에는 미국 서북부, 특히 시애틀과 인근 도시인 벨뷰, 레드몬드, 커클랜드에 위치한 빅테크 기업 오피스 정보를 가독성 있게 정리해보겠습니다. 최근 하이브리드 근무와 오피스 공간 재조정이 활발히 일어나면서, 다양한 변화가 생기고 있는데요. 한눈에 살펴보아요!1. 아마존 (Amazon)시애틀 본사주소: 410 Terry Avenue North, Seattle, WA 98109직원 수: 시애틀 지역 7만5천+주요 역할:소프트웨어 개발클라우드 컴퓨팅(AWS)기업 기능(인사·재무 등)특징:40개+ 현대적 도시형 캠퍼스[2019년] 시애틀에서 벨뷰로 운영 부서 이전 결정 ( GeekWire 소식 )재택근무 확산으로 시애틀 일부 오피스 철수 (Denny Triangle 지역)2025년 말 Me..

• format_list_bulleted 미국 빅테크/빅테크 커리어
• · 2024. 12. 25.
• textsms

시애틀에서 즐기는 2025년 새해 맞이 행사 & 불꽃놀이 총정리

안녕하세요, 시애틀 여행객 여러분! 2025년 새해를 맞이하여 시애틀에서는 다양한 행사와 불꽃놀이가 펼쳐집니다. 시애틀의 독특한 매력과 함께 새해 첫날을 특별하게 만들어줄 이벤트들이 정말 많아요. 오늘은 그중에서도 가장 놓칠 수 없는 행사와 불꽃놀이 관람 장소를 함께 살펴보겠습니다.1. 스페이스 니들 (Space Needle) 새해 맞이 행사위치: 스페이스 니들(Seattle Center 인근)핵심 이벤트: Alaska Airlines New Year's at the Needle자정 불꽃놀이 & 드론 쇼자정이 되면 스페이스 니들 주변에서 대규모 불꽃놀이가 시작됩니다.무려 200대의 드론이 LED 조명과 함께 하늘을 수놓으며, 불꽃·조명 쇼와 통합 연출을 선보이죠.음악 동기화불꽃놀이는 음악과 동기화되어 더..

• format_list_bulleted 미국 생활/기타
• · 2024. 12. 25.
• textsms

메타(구 페이스북) 한국 오피스, 무엇을 하는 곳일까?

안녕하세요, 여러분! 오늘은 메타(Meta, 구 페이스북)의 한국 오피스에 대해서 좀 더 길고, 자세하게 알아보려 합니다. 메타는 전 세계적으로 혁신적인 기술을 개발하고 있는 기업으로서, 한국에서도 다양한 역할을 수행하고 있습니다. 특히 솔루션 아키텍트, AI·XR 분야 협력, 개발자 지원 등 여러 측면에서 활발한 활동이 이뤄지고 있는데요. 그럼 지금부터 메타 한국 오피스의 위치, 역할, 근무 환경, 연봉 수준, 그리고 개발자 지원 프로그램 등을 살펴보겠습니다.1. 메타 한국 오피스의 위치1.1 서울 오피스메타의 한국 오피스는 서울에 위치해 있습니다. 정확한 주소가 공개되어 있진 않지만, 서울 도심에 자리 잡고 있다는 것이 일반적으로 알려져 있죠.메타 채용 페이지에 따르면, 서울 오피스에서 여러 포지션이..

• format_list_bulleted 미국 빅테크/빅테크 커리어
• · 2024. 12. 25.
• textsms