본문 바로가기

분류 전체보기523

KSEB 3기 07.22 시계열 데이터 예측모형, LSTM, ARIMA, .reset_index() 함수코랩 유료인데 gpu가 안될때가 많다 2024. 7. 23.
KSEB 3기 07.19 시계열 데이터 증강을 위한 파이썬 패키지 tsaug (TimeSeries Augmentation)판다스에서의 df.info(), df.dtypes 메서드.to_numeric() 메서드 2024. 7. 23.
전처리한 데이터프레임을 csv로 저장하는 방법 # CSV 파일 경로 리스트file_paths_5y = [ 'restructured_2019_SEMCP.csv', 'restructured_2020_SEMCP.csv', 'restructured_2021_SEMCP.csv', 'restructured_2022_SEMCP.csv', 'restructured_2023_SEMCP.csv']# 모든 CSV 파일을 읽어와서 데이터프레임 리스트에 저장df5s = [pd.read_csv(file_path_5y) for file_path_5y in file_paths_5y]# 모든 데이터프레임 위아래로 병합df_combined_5y = pd.concat(df5s, ignore_index=True)# 병합된 데이터프레임 확인print("\n병합.. 2024. 7. 19.
KSEB 3기 07.18 streamlit의 단점과 장점 sagemaker로 발전량 데이터 분석 모델을 어떻게 웹서비스로 구축할 것인가?  time series data의 양이 부족할 때 data augmentation을 해야 하는데 image data는 회전하거나 반전시키거나 noise를 넣어서 분석하면 되지만 시계열 데이터는 그러기 조금 어렵다 참고자료https://s0-0jinii.tistory.com/67  [논문리뷰]Time Series Data Augmentation for Deep Learning: A Survey시계열 데이터 분석에서의 어려움 현존 하는 데이터 증강 기법들은 시계열 데이터의 내제적 특성(intrinsic property)을 활용하지 못함 일반적으로 시계열 데이터는 시간 종속성(Temporal Dep.. 2024. 7. 19.
KSEB 3기 07.17 1. 차후 3년간 연도별 그리고 지역별 그리고 월별 예측량을 지도에 띄워서 보여줄 때 SAGEMAKER를 쓰려고 하는데 너무 과한 것일지? 굳이?? 버셀에 과금을 늘려서 로컬에서 돌릴 때 잘 돌아가게 해라 LLM이면  근데 해본다는 것에 이력서에 추가할거면 하는 건 나쁘지 않은데 어차피 모델이 빡세지는 않잖아? LSTM이니까??? 그러니까 SAGEMAKER는 그냥 가볍게 써라~~~~ SAGEMAKER는 WAS하고 연결해야 하는데 방화벽을 어떻게 설정할 지 멘토링 시간에 들으면 될듯 사용자가 직접 입력을 하게 해서 예측을 하게 하면 굳이 디비가 필요할까?  1. 클라우드 아키텍처는 다시 고칠 것 ci, cd, 로드밸런싱은 버셀이 해줄 것(시간이 부족함) 2.  3.  =========== 2. 태양광 발전.. 2024. 7. 19.
KSEB 3기 07.16 AWS에서 쓰는 대칭 암호화와 비대칭 암호화AWS에서 쓰는 AES == Advanced Encryption Standard == 고급 암호화 표준AWS에 쓰는 KMS 2024. 7. 18.
태양광 인버터 종류 2024. 7. 16.
지라 요금제 분류 구분FreeStandardPremium추천 사용자프로젝트 정보 및결정을 기록하는 소규모 팀용협업 및 지식 공유를 위한성장하는 팀용고급 콘텐츠 제어를 통해확장하는 조직용이용료10명까지 $0사용자당 $5사용자당 $10저장용량2GB250GB무제한기술 지원 ❌ ⭕️⭕️Team Calendars(JIRA 연동)❌❌⭕️ 2024. 7. 16.
태양광 설비용량과 발전량의 관계 (일몰 - 일출)과 발전 시간은 다른 개념입니다. 시간은 결국 거리에서 속도를 나누는 개념, 즉 단위 시간 당 움직이는 거리를 의미합니다. 그 내용을 여기에 가져오게 된다면 총 발전량에서 단위 시간을 나눈 단위 시간, 즉 여기에서는 시(H)당 발전량을 의미합니다. 결국 발전 시간 t_Max는 시간에 상관없이 동일한 수치를 가지고 있습니다. 직사각형의 넓이인 S_2는 발전량을 의미하며 이 발전량은 발전 시간이라는 밑변과 설비 용량이라는 높이의 곱으로 이뤄집니다.   추가적으로 일조 시간과 기조 시간이라는 개념도 존재합니다. 기조 시간은 일몰 - 일출의 시간입니다. 그래서 계절에 따라 기조 시간은 달라집니다.일조 시간은 기조 시간 중에서 구름이나 강우, 강설 등으로 일사가 방해되지 않은 순수한 시간을 의미합.. 2024. 7. 16.
KSEB 3기 07.15 선행 논문 조사1. 일조 시간과 일조량 데이터를 고려한 LSTM 기반 태양광 발전량 예측 2. RNN-LSTM을 이용한 태양광 발전량 단기 예측 모델3. 태양광 발전에 영향을 미치는 요소 분석을 통한 연간 발전량 예측에 관한 연구 공공데이터포털을 API를 이용해서 데이터를 받아오기 마크다운으로 표 만들기 & 마크다운 입력 사이트 pandas의 df.melt() 메서드와 파라미터 중 하나인 id_vars 코랩 일반과 프로의 차이점 2024. 7. 15.