본문 바로가기

Portpolio/KSEB AI project32

KSEB 3기 07.26 모델 경량화  = 탄소절감 = why? 인공지능은 전기를 엄청 먹음float32가 float64보다 메모리를 덜 먹음 2024. 7. 29.
KSEB 3기 07.25 코랩에서 말하는 컴퓨팅 단위의 허점 python에서 MAGIC METHOD의 종류와 name manggling  릿지 회귀와 라쏘 회귀의 차이점 ARIMA의 순서 - 17개 지자체에 대해서 증강 데이터셋으로 진행 RF의 순서 - 17개 지자체에 대해서 증강 데이터셋으로 진행 2024. 7. 25.
KSEB 3기 07.24 시계열 데이터 분석 교재 링크https://otexts.com/fppkr/index.html Forecasting: Principles and Practice2nd editionotexts.com 코랩 유로로 쓰는 것은 비추 2024. 7. 24.
KSEB 3기 07.23 AWS sagemaker와 s3, 서브넷, vpcLLM과 RAG의 차이점 2024. 7. 23.
KSEB 3기 07.22 시계열 데이터 예측모형, LSTM, ARIMA, .reset_index() 함수코랩 유료인데 gpu가 안될때가 많다 2024. 7. 23.
KSEB 3기 07.19 시계열 데이터 증강을 위한 파이썬 패키지 tsaug (TimeSeries Augmentation)판다스에서의 df.info(), df.dtypes 메서드.to_numeric() 메서드 2024. 7. 23.
전처리한 데이터프레임을 csv로 저장하는 방법 # CSV 파일 경로 리스트file_paths_5y = [ 'restructured_2019_SEMCP.csv', 'restructured_2020_SEMCP.csv', 'restructured_2021_SEMCP.csv', 'restructured_2022_SEMCP.csv', 'restructured_2023_SEMCP.csv']# 모든 CSV 파일을 읽어와서 데이터프레임 리스트에 저장df5s = [pd.read_csv(file_path_5y) for file_path_5y in file_paths_5y]# 모든 데이터프레임 위아래로 병합df_combined_5y = pd.concat(df5s, ignore_index=True)# 병합된 데이터프레임 확인print("\n병합.. 2024. 7. 19.
KSEB 3기 07.18 streamlit의 단점과 장점 sagemaker로 발전량 데이터 분석 모델을 어떻게 웹서비스로 구축할 것인가?  time series data의 양이 부족할 때 data augmentation을 해야 하는데 image data는 회전하거나 반전시키거나 noise를 넣어서 분석하면 되지만 시계열 데이터는 그러기 조금 어렵다 참고자료https://s0-0jinii.tistory.com/67  [논문리뷰]Time Series Data Augmentation for Deep Learning: A Survey시계열 데이터 분석에서의 어려움 현존 하는 데이터 증강 기법들은 시계열 데이터의 내제적 특성(intrinsic property)을 활용하지 못함 일반적으로 시계열 데이터는 시간 종속성(Temporal Dep.. 2024. 7. 19.
KSEB 3기 07.17 1. 차후 3년간 연도별 그리고 지역별 그리고 월별 예측량을 지도에 띄워서 보여줄 때 SAGEMAKER를 쓰려고 하는데 너무 과한 것일지? 굳이?? 버셀에 과금을 늘려서 로컬에서 돌릴 때 잘 돌아가게 해라 LLM이면  근데 해본다는 것에 이력서에 추가할거면 하는 건 나쁘지 않은데 어차피 모델이 빡세지는 않잖아? LSTM이니까??? 그러니까 SAGEMAKER는 그냥 가볍게 써라~~~~ SAGEMAKER는 WAS하고 연결해야 하는데 방화벽을 어떻게 설정할 지 멘토링 시간에 들으면 될듯 사용자가 직접 입력을 하게 해서 예측을 하게 하면 굳이 디비가 필요할까?  1. 클라우드 아키텍처는 다시 고칠 것 ci, cd, 로드밸런싱은 버셀이 해줄 것(시간이 부족함) 2.  3.  =========== 2. 태양광 발전.. 2024. 7. 19.
KSEB 3기 07.16 AWS에서 쓰는 대칭 암호화와 비대칭 암호화AWS에서 쓰는 AES == Advanced Encryption Standard == 고급 암호화 표준AWS에 쓰는 KMS 2024. 7. 18.