Spark MLlib을 활용한 기초 통계 및 데이터 분석
1. 요약 통계 (Summary Statistics)
Spark MLlib은 RDD[Vector] 형태의 데이터에 대해 열 단위의 요약 통계 기능을 제공합니다. 이를 위해 Statistics 클래스의 colStats 메서드를 사용하며, 이 메서드는 각 컬럼의 최대값, 최소값, 평균, 분산 등을 포함하는 MultivariateStatisticalSummary 객체를 반환합니다.
import org.apache.spark.mllib.linalg.Vector
import org ...
7월 11일 22:37에 게시됨
ROS2 Bag 데이터 기록 및 분석 방법
기본 사용법
ros2 bag record 명령어를 통해 로봇 운영 시스템(ROS) 내 주제들(토픽)의 데이터를 기록할 수 있습니다. 기록을 중지하려면 Ctrl+C를 입력하면 되며, 자동으로 현재 디렉터리에 rosbag2_YYYY_MM_DD-HH_MM_SS 형식의 폴더가 생성되며, .yaml과 .db3 파일이 포함됩니다.
ros2 bag record /topic_name
ros2 bag record /topic1 /topic2 /topic3
ros2 bag recor ...
6월 24일 17:37에 게시됨
Pandas 핵심 기능 정리 (지속 업데이트)
DataFrame: 데이터 중심 구조
pandas의 핵심 데이터 구조인 DataFrame은 행과 열로 구성된 표 형태의 데이터를 다룹니다. 각 행은 인덱스로 식별되며, 열은 이름을 가집니다.
기본 모듈 로드
import pandas as pd
import numpy as np
데이터 생성 및 기본 조작
CSV 파일을 읽어와 DataFrame으로 변환하는 예시:
chicago_taxi_data = pd.read_csv("https://download.mlcc. ...
6월 2일 00:31에 게시됨