비전공자 개발자 도전기

빅데이터 ai 알고리즘 수업자료 4일차 필기와 ChatGPT를 이용해서 (문제풀어보기)

Jun-de — Sun, 19 Mar 2023 13:35:13 +0900

머신 러닝은 현재 IT 산업에서 가장 인기 있는 검색어 중 하나다. 하지만 머신 러닝이 무엇인지, 어떻게 작동하는지 제대로 이해하지 못하면 길을 잃기 쉽다. 그렇다면 어떻게 학습해야 할까? 저자는 오랫동안 다양한 사람들에게 머신 러닝을 가르치면서 효과적인 학습 방법을 고안했고, 그대로 책에 담았다. 이 책은 그림과 스토리로 개념을 설명하고 바로 파이썬 코드로 구현하는 것에서 시작한다. 수학적 증명을 깊게 파고들거나 개념을 설명하기 위해 수식에 의존하지 않으며, 필요한 수학은 고등학교 수준으로 그때마다 첨가하여 설명한다. 또한, 바닥부터 모델을 구현하지 않고, 넘파이, 판다스, 사이킷런처럼 잘 구현된 강력한 파이썬 라이브러리를 사용해 실용적으로 접근한다. 개념과 기술을 잘 보여주는 양질의 예제를 직접 실행하며 머신 러닝 개념을 이해할 수 있다. 머신 러닝 기본 개념부터 특성 엔지니어링, 하이퍼파라미터 튜닝 등 실무 기법까지 머신 러닝을 제대로 익히고 싶은 모든 분에게 추천한다.

저자: 마크 페너

출판: 길벗

출판일: 2020.06.30

- 필기

세 개의 변수가 모두 참인 경우에만 출력이 가능하다

리스트는 다양한 데이터 타입을 저장할 수 있습니다. 예를 들어, 정수, 실수, 문자열

미션 1. 파이썬의 조건문을 지피티를 이용해서
확인하고 실습하기

확인 후 강사에게 피드백받기

예제 올해년도를 입력받아서 윤년여부 판단

파이썬 조건문은

if문: 조건식이 참일 경우 실행할 코드를 작성합니다.

elif문: 여러 개의 조건을 추가로 체크할 때 사용합니다. if 문 다음에 사용되며
조건식이 참일 경우 실행할 코드를 작성합니다.

else문: 모든 조건식이 거짓일 경우 실행할 코드를 작성합니다.

if문은 3번까지는 허용 3번이상은 현업에서는 허용 안됨

가독성이 뛰어난코드가 읽기도 좋고 쓰기도 좋다

논리연산자 : >< == !=

비트연산자: &, |, ^ 이 진수끼리 연산

true : 1
false : 0

true false true false
true true true true

1.예제

test = int(input("합격여부를 확인해주세요"))

if test >= 90:
  test = "합격"
elif test >= 80:
  test = "합격"
elif test >= 70:
  test = "합격"
elif test >= 60:
  test = "불합격" 
else:
  test = "불합격"

print("당신은",test,"입니다.")



2.예제

num = int(input("정수를 입력하세요: "))

if num % 2 == 0:
    print("짝수입니다.")
else:
    print("홀수입니다.")

3.예제

age = int(input("나이를 입력하세요: "))
gender = input("성별을 입력하세요(M/F): ")

if gender == "M" and 20<= age<30:
  print("20대 남자입니다.")

else:
  print("20대 남자가아닙니다.")


4.예제

month = int(input("월을 입력하세요: "))
if month == 12 or month == 1 or month  == 2:
  print("겨울입니다.")
elif month == 3 or month == 4 or month == 5:
  print("봄입니다.")
elif month == 6 or month == 7 or month == 8:
  print("여름입니다.")
elif month == 9 or month == 10 or month == 11:
  print("가을입니다.")

else:
  print("이계절은",month+"입니다")


5.예제

number1 = int(input("첫번쨰 숫자를 입력하세요. "))
number2 = int(input("두번쨰 숫자를 입력하세요. "))
number3 = int(input("세번쨰 숫자를 입력하세요. "))
max_number = number1

if number2 > max_number:
  max_number = number2
if number3 > max_number:
  max_number = number3

print("가장큰수는",str(max_number)+"입니다")




6.예제(물건의 가격(price)과 수량(quantity)이 주어졌을 때, 
물건을 살 때 지불해야 하는 금액(total)을 계산하는 파이썬 코드를 작성해보세요. 
단, 물건을 10개 이상 살 경우에는 10%의 할인이 적용됩니다)


pcice = 1000
quauntity = 10

if quauntity >=10:
  total = pcice * quauntity * 0.9 #10퍼센트 할인적용
  print(f"이물건의가격은{total}입니다.") 
else:
  total = pcice * quauntity #10퍼센트 할인적용
  print(f"이물건의가격은{total}입니다.") 


6.5예제(할인적용이안되엇을떄)

pcice = 1000
quauntity = 10

if quauntity >=10:
  total = pcice * quauntity #10퍼센트 할인적용
  print(f"이물건의가격은{total}입니다.") 
else:
  total = pcice * quauntity #할인적용
  print(f"이물건의가격은{total}입니다.") 


6.예제(gpt가 적은 정답)

price = 1000  # 물건의 가격
quantity = 12  # 물건의 수량
if quantity >= 10:
    total = price * quantity * 0.9  # 10% 할인 적용
else:
    total = price * quantity
print(total)  # 총 지불 금액 출력



7번 예제

num1 = int(input("첫 번째 수를 입력하세요: "))
num2 = int(input("두 번째 수를 입력하세요: "))
num3 = int(input("세 번째 수를 입력하세요: "))

if num1 > num2:
    num1, num2 = num2, num1
if num2 > num3:
    num2, num3 = num3, num2
if num1 > num2:
    num1, num2 = num2, num1

print(num1, num2, num3)


8번 예제

num = int(input("수를 입력하세요: "))
if num > 0:
    print(num ** 2)


9번 예제

old = int(input("나이를 입력하세요: "))
if old >= 65:
    print("노인입니다.")
elif old >= 18:
    print("성인입니다.")
else:
    print("미성년자입니다.")


10번 예제

word = input("단어를 입력하세요: ")
if word == word[::-1]:
    print("회문입니다.")
else:
    print("회문이 아닙니다.")

후기 - ChatGPT 를 이용해서 문제를 받고 풀어보았다

아직은 파이썬 if,와 elif, else 조건문들이 익숙하지가 않았다.

하지만 반복학습을 한다면 이러한 난관도 극복할 수 있을 거라고 생각한다

많이 부족하지만 최선을 다해서 나만에 프로그램을 만들어보고 싶다.

빅데이터 ai알고리즘 수업자료 3일차 필기 및 코드 (함수와변수)

Jun-de — Sun, 19 Mar 2023 13:27:47 +0900

파이썬 로보틱스(acorn+PACKT 시리즈)

더 이상 우리의 일상에서 로봇이 없는 삶을 생각할 수 없다. 로봇을 만드는 일은 하드웨어 부분이건 소프트웨어 부분이건 생각만큼 단순하지 않다. 하지만 파이썬을 활용하면 다양한 기능을 제공하는 로봇을 비교적 쉽게 만들 수 있다. 이 책은 파이썬, 로봇 OS(ROS), OpenCV 등을 활용해서 시각 알고리즘으로 주변을 인식하고, 자율적으로 주행하면서 사용자와 음성으로 대화할 수 있는 인공지능 로봇을 만드는 과정을 보여주는 소개서다. 하드웨어 설계, 시뮬레이션, 부품 선택 및 펌웨어 코딩, 주행에 필요한 기본적인 물리 지식, 로봇 운영체제 활용, 음성 인식과 합성을 통한 사용자 상호작용, OpenCV를 활용한 영상 처리 등에 대해 배우면서 로봇 제작 기초를 단단하게 다질 수 있을 것이다.

저자: 렌틴 조셉

출판: 에이콘출판

출판일: 2016.05.20

필기

-개발툴

visual studio code->정말 기초적인 툴

pycharm-> 파이썬 기본 문법 및 머신러닝

나머지 툴은 시각화부터 사용
miniconda ->로컬에서 돌아가는 가상환경 (코렙과 비슷)
jupyter notebook

코렙(장점 gpu가 없을 때 구글의 gpu를 사용)
gpu->딥러닝할 때 필요

위키독스(e북 전자책들)

- 코딩테스트등 딥러닝 활용
-꽤 쓸만한 것들도 있다.

Anaconda

coda env list

conda create -n test (가상환경을 만든다)

conda activate test(열고 싶을 때)

conda deactivate(없애고싶을떄)

conda install jupyter 설치

jupyter notebook->쥬피터 노트 활성화

주피터 파일경로 설정

경로 파일에서 제목옆을 클릭하고

컨트롤+c 하고

우클릭은 누른 후

cd+저장된 경로 파일 작업이 진행된다

주피터 사이트에서
new 누르고 새로 만들어야 작업이 진행된다

주피터 폴더는 .py(설정이 되어 있다면 실행이 불가능하다 새로 생성을 해야 한다)

py.(파이썬, 비주얼스튜디오)
ipynb(주피터 노트 이름코드)

-프로그래밍 (함수와변수) 필기

프로그래밍은 무조건 함수,변수로 이루어진다.
화면에 출력하는 명령어는 print이고 () 안에는 출력하고 싶은 데이터를 넣는다.
문자열은,,, 문자들의 집합이고 ""로 둘러싼다
print("Hello" , "World!")

다음코드를 완성해서 "Hello. World!"와 "12345x7890" 이 각 줄에 출력되게 만드세요
ctrl + ? (주석추가 명령어)
세미콜론
-파이썬은 세미콜론을 붙이지 않음 #파이썬은 ', "" 구분하지 않음
print('Hello, World') -> 하나의 명령어
-보통 한 줄에 여러 구문을 사용할 때 세미콜론으로 구분해 줌
print("12345X7890") print("Hello" , "World!") # 문자열

주석
-코드 맨앞에 #을 사용하면 해당 줄은 주석이 됨.
더하기
a = 1+2
print('Hello, World!')
코드뒤에 주석을 작성할 수도 있음
a = 1+2 #더하기
들여 쓰기
파이썬은 들여 쓰기가 자체가 문법임
들여 쓰기 방법 탭(tab) 사용하기
== (같다)
a = 10 if a == 10: print('10입니다')

코드 블록 특정한 동작을 위해서 코드가 모여 있는 상태
파이썬은 들여쓰기를 기준으로 코드 블록을 구성
정수 계산하기
정수 (-1-2....)
덧셈
3.5+2.1

5.6
뺼셈과 곱셈
4.3-2.7

1.5999999999996
나눗셈
5/2

2.5
파이썬 3은 정수끼리 나눗셈을 해도 실수가 나옴
실수 계산하기
4.2+5#(연산자)

표현 범위가 넓은 쪽으로 계산됨(실수+정수)
피연산자의 범위가 안 맞으면 알아서 맞춰줌.
오버플로우(범위보다 크면 다른 값이 나옴) 언더플로우(범위보다 작으면 다른 값이 나옴)
연습문제 #print 명령어를 쓰면 된다
print(225+0.6*102);print(10+20)

225+0.6*102, 10+20

변수 규칙 (변하는수)(이름을 가지게 하는 수)
영문 문자와 숫자를 사용할 수 있다
대소문자를 구분한다
문자부터 시작해야 하며 숫자부터 시작하면 안 된다
_(밑줄 문자)로 시작할 수 있다
특수문자(+,-,*,/,$,@,&,%등)는 사용할 수 없다
(중요) 파이썬의 키워드(if, for, while, and, or 등)는 사용할 수 없다.(예약어)
print("hello world") #TypeError: 'str' object is not callable (호출할 수 없다)

print(함수)
print = '프린트'(절대하면안됨) #(변수명을 재할당)(기능을 바꿔서)
변수 만들기
빈 변수 만들기
None 할당
x = None
print(x)
대입 연산자
x =10 print(x)

x = 20 print(x)

x = 30 + 40 print(x)

x, y, z = 10,20,30

x = y = z = 10

파이썬은 변수에 다른 변수 할당할 수 있다(파이썬의 장점)
값뿐만 아니라 다른 변수도 할당할 수있음
del 변수
(변수 삭제하기) (많이쓰지않는다) (자원을 반납한다) (메모리를 확보)
연습문제 변수만들기
a = b = 10 c, d = 20, None

print(a) print(b) print(c) print(d)

문자열을 변수에 저장하기
hello1 = 'Hello, world' print(hello1)

hello = '''Hello, world! 안녕하세요 python입니다.'''

print(hello)

문자열의 길이 구하기
len 함수
공백까지 포함하여 계산함
문자열을 묶은 따옴표는 제외
hello ='안녕하세요' len(hello)

문자열을 연결하고 반복하기
(예시) 문자열1 +문자열 2
hello = 'Hello' world = 'world' hello + world

문자열 * 정수
hello * 3

예시
print(1+2) print("-"*30) print(10+20)

-> 30
문자열을 연결하고 반복하기
문자열에 숫자를 더하는 방법
문자열 + str(정수)
문자열 + str(실수)
예시
s = 'hello, python' print("s의 길이는 13입니다")

문자열 입력받기
input 함수
변수 = input()
변수 = input(문자열)
예시
data1 = print ("값을 출력하세요 : ") data2 = input ("값을 입력하세요 : ") print(data1) print(data2)

data + str(10)

숫자 입력받기
각각의 문자열을 합쳐서 만든다.
a = input ('첫 번째 숫자를 입력하세요:') b = input ('두 번째 숫자를 입력하세요:')

print(a + b)

정수 입력받기
문자열 상태가 아닌 숫자로 변화해주어야 함
변수 = int(input())
a = int(input('첫 번쨰번째 숫자를 입력하세요:')) b = int(input('두 번째 숫자를 입력하세요:'))

print(a + b)

#int와 변수


a, b = input('숫자 두 개를 입력하세요: ').split()
a = int(a)
b = int(b)

print(a + b)



"1234"[0]:"1234" [1]

number = input("숫자를 입력하세요 : ") #12345
# code..

print(number) #54321

print (number[4]+number[3]+number[2]+number[1]+number[0])


a, b = map(int, input('숫자 두 개를 입력하세요: ').split())
print(a + b)

a, b, c = map(str,["111","222","333"])
print(a+b+c)

a, b = map(int,input('숫자 두 개를 입력하세요: ').split(','))
print(a+b)

a, b, c = map(int,input('숫자를 세 개를 입력하세요: ').split() )

print(a + b + c)

#sep 예시

print(1, 2, 3, sep=', ')

print(4, 5, 6, sep=', ')


#중간 점검
변수

만드는규칙

빈 변수 만들기(None)

여러개 한번에 할당

문자 <-> 숫자 (정수, 실수)

입력 받기

문자열 같이 구하기

문자열 분리하기

분리된 문자열에 특정함수 일괄 적용하기 map

출력에 옵션정하기

변수 swap

문자열 연결 + , 반복 * (문자열 연산)

응용문제

타인의 BMI를 구해봅시다
BMI (kg/m2)를 구하는 방법은 (몸무게) / (키)2 로서, 단위에서 알 수 있듯이 몸무게는 kg, 키는 m이다
키와 몸무게를 입력받아서 구해봅시다.


#문제

kg, cm = map(int,input('몸무게와 키를 입력하세요: ').split())

BMI = kg / (cm/100**2)

print(f"당신의 BMI는{BMI}")

#단나누기

특수기호 /n,/t 단을나누거나

줄바꿈 활용하기

print를 여러 번 사용해서 print(1,2,3,)처럼 한 줄에 여러 값을 출력할 수는 없을까?


print(1, end='')
print(2, end='')

print("avc\ndef")

#print(value, ... sep=' ',) #디폴드 밸류
print('a','b','c',sep='111', end='213')
print('a','b','c',sep='')

#날짜 계산하기

yeat = 2000
month = 10
day = 27
hour = 11
minute = 43
second = 59

print(f'yeat,month,day', sep=' / ', end= " ")
print(f'hour,minute,second', end=":")

#산술 연산자 사용하기 -기본 산술 연산자 -덧셈, 곱셈, 뺼셈 -나눗셈

print("a","b","c",sep="ii", end="여기까지")

print("100동101호의 관리비는 210000원 입니다.")
print("100동102호의 관리비는 110000원 입니다.")
print("200동301호의 관리비는 210000원 입니다.")

dong,ho,price = 100,101,210000

print(dong,"동 ",ho, "호의 관리비는 ",price, "원 입니다.", sep="")

print(f"{dong}동 {ho}호의 관리비는 {price}원 입니다")

print(f"{3.14657:.2f}")

#정수와 실수

# 5나누기 2의 정수느 000이고 실수는 000입니다.
5 // 2


#사용자로부터 2개의 숫자를 입력받게 해서 두 숫자를 나눈결과를
#정수와 실수로 구분해서 출력할것
number1,number2 = map(int. input("두개의 정수를 공백을 기준으로 입력").split())
reult1 = number1 / number2
result2 = number1 // number2

print("정수:".result2)
print("실수",result1 - result2)


data = 12.56634
# 반올림 없이 소수점 둘쨰자리까지 구해서 새로운 변수에 할당
#print(f"{data:.2f}")
newData = f"{data:.2f}"
print(newData)


# 반올림 미적용
data = 12.56634
int(data*100)/100

# 반올림 적용
data = 12.56634
int(data*100+0.5)/100
# 12.57

# // ->몫
# %  ->나머지

- 후기

파이썬 함수와 변수를 배워보앗다.

수학이 많이 부족해서 그런지 수업도중 이해 안 되는 부분이 잇었지만

옆에 잇는 동료로 인해 도움을 많이 받았다.

이러한 커뮤니케이션은 중요하다고 생각한다

하지만 계속 의존하지 말고 최대한 나 스스로 노력을 해봐야 된다고 생각한다.

빅데이터 ai알고리즘 수업자료 2일차 필기

Jun-de — Sun, 19 Mar 2023 12:29:03 +0900

쉽게 배우는 AWS AI 서비스

AI를 비즈니스에 도입하기 위해 반드시 개념을 알아야 할까? 기본적인 클라우드 지식만 활용하면 AI를 직접 구현하지 않고 도입이 가능하다. 그 비법은 바로 아마존이 제공하는 서비스형 AI! 이 책은 AWS 에서 제공하는 서비스형 AI를 조합해 실생활에 유용한 앱을 만들며 AI의 능력을 마음껏 활용해볼 수 있도록 도와준다. 사진을 자동으로 분류하는 이미지 인식 서비스부터 챗봇이나 음성비서 기능이 있는 일정 관리 앱, 거대한 데이터를 수집해 필요한 정보만 뽑아내는 크롤러까지 다양한 애플리케이션을 구축하며 AWS의 AI 서비스를 정복해보자.

저자: 피터 엘거, 오언 셔너히

출판: 한빛미디어

출판일: 2022.04.15

목차. 프로그래밍할 때중요한 것

1.(데이터를 저장하는것)

2.(메모리에저장)

3.(결과가 나와야한다)

4. 읽기 편한 코드로 작성해야 한다(가독성이 뛰어난 프로그램을 만들어야 한다)

5. 에러 x 실수가 아니다

6. 버그 (항상 발생하는 버그, 간혈적으로 나오는 버그(시간, 투자필요함)

7. 변수와 상수 (별도에 이름이 필요하다(변수) (변하지 않는 수(상수))

8. 디버그(버그를 제거하는 방법) (브레이크포인트를 걸어준다) (시간을 벌어준다)

9. 자바툴(이클립스)

10. 파이썬툴(주피터노트북, 가상의 서버를 구축 웹을 사용한다) (코렙)

11. 인터프리터언어

인터프리터 언어는 원시코드(프로그래머가 작성한 소스코드)를 기계어로 변환하는 과정 없이 한 줄 한 줄 해석하여 바로 명령어를 실행하는 언어를 말합니다. R, Python, Ruby와 같은 언어들이 대표적인 인터프리터 언어입니다.

인터프리터가 직접 한 줄씩 읽고 따로 기계어로 변환하지 않기 때문에 빌드 시간이 없습니다. Runtime 상황에서는 한 줄씩 실시간으로 읽어서 실행하기 때문에 컴파일 언어에 비해 속도가 느립니다.

실행속도는 느리지만 코드 변경시 빌드 과정 없이 바로 실행이 가능하다는 장점이 있습니다. 루비를 사용해 보면 소스코드를 고치고 서버를 다시 시작하지 않아도 변경사항이 반영된 상태로 테스트를 진행할 수 있습니다

12. 컴파일언어(프로그래머가 작성한 소스코드), 스크립트성언어(파이썬, 러닝머신, 인공지능)

컴파일러 언어의 종류
C, C++, C#, JAVA 등이 있다.

13.빌드과정이란?
빌드는 소스파일(소스코드 파일)을 실행파일로 생성하는 과정입니다.

즉 고급언어 ----> (변환) ---> 저급언어(기계어) 과정을 거쳐서 실행파일로 생성합니다.

인터프리터 언어는 빌드과정이 없이 바로 고급언어에서 한 줄씩 읽어서 실행합니다. 반면에 컴파일러 언어와 같은 C, Java는. class 파일 등과 같이 변환하여 실행을 합니다.

14. Pan das(데이터관리),NumPy(계산)(행렬,미분),python(베이스)
리스트(집합) [1,2,3] * 3 = [1,2,3,1,2,3,1,2,3,]

15. 인공지능 (값을 예측한다) (기계학습 (한방에 학습))
Y=ax : Linear(선형)

교육책들

1.텐서플로2와 머신러닝으로 시작하는 자연어처리(위키북스)

2. 머신러닝을 다루는 기술 with 파이썬, 사이킷런(길벗)

3. 블록과 함께 하는 파이썬 딥러닝 케라스(디지털북스)

4.let's 실전 예제로 배우는 파이썬 프로그래밍(주)(아이비김영)

5. 오라클 11g와 함께하는 SQL과 PL/SQL(컴원미디어)

6. 빅데이터 전문가의 하둡관리(성안당)

7. 통계학 빅데이터를 잡다(한국문학사)

- 후기

Ai 인공지능 GPU에 대해 강의영상과 설명을 들었다.

프로그래밍 할 때 중요한 부분 데이터 관리를 어떻게 하냐

어떤 툴을 써서 작업을 하나 어떤 방식으로 코드를 작성할 수 있다

전부 새로운 부분이어서 기대도 되지만 한편으로는

비전공자인 내가 전공자 분들을 따라잡을 수 있을까 라는 걱정도 있다고 생각한다.

하지만 시간을 투자하면 투자한 만큼 실력이 상승할 수 있지 않을까라는

상상을 해본다

빅데이터 ai 알고리즘 수업자료 1일차 필기

Jun-de — Tue, 14 Mar 2023 10:58:21 +0900

AWS 보안 레시피

보안 담당자들이 인프라를 보호할 때 직면할 수 있는 일반적인 어려움에 대한 실용적인 솔루션을 설명한다. CIA 3 요소(기밀성, 무결성, 가용성), AAA 3 요소(인증, 권한 부여, 가용성), 부인 방지 등의 보안 모델 실현에 도움을 줄 수 있는 AWS의 서비스와 기능을 설명한다. 많은 사람에게 친숙한 IAM과 S3의 정책을 먼저 소개하고, 그 후에 데이터 보안, 애플리케이션 보안, 모니터링, 컴플라이언스를 자세히 설명한다. Config, GuardDuty, Macie, Glacier Vault Lock, Inspector, Security Hub 등의 AWS 보안 서비스도 전반적으로 다룬다. 마지막으로 장마다 중요한 보안 영역을 다루고 클라우드 보안 모범 사례와 추가 보안 서비스를 소개한다.

저자: 하르틴 카니카토투

출판: 에이콘출판

출판일: 2021.05.27

미니프로젝트 7일 정도 소요 4월 14일~4월 21일까지

데이터 빅데이터

머신러닝 프로그래밍

빅데이터 분석플로우 구성(체계적으로 만드는 방법)

딥러닝 프로그래밍 (직접 제작을 한다)

자연어 처리(데이터를 처리하거나 문장을 판단한다, 단어를 선정해 준다)

마인드를 바꾼다

코렙 사용

데이터 전처리
불필요한 columns 삭제

주어진 데이터에 따라서 중요할 수도 있다
불필요한 데이터를

null값 변환
상위값으로 변환

중위수 안 변하는 숫자

더 좋은 모델 더 잘 정리된 데이터
개선하고 이유를 명확하게

시각화를 통해서 회귀분석 가능하다

프로젝트는 배운 걸 바탕으로 아예 다른 프로젝트를 만드는 것

오라클을 많이 사용할 예정

공공데이터 포털 (중요)
데이터 수집용 포털
https://www.data.go.kr/

UCI
머신러닝 데이터 포털 (중요)
https://archive.ics.uci.edu/ml/index.php

데이콘(한국판)(대회에서 했다는 경험이 중요함)
데이터 대회(순위를 제출해야 됨)
https://dacon.io/competitions

캐글(외국) (데이터 대회) (코드공유) (코드정리가 필요함)
(포트폴리오에 정리해서 만들 수 있다)
(이 사이트를 통해서 코드공유를 해서 공부를 할 수 있다)
https://www.kaggle.com/

캠프 (스마트팩토리 관심 잇는 사람) (실제 데이터)
https://www.kamp-ai.kr/

조선내화 (크랙 제품 생산) (엑스레이 검사부품)
http://www.chosunref.co.kr/home/main/kor/main.do

항상 데이터 수집하고 개시할 때 출처를 적어야 한다.

전이학습 (기존에 잇는 알고리즘을 재 학습시킨다.)

코드, 이미지, 프로젝트

딥러닝개발(PyTorch(많이 쓴다), Tensor Flow(2가지다 할 줄 알아야 한다.)(플랫폼화된 언어)
(남이 만든 소스를 제대로 이해해야 한다.)

(ImageDataGenerator (미지데이터) 활용할 수 있다)

(StratifiedKFold 불균형한 분포도를 나눌 수 있다)

인공지능으로 다양한 스타일로 변경

구글트렌드(구글데이터)
https://trends.google.co.kr/home?geo=KR

줌수업(학원에 문의 학원 클라우드에 저장되어 있음)

시간데이터->일자데이터 (변경 처리 )

데이터 전처리->데이터 분석 및 시각화 (곡선이 보이도록 시각화(극대)

노트북구매할 경우(GPU메모리 12GB 이상)

2022년 빅데이터 활용 사례 10가지

1. 제조업

제조업에서는 데이터가 ERP나 MES, CMMS 등의 수많은 시스템에 산재해, 데이터를 단일적으로 이용할 수 없기 때문에, 공장의 가동 상황을 전반적으로 파악하는 것이 어렵습니다. 기업에서 빅데이터 분석의 첫걸음은 바로 데이터를 통합하여 관리해야 하는 것입니다. 빅데이터의 잘 활용으로 제조 프로세스를 개선할 수 있을 뿐만 아니라 생산성 향상 및 품질 안정 등에 도움이 됩니다.

2. 의료업

매일 대량 복잡한 비구조화 데이터를 생성하는 의료업은 빅데이터 기술을 통해 의료정보 활용의 폭과 가능성이 넓어진다.

3. 금융업

은행업에서는, 빅데이터가 오랜 세월 활용되어 이미 경쟁 전략상 빠뜨릴 수 없는 것이 되었습니다. 현금 회수부터 재무 관리까지 빅 데이터는 은행 모든 업무의 효율을 높입니다. 은행업의 빅데이터 애플리케이션은 고객의 수고를 덜어주고 수익을 창출합니다.

4.EC업계

EC사이트는 인터넷상에서 고객에게 상품이나 서비스를 판매함으로써 이익을 획득하므로, 고객과 상품이 EC사이트 운영에 있어서의 가장 중요한 요소라고 생각할 수 있습니다. EC 업계에서 빅데이터는 데이터 분석 및 마이닝을 통해 법칙을 도출하여 기업에 지속적인 경쟁 우위를 가져옵니다.

5. 교육업

교육업계에서는 학습이나 교육현장에 대한 다양한 데이터가 축적되고 있습니다. 학습 이력이나 행동 이력 등의 빅데이터 수집, 시각화 분석을 통해 학습 평가 및 각종 예측, 성적과 학습 행위 사이의 관계를 명확하게 할 수 있습니다. 많은 나라에서 학교와 대학에서 빅데이터를 사용합니다.

6. 여행업

여행 업계는 주로 고객의 관광지에 대한 흥미와 그 행동 특징을 바탕으로 비즈니스를 전개합니다. 현재, 대리점보다 Web 서비스를 사용하는 경향이 있습니다. 빅데이터는 인터넷을 통해 전 세계 관광지와 관광객의 정보를 수집하여 여행 수요를 예측하는데 큰 도움을 줍니다.

7. 국가기관(정부)

어느 나라 정부든 매일 국민, 경제성장, 에너지 자원, 교통 등에 관한 다양한 기록과 데이터베이스를 추적해야 합니다. 이러한 데이터의 적절한 조사와 분석은, 정부의 나날의 업무를 지원합니다.

8. 농업

농업은 경험과 직감에 의지하는 부분이 많았습니다만, 농사일에 빅데이터를 구사해, 디지털 기술을 도입하면, 예측이나 생산성 향상, 생산 현장의 가시화를 가능하게 합니다.

9. 요식업

경쟁이 치열해지는 음식업계에서는 시장 지위를 유지하기 위해 데이터 드리븐의 경영 전략을 설정하는 기업이 늘고 있습니다. 과거 레스토랑은 고객의 내점을 기다리기만 한 상태였지만, 음식점 정보를 빅데이터 화하면 방문객 수를 예상할 수 있어 재방문 고객을 늘리기 위한 서비스와 판촉활동을 조정할 수 있습니다.

1일 차후기

AI가 어떻게 만들어지는지 AI를 사용하여 어디까지 활용할 수 있는지

빅데이터를 활용한 머신러닝과 GPU와 CPU에 차이점

딥러닝을 활용하여 모나리자 그림을 그리면서 시각화하는 기계를 보았다.

이런 과정을 통해 빅데이터 분석가, 인공지능 분야에 취업을 할 수 있다

목표

머신러닝과 블록체인을 활용하여 기존에 잇는 보안 프로그램을 수정하여 한층 더 강화된 보안프로그램을 만들고 싶다.