본문 바로가기

Tensorflow

tensorflow dev summit 2019 요약 구글에서 3.6~7 일간 샌프란시스코에서 Google tensorflow dev summit 2019를 개최했다. 현재 텐서플로우 홈페이지(tensorflow.org) 홈화면에 33개의 영상이 있는 유투브 채널로 연결된다. 너무 많은 내용이 변경 되었고, 전체적으로 구글이 추구하는 바를 새로 표현한 느낌인데, 요약이 없어 눈물을 머금고 일일히 요약했다. 구글이 추구하는 방향은 Tensorflow extened 에서 상위 개념을 나타내는 workflow라는 말로 알 수 있듯이 머신 러닝을 통해 A.I를 만드는 모든 과정을 정리해서 모든 과정에서 구글의 플랫폼을 사용하게 하겠다는 뜻을 표현했다. TFX의 자세한 내용은 tensorflow 홈페이지(https://www.tensorflow.org/tfx) 에 .. 더보기
ms word python 에서 사용하기 python-docx lib사용 더보기
네이버 뉴스 크롤링하기 (퍼옴) [데이터분석] 파이썬으로 특정 키워드를 포함하는 신문기사 웹크롤링 & 워드클라우드 시각화 분석 - 2 (네이버 뉴스 크롤링하기)윤빵꾸 2016.08.26 15:44 네이버 뉴스 크롤링하기 이번 글에서는 동아일보와 한겨레신문에서 특정 키워드를 포함하는 기사를 긁어오기 전 예제로 네이버포털의 뉴스기사를 긁어 오는 것을 먼저 연습하도록 하겠습니다. 1234567891011121314151617181920212223242526272829303132"""네이버 뉴스 기사 웹 크롤러 모듈""" from bs4 import BeautifulSoupimport urllib.request # 출력 파일 명OUTPUT_FILE_NAME = 'output.txt'# 긁어 올 URLURL = 'http://news.naver.. 더보기
Tensorflow 소스 코드 분석 요즘 핫 이슈인 TensorFlow의 백서(white paper)를 기반으로 속살(source code)을 파헤쳐 보고 정리한 자료를 다음과 같이 공유합니다.잘못된 분석이 있다면 댓글로 남겨주시면 감사드리겠습니다. Tensorflow internal from Cho Hyunghun 아래는 각 슬라이드 별 내용을 간략히 설명한 것입니다. 참고하시기 바랍니다. TensorFlow의 주요 특징 Dataflow 형태의 모델을 기반으로 손쉽게 딥러닝 프로그래밍할 수 있도록 제공 모델을 다양한 디바이스(CPU, GPU, 원격)에서 효율적으로 분산 처리전자를 통해 분석할 데이터를 효과적으로 처리(Extract, Transform, Load - ETL)하고 다양한 학습 모델을 활용할 수 있으며 추후 손쉽게 도식화할 수.. 더보기
ReLU (Rectified Linear Unit) 1. Neural Network라는 개념이 재밌지만 사실 몇가지 문제가 있다. 첫번째로는 Neural Network가 느리다는 점이다. 실제로 Neural Network의 학습은 상당히 오래걸리는 편이다. 특히 Unit(Neuron)이 많아지면 점점 더 시간이 늘어난다. (솔직히 언젠가는 이것이 하드웨어적으로 해결되어야 할 문제라고 생각한다.) 그리고 또한가지 가장 큰 문제중 하나는 Gradient Vanishing 이라는 문제이다. hidden layer가 한개, 두개일때는 문제가 생기지 않지만 네트워크가 깊어지면 깊어질수록(Deep Learning은 깊은 네트워크를 이용하면 Deep Learning이다. 뭔가 말장난 같지만 장난이 아니라 진짜다.) Gradient Vanishing 문제가 생긴다. G.. 더보기
Machine learning 종류 Supervised Unsupervised learning Reinfoece learning 더보기
Tensor Flow란 보호되어 있는 글입니다. 더보기