본문 바로가기

전체 글

 (866)
발표자료, 제안서 등 문서에서 시스템, 네트워크 아키텍처 그릴때 사용하기 좋은 온라인 사이트 발표자료, 제안서 등 관련된 문서를 작성할때 시스템 / 네트워크 등 아키텍처를 그려야 할때가 있습니다. 웹상에서 보면 VISIO가 그렇게 좋다고 하지만, 확보된 환경이 아니네요.. 물론 PPT로도 그릴수가 있지만.. 생각보다 손이 많이 가고 가장 큰 문제는 예쁘게 안나온다는게 문제 입니다. 웹을 검색해보면 거의 3사이트로 압축이 됩니다.(유료는 제외합니다)프로그램 형태로는 제 블로그에 예전에 소개한 DIa도 있습니다 2009/05/20 - [Utility program] - 순서도 그리는 프로그램 - DIA그리고 리브레오피스(https://ko.libreoffice.org/discover/draw/) 드로우도 좋다고 하네요 1. CloudCraft https://cloudcraft.co/ 2.drawio..
스파크 & 스칼라 Parquet + Spark 조합을 사용하고 있습니다 SparkSQL로 처리하기가 애매한 상황이라. 직접 코딩좀 할일이 있어서 Scala를 만지는데 ... 1. sbt에 잘몰라서 설정하는데 고생2. sbt와 스칼라버전과 build.sbt 의 %,%% 차이를 몰라서 고생3. 책을 보고 있는데, 자바하고 문법이 비슷한것 같은데 이제는 파이썬에 너무 익숙해져서 스칼라가 눈에 잘 안들어오는...
zeppelin 1.7.1 with hive interpreter 맨날 HDP 에 설치가 잘된 제플린을 사용하다보니,, 수동으로 제플린을 사용하려고 하니 HIVE를 사용하려고 하니 다음과 같은 오류가 발생합니다. Prefix not found. paragraph_1493986135331_752263516's Interpreter hive not foundorg.apache.zeppelin.interpreter.InterpreterException: paragraph_1493986135331_752263516's Interpreter hive not found at org.apache.zeppelin.notebook.Note.run(Note.java:605) at org.apache.zeppelin.socket.NotebookServer.persistAndExecuteS..
Spark, SBT, libthrift 0.5.0-1 not found twitter scrooge 를 spark scala 코드를 만지고 있는데, 다음과 같은 오류가 발생한다면 build.sbt에 아래를 추가하시면 될것 같습니다. resolvers ++= Seq( "Twitter Maven Repo" at "http://maven.twttr.com" ) 잘은 모르겟지만 libthrift 저게 maven centeral repo에는 업다고 하네요
[HIVE]create table metastore move trash error HDP 만 사용하다가, HIVE를 직접 설치하려니..헷갈리네요 hive를 세팅하고 create table 하려고 하는데 metastore에 생성하려는 테이블이 trash 가 계속 된다면.. 메타스토어 DB가 제대로 세팅안된것입니다.. ... 분명히 예전에 mysql을 쓴다면,, 그 안에 들어가서 source 로 쿼리문으로 안에 테이블 구성했던것 같은데.. 지금은 shematool 이라고 제공하네요.. 혹시 create table 하는데 metasotre에서 만들려는 테이블을 trash로 지우는 현상이 일어나면서 테이블이 만들어지지 않는다면 metastore db 다시 한번 세팅해보세요 ~
추천하는 한글 검색 토렌트 사이트 토렌트 글을 적기전에 앞서... 티스토리를 한지도 9년이상이 되어버렸네요... 사실 여러가지 목적이긴 했지만.. 요즘에는 뜸하지만, 사실 이제는 수익도 얼마 안되고, 광고비를 받는 목적도 있었습니다.. 그러다보니, 이런저런 도구(구글 애널리틱스라던지, 네이버 애널리틱스라던지.)를 이용해서 이 블로그에 많이 들어오는 키워드인가도 분석해봤고, 사실 분석을 해보면 몇개 나오지만, 가장 많은 키워드가 토렌트 입니다. (이번 포스트에는 이 블로그와는 관련없지만 제가 요즘 관심가지고 있는 일본 아이돌을 그림의 태그로 토렌트(torrent)와 함께 집어넣었는데 어떻게 반영될까 입니다. ) 사실 요즘에는 넷플릭스를 쓰게된 이후로 미드 받는 용도로는 들쓰게 되었지만.. 아쉽게도 넷플릭스에서 제공안하는 미드가 생각보다 많..
vscode(visual studio code) 멀티 커서 단축키 그래도 지금까지 작업하기에는 Intellj가 좋지만.. 서브라임텍스트 말고 다른걸 찾던중 vscode를 찾았습니다. 서브라임에서 가장 많이 사용했던 멀티커서 사용법... Multi cursor improvements Ctrl+D selects next occurrence of word under cursor or of the current selection Ctrl+K Ctrl+D moves last added cursor to next occurrence of word under cursor or of the current selection The commands use matchCase by default. If the find widget is open, then the find widget set..
Tomcat8 catalina MessageDispatch15Interceptor class not found Tomcat8 catalina MessageDispatch15Interceptor class not found Tomcat 으로 클러스터링을 하는데, 왜인지 모르게 클러스터를 찾지 못하는 문제가 발생합니다 제가 사용하는 버전은 8.5.12 버전입니다. 그런데 8.5.12 에서 8.0.42 버전으로 다운그레이드 하니 저런 문제는 없어졌네요 . 아마 버전업 하면서 클래스명이 바뀐것 같은데, 이것때문에 시간 엄청 썻네요

티스토리툴바