The BSP package of Hama on Hadoop is now available!!

-

Comments

  1. mareddyonline25/7/14 10:57

    Great articles on Hadoop! This is the kind of info that should be shared across the web. Shame on the search engines for no longer positioning this submit higher! Come on over and consult with my site . Thank you.

    Hadoop Training in hyderabad

    ReplyDelete
  2. Unknown1/3/17 02:04

    Nice post Thanks for sharing it
    Hadoop Training in Chennai

    ReplyDelete
  3. hide online5/10/18 02:22

    I cannot contribute anything more. Your content is too great.

    ReplyDelete
  4. Venkatesh CS3/7/19 00:09

    Thanks for sharing informative.
    hadoop interview questions
    Hadoop interview questions for experienced
    Hadoop interview questions for freshers
    top 100 hadoop interview questions
    frequently asked hadoop interview questions

    ReplyDelete
  5. Rathinam21/7/19 23:58


    Good Post! Thank you so much for giving this pretty post, I feel so good to read and useful to improve my knowledge as an updated one, keep it up.
    Corporate Training in Chennai
    Corporate Training Companies in Chennai
    Oracle DBA Training in Chennai
    Linux Training in Chennai
    Job Openings in Chennai
    Oracle Training in Chennai
    Tableau Training in Chennai
    Unix Training in Chennai
    Corporate Training in Adyar
    Corporate Training in Annanagar


    ReplyDelete
  6. Anjali Siva22/7/19 05:40

    Outstanding blog with lots of information. Keep posting more like this.
    ccna course in Chennai
    ccna institute in Chennai
    ccna Training center in Chennai
    gst classes in Chennai
    ReactJS Training in Chennai
    Salesforce Training in Chennai
    ccna course in Tambaram
    ccna course in Velachery
    CCNA course in Vadapalani

    ReplyDelete
  7. Venkatesh CS16/8/19 02:29

    Excellent Blog. Thank you so much for sharing.
    best react js training in chennai
    react js training in Chennai
    react js workshop in Chennai
    react js courses in Chennai
    react js training institute in Chennai
    reactjs training Chennai
    react js online training
    react js online training india
    react js course content
    react js training courses
    react js course syllabus
    react js training
    react js certification in chennai
    best react js training

    ReplyDelete
  8. rutmanaish26/8/19 03:55

    Really informative blog for all people. Thanks for sharing it.
    Spoken English Classes in Chennai
    Spoken English Course in Chennai
    german classes
    Best IELTS Coaching in Chennai
    learn Japanese in Chennai
    TOEFL Coaching Centres in Chennai
    Spoken English Classes in Anna Nagar
    Spoken English Classes in Tnagar

    ReplyDelete
  9. Venkatesh CS18/9/19 04:18

    Thanks for sharing valuable information.
    Digital Marketing training Course in chennai
    digital marketing training institute in chennai
    digital marketing training in Chennai
    digital marketing course in Chennai
    digital marketing course training in omr
    digital marketing certification in omr
    digital marketing course training in velachery
    digital marketing training center in chennai
    digital marketing courses with placement in chennai
    digital marketing certification in chennai
    digital marketing institute in Chennai
    digital marketing certification course in Chennai
    digital marketing course training in Chennai
    Digital Marketing course in Chennai with placement
    digital marketing courses in chennai

    ReplyDelete
  10. shiv12/12/19 02:12

    nice...........
    vietnam web hosting
    google cloud server hosting
    canada telus cloud hosting
    algeeria hosting
    angola hostig
    shared hosting
    bangladesh hosting
    botswana hosting
    central african republi
    shared hosting

    ReplyDelete
  11. preethi minion24/12/19 02:56

    robotics courses
    inplant training in chennai for eee students
    paid internships in hyderabad for cse students
    list of architectural firms for internship in india
    internship for mca students
    matlab training in chennai
    final year project for it
    internship for production engineering students
    aeronautical internship
    inplant training report for civil engineering

    ReplyDelete
  12. shalini26/12/19 23:48

    nice....
    kaashiv infotech pune
    industrial training report for electronics and communication
    internships for cse
    internship for automobile engineering students in bangalore
    internships in bangalore for eee students
    internship for civil engineering students in chennai 2019
    internship in automobile companies in chennai
    robotics chennai
    final year projects for information technology

    ReplyDelete

Post a Comment

Popular posts from this blog

일본만화 추천 100선

-
1.군계 (액션,격투)

격투만화 중에서는 아주 유명하고 열광적으로 좋아하는 사람이 많은 만화입니다. 전체적으로 만화의 분위기는 어둡고요... 줄거리를 소개하죠. 주인공인 료는 모범생이었습니다. 그러나 부모님의 강압적인 통제... 그에 대한 무의식적 반발로 부모님을 살해하게 되고 맙니다. 그리고 교도소에서 많은 변화를 겪게되죠..그리고 악의 화신같은 존재가 되고 말죠..... 또 그에 대항하는 인물이 나타나고.... 만화에 대한 소개가 만화의 질을 못 따라가네요. 이 만화는 선과 악에 대해 생각해볼 수있는 만화입니다. 그리고 싸움이란 인간에게 어떤 의미가 있는것일까? 하는 생각도요. 아..군계는 싸움닭이란 뜻입니다. 네이밍센스가 좋죠.


2. 생추어리(해적판제목:빛과 그림자) (액션,정치)

일본 최고의 극화체 만화가인 이케가미 료이치님의 작품입니다. 캄보디아에서 일본 외교관의 아들로 태어난 두 남자 이야기를 그리고 있습니다. 캄보디아의 킬링필드(대학살..실존사건입니다.)와중에서 살아남아 돌아온 두 주인공..한명은 암흑계 보스로 다른 한 명은 정치계 거물로 성장해갑니다. 두 남자의 목숨과도 같은 우정....그들의 관계는 어떻게 될까? 뛰어난 스토리작가와 항상 작업하여 재미는 보장이 되는 작품입니다. 단 남성우월주의가 작품전반에 깔려있어서 여성이 보기엔 거부감을 느낄수도 있는 작품..남자분인거 같아 추천합니다.


3.수라의 각 (역사,무협)

해황기의 작가가 쓴 매우 흥미진진한 역사 무협물입니다. 일본 역사속의 많은 실존인물들의 얘기를 기둥줄거리로 하여 거기에 허구를 작가의 능수능란한 솜씨로 섞어냅니다. 이 작품은 코믹 만화인 수험의 제왕에도 등장하는 데요....그 만화에 이런 말이 있지요. "역사 공부를 하려거든 수라의 각을 읽어라" 이 만화작가의 다른 작품인 해황기도 매우 흥미진진하답니다.


4.베르세르크 (판타지)

말이 필요없는 판타지의 최고 걸작.... 뛰어난 작화에 철학적인 사유까지 배어든 최고의 작품. 안 읽으셨다면 부디 읽어보시길..


5.…
Read more

공유 모빌리티 회사로 합류

-
Image
공유 모빌리티 시장 여러 자료를 살펴보니 2010년부터 공유 모빌리티 시장이 빠르게 발전하기 시작했다.  최근에는 1천만명 이상으로 성장했고 Frost & Sullivan에 따르면 2025년까지 그 이용자 수는 3600만 명으로 연간 성장률은 16.4% 성장을 예측하고 있다. Global Market Insights는 2024 년에 전세계 자동차 공유 시장의 가치를 110억 달러로 예측한다. 
현재 주요 공유 모빌리티 시장은 서유럽과 미국이며, 전문가들은 아시아가이 분야에서 가장 빠른 성장을 경험할 것이라고 예측하고 있다. 그랩이라는 회사는 동남아 8개국 336개 도시에 각종 모빌리티 서비스를 제공하는 세계 3대 차량 공유 서비스로 성장해있다.
Source: Frost & Sullivan, Future of Car Sharing Market to 2025
한국은? 이건 지극히 내 생각이지만, 현재 이용 고객은 300만 정도 되는 것 같다. 디디추싱이 한국 진출을 노리고 있지만 국내 플레이어도 빠르게 움직이고 있다보니 2배는 문안하게 성장 가능하지 않을까 생각한다.

B2C만 보았을 땐 규모에 경제 특성이 있어서 자연독점으로 가게 될 공산이 크고, P2P 우버 처럼 규제를 벗어나 다양한 서비스로 진화할 수 있을지는 미지수.

성공 키포인트? 카셰어링 서비스는 휴대폰에 앱을 설치하면 계정을 등록하고 차량을 렌트하며 시간과 함께 이동 거리를 측정하고 렌트 비용을 지불하는 방식으로 동작한다. 이 과정에 신뢰성과 유용성은 고객 만족에 영향을 미치는 주요 문제 중 하나다. 그 중 가장 중요해보이는 3가지는 아래와 같다:

등록 절차 – 보안 상의 이유로 자동차 공유 회사는 운전 면허증, 신용 카드 번호 또는 개인 신분증 사진 등을 요구한다. 사용자를 유지하려면이 프로세스의 단순화와 신뢰성을 극대화해야한다.신뢰성 – 코드 및 이미지 스캐닝, GPS, 지불. 모든 프로세스를 올바르게 처리하려면 응용 프로그램의 각 구성 요소가 매끄럽고 빠르게 실행되고 가능한 적은 배…
Read more

딥 러닝의 블랙 박스 열어보기

-
Image
Opening the black box of Deep Neural Networks via Information
- https://arxiv.org/pdf/1703.00810.pdf

지금까지 딥 러닝은 어떻게 동작하는지 이해할 수 없다고 믿어져왔다. 그러나, 천재들은 그 근본 원리를 이해하려고 노력하고 있지.

이 논문은 SGD가 무슨 역할을 하는지에 대한 해석으로, 이들은 SGD가 drift와 diffusion단계로 구분된다고 설명한다.

첫 drift 단계에서는 multidimensional space를 탐험하고, 수렴을 시작하면 diffusion 단계로 접어들어 (첨부 그림에서 점선 오른쪽에 해당) 굉장히 느려지기 시작하며 chaotic 한 단계로 들어가는데 이게 바로 네트워크가 압축하는 법을 배우는 과정이라는 것이다.



SGD의 무질서도는 local minima에 빠지지 않고 더 나은 방향으로 수렴 할 가능성을 제공 할 뿐만 아니라, diffusion 단계에서 매우 효과적인 internal representations(?)를 생성하는데 자기가 볼쩍에 다소 과한것으로 보이며, 자기들의 IB iterations with stochastic relaxation methods로 DNN 학습 방법을 개선할 수 있을거라고 얘기한다.

제프리 힌트 교수가 지대한 관심과 찬사를 보냈기에 많은 관심을 받고 있는 내용인데, 딥 러닝 대가들의 근본 원리와 최적화 이론에 대한 얘기라, 나는 훔쳐만 봤지 뭔소리인지는 정확히는 이해하기 어렵다.
Read more

How socket.io-redis adapter works? 레디스 어댑터 동작원리

-
Image
보통 실시간 메시징 처리에 socket.io와 redis를 많이 사용하는데, 그 동작 메커니즘이 자세히 소개된 글을 찾기 어려웠다. 이유는 간단한데, 소스코드가 그냥 간단해서 글로 쓰고 자시고 건더기도 없어 그런듯. 
기본적으로 socket.io는 Server, Namespace, Room, 그리고 Socket으로 구성되어있고 멀티 노드를 위해 pluggable 디자인 방식으로 Adapter라는 것이 존재한다. 
Default In-Memory 방식은 배열에 socket과 room 정보를 저장하기 때문에 웹 서버에 붙어있는 clients 외 에는 알 길이 없다. 이때 redis adapter를 사용하면 다음과 같이 동작하는데, sender가 원격에서 넘어왔다면 그냥 내 로컬 clients에게 deliver하는 것으로 종료하고 그렇지 않으면, 다른 노드에게 publish하여 메시지를 전달한다. 

분산 인프라 치고는 놀랍게도 Javascript 몇 줄 안되는 소스코드로 node, socket.io, 그리고 redis가 동작한다. 좀 이해하기 쉽게 도식화하면 다음과 같다:

Read more