목록 전체 글 (317)
KEEP GOING
목차 안드레 카파시는 누구인가 안드레 카파시는 OpenAI의 창립 멤버이고 스탠포드 대학교의 딥러닝 강의로 유명한 CS231n를 개발한 AI 엔지니어입니다.OpenAI를 나와 이후 테슬라의 AI 총괄자로 일하다가 Anthropic에 합류하였습니다.안드레 카파시가 X에 코딩 에이전트 환경에서 발생하는 고질적인 문제를 언급했는데, 어떤 개발자가 이 LLM 행동 원칙 파일을 단 65줄의 마크다운 파일인 CLAUDE.md를 만들었습니다. 이 Github 저장소가 무려 별 10만개 이상을 넘기는 인기를 불러 일으켰습니다. (현재 기준으로는 17만개 정도의 스타를 받았네요. ㄷㄷ)https://github.com/multica-ai/andrej-karpathy-skills GitHub - multica-ai/and..
TableauBI(Business Intelligence)/데이터 시각화 솔루션 회사 데이터를 대시보드, 차트, 분석 화면으로 만들어 직원들이 웹에서 볼 수 있도록 하는 솔루션Excel로 만들던 보고서를 동적 화면으로 웹에서 볼 수 있고 권한별로 관리가 가능해진다.Tableau 제품으로는 Tableau Desktop, Tableau Server, Tableau Cloude가 있다. Tableau Desktop대시보드를 만드는 툴로, 로컬 PC에서 Tableau Desktop을 열어 CSV, Excel, DB, Snowflake 등의 데이터에 연결하여 차트와 대시보드를 만든다. 파일을 만들면 아래와 같은 확장자를 가지게 된다. .twb = Tableau Workbook, Dashboard 정의 파일..
Nexon Open API 키 발급받기 REST API 테스트를 위해 넥슨 API 플랫폼 사이트를 찾아보았습니다. REST API에 대해 공부는 해보고 싶은데 재밌게 실습해보는 것이 목적이라 메이플스토리 API를 활용해보고자 합니다. https://openapi.nexon.com/ko/my-application/create-app/ NEXON signin.nexon.com 먼저 넥슨 Open API에서 어플리케이션을 등록하면 API 키를 발급 받을 수 있습니다.발급된 API key를 통해 넥슨에서 제공하는 메이플스토리, 바람의 나라, 카트라이더 러쉬플러스 등 여러 게임의 API 호출 테스트가 가능합니다. 사실 메이플키우기 게임의 캐릭터 정보를 가져와볼 생각이었지만 메키는 별도로 API를 제공해주지 ..
AI 컨퍼런스 소스 활용하기 GitHub - brave-people/Dev-Event: 🎉🎈 개발자 {웨비나, 컨퍼런스, 해커톤} 행사를 알려드립니다. [with 남송리 삼번지] · GitHub GitHub - brave-people/Dev-Event: 🎉🎈 개발자 {웨비나, 컨퍼런스, 해커톤} 행사를 알려드립니다. [with 남🎉🎈 개발자 {웨비나, 컨퍼런스, 해커톤} 행사를 알려드립니다. [with 남송리 삼번지] - brave-people/Dev-Eventgithub.com개발자 행사 큐레이션 정보를 담은 github 레포지토리를 활용하여 새행사만 텔레그램을 통해 알림을 받아보고자 한다.Dev-Event의 현재 행사 목록만을 읽어 새로 추가된 행사만 알림을 받을 수 있도록 한다. Dev..
Docker 실행의 흐름도 데이터 엔지니어 관점에서 docker를 사용하는 흐름을 설명하면 아래와 같다. Airflow, Spark 같은 앱의 프로세스를 실행하기 위해 설계도로 실행 객체를 만들고 그 객체 내에서 프로세스를 실행한다. Dockerfile ↓Spark / Airflow / Kafka Consumer Image 생성 ↓docker run / docker compose up / docker run ↓spark-submit 실행 / Webserver & Scheduler Container 실행 / Consumer 프로세스 실행자세한 용어 정의는 아래에서 설명한다. Docker 개념 정의 Dockerfile: 이미지를 만들기 위한 설계도 Image: 실행 가능한 패키지 Container:..
introSpark History Server mcp에서 tool 실행시 가져오는 데이터 수집 정보에 대해 알아보자.왜 해당 수집 지표들을 가져오는지, 어떤 근거로 수집 정보를 산출하는지 알아보는 것이 목적이다. get_job_bottlenecks(app_id, server, top_n)slowest_stages = list_slowest_stages(app_id, server, False, top_n)slowest_jobs = list_slowest_jobs(app_id, server, False, top_n)exec_summary = get_executor_summary(app_id, server)all_stages = client.list_stages(app_id=app_id)\mcp-apache..
Introopenai의 API 플랫폼인 platform.openai.com에서 제공하는 기능들을 제대로 알아보고자 한다. 그리고 API 호출을 위한 입문서인 https://developers.openai.com/api/docs를 확인하자. platform.openai.com은 openai의 개발 플랫폼으로서, 개발자나 기업에서 직접 서비스를 구축하기 위해 API 생성 및 관리 용도로 접근하는 사이트이다. API key를 생성할 때는 프로젝트별 키를 생성하는데 유리하다. 프로젝트 키를 만들면 환경별 API key 분리, 사용량 추적, 소비량을 관리하기 쉬워진다. Usagehttps://platform.openai.com/settings/organization/usage내 토큰 사용량과 요청량을 확인할 ..
https://aws.amazon.com/ko/blogs/big-data/introducing-mcp-server-for-apache-spark-history-server-for-ai-powered-debugging-and-optimization/ Introducing MCP Server for Apache Spark History Server for AI-powered debugging and optimization | Amazon Web ServicesToday, we're announcing the open source release of Spark History Server MCP, a specialized Model Context Protocol (MCP) server that transform..