전체 글101 데이터 중심 애플리케이션 설계 - 복제 - 리더와 팔로워 복제: 네트워크로 연결된 여러 장비에 동일한 데이터의 복사본을 유지한다는 의미 복제가 필요한 이유 지리적으로 가깝게 유지해 지연 시간을 줄임 장애가 발생해도 지속적으로 동작하여 가용성 높임 장비의 수를 확충하여 읽기 처리량을 늘림 큰 데이터를 볼 때에는 파티셔닝을 살펴본다. 복제의 어려움은 변경처리에 있다. 복제를 위한 알고리즘 단일리더(single-leader): 다중리더(multi-leader) 리더없는(leader-less) 리더와 팔로워 replica: 복제된 데이터를 저장하는 각 노드 일반적인 해결책 리더기반 복제(leader-based replication) active , passive, master, slave) 리더가 되는 서버를 하나 지정한다(master, primary) 리더는 데이터.. 2023. 4. 18. [Codewars 6kyu / Python]- datetime 패키지로 날짜 빼고 시간만 처리하기/시간 연산하기 문제 여러분은 한 기업의 컴퓨팅 전문가입니다. 특정 시간들에 대한 인풋값을 입력하면 해당 시간의 range, avg, median 값을 출력해야 합니다. 예상되는 input과 output의 형태는 아래와 같습니다. "01|15|59, 1|47|6, 01|17|20, 1|32|34, 2|3|17" => "Range: 00|47|18 Average: 01|35|15 Median: 01|32|34" - 이 문제는 날짜를 다룰 필요가 없습니다. - 시간은 60진수 바탕이기 때문에 일반적인 숫자처럼 다루기 보다는 time 형태로 변환하여 연산해야합니다. Codewars - Achieve mastery through coding practice and developer mentorship A coding pract.. 2023. 4. 16. 데이터중심 애플리케이션 설계 - 데이터플로 모드 데이터 플로란? 하나의 프로세스에서 다른 프로세스로 데이터를 전달하는 방법 데이터 베이스 호출을 통해, 서비스 호출을 통해, 비동기 메시지 전달을 통해 전할 .. 다양한 방법이 있다. 데이터 베이스를 통한 데이터플로 데이터베이스에 뭔가를 저장하는 일을 미래의 자신에게 메시지를 보내는 ㅣㅇㄹ처럼 생각할 수 있다. 데이터 베이스는 저장 후 미래의 자신에게 메시지를 보내는 일로 생각해보자 여기서 하위호환성이 필요하다. 복호화를 위해서 데이터 베이스는 동시에 다양한 프로세스가 접근할 수 잇다. 새로운 버전의 코드가 기록된 다음 현재 수행중인 예전 버전의 코드로 그 값을 읽을 가능성이 있다는 의미이다 따라서 상위 호환성도 필요하다. ⇒ 여기까지 데이터 베이스에서 상위 및 하위 호환성이 필요하다는 말 그런데, 새로.. 2023. 4. 15. 데이터 중심의 웹 애플리케이션 설계 - 1장 데이터 모델과 질의언어 부분 관계형 모델과 문서 모델 데이터 모델은 작성 뿐만 아니라 문제를 어떻게 생각해야하는지에 대해서도 지대한 영향을 끼친다. 각 계층은 명확한 데이터 모델을 제공해 하위 계층의 복잡성을 숨긴다.(잘된 추상화) 각 계층의 핵심적인 문제는 다음 하위계층 관점에서 데이터 모델을 표현하는 방법이다. 다양한 유형의 데이터모델이 있고, 각 데이터 모델은 사용 방법에 대한 가정을 나타낸다. 관계형 모델과 문서 모델 sql : 관계(relationship, columns)로 구성되고 각 관계는 튜플(tuple, rows)로 구성된다 관계형 데이터베이스의 근원은 컴퓨터에서 수행된 비즈니스 데이터처리에 있다.(트랜잭션 처리와 일괄처리) 1970~1980: 네트워크 모델, 계층 모델 ⇒ 관계형모델 1980~1990: 객체 데이터.. 2023. 4. 15. NLP study load-map : nlp 스터디로드맵 https://github.com/graykode/nlp-roadmap GitHub - graykode/nlp-roadmap: ROADMAP(Mind Map) and KEYWORD for students those who have interest in learning NLP ROADMAP(Mind Map) and KEYWORD for students those who have interest in learning NLP - GitHub - graykode/nlp-roadmap: ROADMAP(Mind Map) and KEYWORD for students those who have interest in learning NLP github.com 2023. 4. 8. [Git] commit author 수정하기 프로젝트가 많아지다보면 여러개의 깃 계정을 사용하게 될 수도 있다. (가령 private gitlab이라던가...) 이럴때 git 에서 초기에 설정한 global user 설정이 commit에 뒤집어 엎어질 때가 있다. 이럴 때는 git config --global user.name을 통해 수정하는 것도 있지만 하나만 수정하고 싶다면 아래와 같이 써보자 $ git commit --amend --author="hoseung2 " 다만 바로 이전 커밋에만 해당된다. 2022. 9. 13. Elastic beanstalk 적응기 [1 - 진짜 간단히만 보았다] 회사에서 데이터 기술팀이 형성되고 이관받아야 할 업무가 생겼다. 알음알음 기술들을 읽으며 찾아가다보니 오류가 자주나는 지점이 발견되었는데, elastic beanstalk에 앱이 올라가 있었다. 하지만 그게 뭔지 아무것도 모르는 나! 때문에 나름 로그를 받아보아도 이걸 어떻게 수정하면 좋을지 감이 잘 오지않았다. 그래서 공부해보자! Elastic Beanstalk 소개 및 개념 aws 공식 문서인 개발자안내서에서 요약적으로 내용을 발췌해보았다. 큰 역할: Elastic Beanstalk를 사용하면 AWS 클라우드에서 애플리케이션을 신속하게 배포하고 관리할 수 있습니다. 용어 및 개념 ( 알면 좋을 것만 가져왔다.) 어플리케이션이란? - 개념적으로 폴더와 유사 어플리케이션 버전이란? - APP의 코드 배포.. 2022. 8. 20. [python/리눅스]HINT: remove __pycache__ / .pyc files and/or use a unique basename for your test file modules _________________________________ ERROR collecting tests/test_settings.py __________________________________ import file mismatch: imported module 'test_settings' has this __file__ attribute: /home/hoseung2/cc/tests/test_settings.py which is not the same as the test file we want to collect: /home/hoseung2/test_release/cc/tests/test_settings.py HINT: remove __pycache__ / .pyc files and/or use a u.. 2022. 8. 12. [일기] 오늘은 devops에서 성장한 날 그리고 사춘기에 대하여 오늘은 Devops와 관련해서 좀 더 성장하는 날이 되었다. 여러개의 우분투 서비스를 다루는 법을 배웠고, 백그라운드에서 떠있는 서비스들을 원활히 다루고 Ansible playbook을 만드는 법 또한 배웠다. 여러개의 반복적인 bash 작업들을 한방에! 평소에는 프로세스를 만들면 도커를 빌드하거나 프로세스를 진행하는 수준으로만 진행했었는데, 리눅스와 관련해서 코드 배포와 다양한 툴로 반복적인 작업을 좀 더 편하게 작업할 수 있게 되었다. 뭔가,,, 뭐랄까... 어려운 내용들은 아니었지만. 산출물도 만들어 보람차고 새로운 것을 배우게 되어 기쁜 날이었다. 평소에 감정 변동이 없었는데, 최근에 일에 대해서 자존감이 많이 떨어지고 있었다. 이게 맞나? 하는 기분들과 나도 모르게 내 목표치에 도달하지 못했다는.. 2022. 8. 2. TypeError: descriptor '__init__' of 'super' object needs an argument 제목과 같은 에러가 나와서 호잇! 했는데, 해결방법은 쉽다! # 수정전 def __init__(self): super.__init__() # 수정전 def __init__(self): super().__init__() super를 선언하는 것을 잊지 마시길 ㅎㅎ 2022. 7. 29. 7/25: 오늘의 뉴스 세계 증시 시황 7월 24~25일에 발생한 일을 정리한 거라 늦게보시는 경향이 좀 있을 겁니다 ㅎㅎ 하지만 제 개인적인 생각으로는 주요 이슈 파악하는 데에는 충분! 세계지수 간단 요약 니케이 선물 : 0.72% 항셍 선물: 0.92% Asx200 spi 선물: 0.18% S&P 선물: 0.11% 아시아: 전반적으로 약상승. 개장 시에는 하락 출발, 미국: 금요일에 테크 섹터주의 기대보다 낮은 실적에 하락한 것에 비해 꾸준히 유지중 호주와 뉴질랜드 채권은 현재 랠리중(국채) 상품: 석유 상승, 구리 하락 달러가 의 경우 몇몇 지수에 비해 강세 이번주: Fed의 75 bp 금리인상 주목 시장은 어느정도 75bp 인상에 무게를 두고 있는 듯한 경향이 있음. cpi, ppi 10% 및 고용불안정둥 실물 경제지표들이 약세를 보이.. 2022. 7. 25. 스테픈 nft 가격 그냥 고려해볼까? 싶은 생각이 드네욤 장이 폭락하기 전인 2~3달 전만 해도 nft 신발 가격이 15~16sol 정도였던 스테픈. (당시 1sol 가격이 10만원 중반대, 그러니 당시 진입금액이 약 200만원 정도) 엄청난 진입가격에, 가입만 하고 아무것도 안했다 ㅎㅎ 그런데 오랜만에 보니 현재는 운동화 1개당 0.7~1.5sol 사이로 거래되고 있다 (오늘은 1 sol 당 5만원대, 오전 기준) 그리고 오늘 GMT의 가격은 약 1200원 대, 어차피 나는 지금 하루에 1시간 정도는 꼬박꼬박 운동하는데, 10만원을 재미...? 삼아 써보는 것도 나쁘지 않을 것 같다 2022. 7. 24. 이전 1 2 3 4 5 6 7 ··· 9 다음
