[컴] 클라우드 플레어 의 문제에 대한 투명한 대처

cloudflare/  투명 / 진단 결과 / 문제 발표 문제해결 / 클라우드 / 플래어 / 플레어 / 소통 / 정확한 / 투명한 / 응답 / 대답 / 고객과의 소통 / 보스 이어폰 /

클라우드 플레어 의 문제에 대한 투명한 대처

7월 2일에 클라우드플레어가 멈췄다.(outage) 이와 관련해서 자세한 내용을 공개했다.
내용의 이해를 떠나서 문제에 대한 투명한 공개의 좋은 예

• Details of the Cloudflare outage on July 2, 2019, 12 Jul 2019

See Also

1. Bose QC 35 Firmware 4.5.2 Noise Cancellation Inves... - Bose Community - 285738, 2020-04-02 : Bose 에서 Noise Cancellation 관련 고객들의 의견에 대한 답변, 자세한 분석, 

[컴][유틸] VSCodium

vscode / visual studio code/ open license

VSCodium

여기 를 보면 알 수 있는 데, 마이크로소프트(MS)가 Visual Studio Code 가 빌드할 때 vscode repository 를 복사해서 product.json 변경하고 빌드를 한다고 한다.

이 때 product.json 에 MS 에서의 특정 기능을 집어넣는다. (텔레메트리, 갤러리, 로고 등) 그리고 자신들의 라이센스 를 걸고 배포한다.

이 라이센스에 데이터의 수집에 대한 라이센스도 들어가 있다.

그래서 그 라이센스와 관련없이 VSCode 를 빌드해서 MIT license 로 배포하는 것이 VSCodium 이다. 자세한 사항은 README.md 를 읽어보자.

vscode 에 data 수집이나 telemetry 관련 옵션이 있긴하지만, 여하튼 개인적으로 그냥 VSCodium 을 쓰는 것이 나을 듯 하다.

[컴][웹] confluence 사용하는 국내업체들

지라 / 컨플루언스 사용 업체 리스트 / jira / 어디서 사용하는지 / 사용하는 대기업 /

confluence 사용하는 국내업체들

1. 넥슨
2. 롯데쇼핑e커머스사업본부
3. 삼성전자
4. 안랩
5. 알티캐스트
6. 애플코리아
7. 우아한 형제
8. 잡코리아
9. 쿠팡
10. 현대모비스
11. 현대오토론
12. cafe24
13. LG 전자
14. LIG 넥스원
15. naver
16. sk
17. sk 하이닉스

Reference

1. [Blind] Confluence 쓰는 회사들 알려주실 수 있나요? (IT엔지니어)

[컴] qBittorent 의 익명모드

토렌트 / 토렌트 익명 모드 / 토렌트 감시 / 토렌트 안전하게 / 토렌트 익명성 보장 / 피하기

qBittorent 의 익명모드

아래글은 qBittorent 의 Anonymous mode 글을 가져와서 번역하고, 약간의 설명을 추가했다.

Anonymous Mode

도구 --> 옵션 --> 비트토런트 --> 익명모드 사용하기 를 통해 사용할 수 있다.
이 옵션은 설명글 에 따르면 이 모드를 활성화 하면 누군지 모르게 identity 를 가려준다.(try to mask its identity)
qBittorrent v3.3.0+ 과 qBittorrent v2.9.0 - qBittorrent v3.2.5 에서 동작이 다르다. qBittorrent v2.9.0 - qBittorrent v3.2.5 에서 더 많은 제한이 있다.

qBittorrent v3.3.0+

"익명모드"를 사용하면,

• peer-ID 가 더이상 클라이언트 지문(client's fingerprint) 에 포함되지 않게 된다.
• user-agent 가 빈문자열(empty string) 으로 리셋(reset) 된다.
• 다른 구분가능한 정보(identifying information) 들, 예를 들면 IP, listening 포트등과 같은 정보들은 직접적으로 공개되지 않게 된다.

qBittorrent v2.9.0 - qBittorrent v3.2.5

libtorrent-rasterbar 의 버전이 1.0.0. 아래 버전을 사용하게 된다. 그래서 '익명버전'이 활성화 되면 qBittorrent v3.3.0+ 에서 제공되는 기능(features) 과 함께 추가적으로

• Local Peer Discovery 를 disable 한다.
• DHT 를 disable 한다.
• UPnP & NAT-PMP 를 disable 한다.
• (any) proxy 를 통해서 http(s) trackers 에게만 얘기한다.
• SOCKS5/I2P proxy 를 통해서 udp trackers 에게만 얘기한다.

이 기능들은 qBittorrent v3.3.0+ 에서는 "프록시가 지원하지 않는 연결 비활성화기(Disable connections not supported by proxies)" 옵션으로 빠졌다.

• 프록시가 지원하지 않는 연결 비활성화기 : 도구 --> 옵션 --> 연결 --> 프록시 서버 panel --> 프록시가 지원하지 않는 연결 비활성화기

[컴][웹] 크롤링에 대한 대법원 판단

스크랩핑 / 스크랩  / 크롤 / 크롤링 / crawling 에 대한 법률 / 법률 위반 / 합법인가 크롤링

크롤링에 대한 대법원 판단

데이터베이스(DB)권 침해 행위[^1]

• 웹사이트 콘텐츠를 긁어오는 '크롤링'을 이용해 확보한 콘텐츠
• --> 자신의 영업에 무단 사용
• --> 데이터베이스(DB)권 침해 행위

사건 내용

• 2008년 사람인이 잡코리아에 등록된 기업 채용공고를 무단 크롤링해 게재
• 몰래 크롤링을 하는 것을 숨기기 위해 가상사설망(VPN)을 사용

미국에서 나온 최근 판결, 2020-01-28

• US court fully legalized website scraping and technically prohibited it - Parsers

HiQ 와 LinkedIn 의 법정싸움. 이 스크랩핑에 대한 재판은 HiQ 가 CFAA (Computer Fraud and Abuse Act) 를 위반했는지 여부에 대한 싸움.

재판은 CFAA 는 private 에 대한 보호를 위한 것이라고 하고, 그래서 HiQ 가 LinkedIn 의 public profile 에 대한 scrapping 은 CFAA 를 위반한 것이 아니라고 판결함. 그리고 LinkedIn 이 HiQ 의 scrapping 을 막는 것 또한 금지시킴.

References

• [^1]: 대법원 "웹사이트 무단 크롤링은 불법", 2017-09-27

[컴][웹] 큰 회사의 스케일링 자료

pinterest data sharding shard / 핀터레스트 운영 / 핀터레스트 서버 구조 / 아키텍처 / architecture / 대규모 / 대용량 서버 / 대규모 서버 스케일링 / scaling / scalable /system design

큰 회사의 스케일링 자료

핀터레스트 스케일링 자료

• Scaling Pinterest - From 0 to 10s of Billions of Page Views a Month in Two Years - High Scalability -
• Sharding with MySQL : http://www.slideshare.net/mkindahl/mysql-sharding-tools-and-best-practices-for-horizontal-scaling

인스타그램 스케일링 자료

1. Making Instagram.com faster: Part 1 - Instagram Engineering
2. Making Instagram.com faster: Part 2 - Instagram Engineering
3. Making Instagram.com faster: Part 3 — cache first - Instagram Engineering

트위터 자료

1. Twitter Blog > Infrastructure
   

Linked In

• The Play Framework at LinkedIn: Productivity and Performance at Scale - YouTube
  

StackOverflow

• 쿠…sal: [컴][웹] StackOverflow 의 architecture

무신사

• 무신사의 엘라스틱서치 MusE (Musinsa Elasticsearch) — 10분만에 만드는 엘라스틱서치 클러스터 | by HeeJung Jane Hwang | MUSINSA tech | Dec, 2022 | Medium

카카오

• KHP 모니터링과 알림 – 1부 – tech.kakao.com : 대규모 log 들을 druid 로 모아서 활용하는 이야기
• 쿠…sal: [컴] 카카오톡 장애 사건

트래픽이 많은 경우

1. 쿠…sal: [컴][웹] 대한민국의 동접 최고 기록
2. 쿠…sal: [컴][사례] 네크워크 부하가 큰 경우 네트워크 대역폭 사용량

See Also

1. GitHub - InterviewReady/system-design-resources: These are the best resources for System Design on the Internet : 여러회사의 이야기를 모아놨다.
   
2. https://www.devbridge.com/articles/a-6-point-plan-for-implementing-a-scalable-microservices-architecture/
3. https://github.com/lei-hsia/grokking-system-design#system-designs
4. Twitter Blog > Infrastructure
5. What is Facebook's architecture? - Quora
6. 쿠…sal: [컴] JunoDB 의 overview : paypal 의 junoDB
7. 쿠…sal: [컴] netflix 의 Marken : 넷플릭스의 주석시스템 Marken
8. 쿠…sal: [컴] 인프라 참고자표 from gruntwork : 구성도

[컴][보안] 자신의 이메일이 어디에 유출됐는지 확인방법

내 이메일이 어디에 노출 되었는지 확인하는 방법 / email breach 노출 / monitored / expose / breach / 이메일 노출된 곳 검색 방법

자신의 이메일이 어디에 유출됐는지 확인방법

• firefox monitor: https://monitor.firefox.com/

firefox(파이오폭스) 에서 자신의 정보가 유출되었는지를 확인(monitor) 할 수 있는 사이트를 공개했다.

확인을 원하는 email 로 로그인을 하면, 아래처럼 어디에 유출되었는지 알려준다. 자세한 사항을 확인하면, 언제 data 가 유출됐고, 어떻게 하라는 내용등을 알려준다.

See Also

1. https://haveibeenpwned.com/