엣지(Edge)브라우저의 AI 코파일럿(Copilot) 업데이트, 유튜브 동영상 요약, 빙챗(Bing Chat) 플러그 인 제공

AI 코파일럿(Copilot)의 첫 번째 업데이트

마이크로소프트는 AI 기반 코드 완성 도구인 Copilot의 첫해를 기념하여 2023년 12월에 새로운 업데이트를 발표했습니다. 이 업데이트는 코파일럿(Copilot)의 AI 성능을 향상시키고 새로운 기능도 추가하였습니다. 

이번 업데이트는 윈도우10, 윈도우11 모두 포함되며 엣지(Edge)브라우저의 코파일럿(Copilot)을 모두 제공합니다. 

엣지(Edge)브라우저의 코파일럿(Copilot) 업데이트

 

GPT-4 Turbo 지원

코파일럿(Copilot)은 OpenAI의 최신 모델인 GPT-4 Turbo를 지원하는 Bing Deep Search를 제공하게 되었습니다. 이 모델은 더 복잡하고 더 긴 시간 동안 코드 작성, 문서작성 등의 작업을 수행할 수 있도록 GPT-4 Turbo를 사용하여 응답을 생성합니다. 이번 업데이트 출시와 함께 빙(Bing)과 검색, 그리고 엣지(Edge)브라우저의 코파일럿(Copilot)에서 이용할 수 있습니다.  

코파일럿(Copilot), OpenAI의 최신 모델 GPT-4 Turbo 지원

 

새로운 DALL-E 3 모델 지원

코파일럿(Copilot)은 새롭게 업데이트된 DALL-E 3 모델과 함께 작동하여 더 뛰어난 품질과 정확도로 이미지를 생성해 줍니다. 이 기능은 bing.com/create에 접속하거나 코파일럿에게 이미지 생성을 요청함으로써 이용할 수 있습니다. 

 

프롬프트를 작성한 예시 화면을 참고해 주세요. '네일 살롱에서 뼈판을 관리하는 사실적인 스테고사우루스' 이미지를 생성해주세요. 라고 입력했습니다. 아래는 결과입니다. 

좌) DALL-E 3 이전 모델, 우) DALL-E 3 최신 모델

▶  엣지(Edge)브라우저 및 코파일럿(Copilot)에서 이미지 생성하는 방법은 아래 링크를 클릭해서 확인해 주세요.

윈도우 11 23H2 MS 엣지(Edge) 브라우저 AI 신규 기능 소개

 

멀티 모달 검색 지원

Deep Search의 GPT-4의 강력한 기능과 Bing 이미지 검색 및 웹 검색 데이터의 비전을 결합하여 사용자의 검색어에 대한 이미지 이해를 향상시켰습니다. 아래 예시에서 볼 수 있듯이 결과는 매우 놀랍습니다. 기존의 멀티 모달 시스템은 이미지의 내용을 대략적으로 설명할 수 있지만 검색 기반 접근 방식은 정확한 셔틀 이름과 발사 날짜를 알아낼 수 있습니다.    

멀티 모달을 지원하는 코파일럿(Copilot)

 

코드 해석기( Code Interpreter) 지원

코파일럿(Copilot)은 자연어로 프로그램 코드를 작성하고 실행할 수 있는 챗봇입니다. Bing 검색과 웹 데이터뿐만 아니라 자신의 파일도 사용할 수 있습니다. Azure Container Apps에서 안전하게 실행되며, 데이터 과학에 필요한 다양한 도구와 라이브러리를 포함하고 있습니다. 코파일럿(Copilot)은 데이터와 코드를 결합하여 대화하듯이 프로그램 개발을 쉽게 진행할 수 있는 환경을 제공해 줍니다.

프로그램 코드를 쉽게 제공

 

유튜브 동영상 요약정리

이번 엣지(Edge)브라우저의 새로운 코파일럿 기능은 동영상을 간단하게 요약해 줍니다. 유튜브나 다른 동영상 사이트에서 동영상을 재생하면, 코파일럿은 동영상의 내용을 분석하고 주요한 포인트를 텍스트로 보여줍니다. 이렇게 하면 동영상을 모두 시청하지 않아도 필요한 정보를 빠르게 파악할 수 있습니다. 코파일럿은 시간과 노력을 절약하고 동영상으로부터 더 많은 지식을 얻는 데 도움이 됩니다. 

 

▶ 코파일럿의 동영상 요약 기능을 사용하려면 다음과 같은 방법으로 진행할 수 있습니다.

1. 엣지브라우저에서 시청 중인 동영상의 우측 상단에 있는 코파일럿 메뉴를 클릭합니다.
2. 대화 스타일 선택 후 [명령어]를 입력합니다.

제가 좋아하는 유튜브 '83부부' 채널의 19분짜리 영상으로 확인해 보겠습니다.

0엣지(Edge)브라우저의 코파일럿(Copilot) 선택

 

3. '시청하고 있는 동영상을 요약해줘'라고 프롬프트 영역에 입력합니다.
- 코파일럿은 동영상을 분석하고 '83부부'채널의 정보와 타임라인을 함께 제공합니다. 이렇게 하면 사용자는 어떤 채널인지도 알 수 있습니다. 

- 타임라인을 클릭하면 해당 동영상 시간으로 이동하는 기능도 제공하여 보고자 하는 영상을 건너 띠기 할 수 있습니다. 

코파일럿으로 유튜브 영상을 요약

 

4. '시청하고 있는 동영상을 텍스트로 변환해줘'라고 프롬프트 영역에 입력합니다.

- 이렇게 하면 동영상의 오디오를 타임라인과 함께 텍스트로 모두 변환해 줍니다. 

- 이 기능은 뉴스, 교육(인강), 뮤직비디오 등의 긴 영상을 시청하면서 요약정리하고 텍스트로 변환해 주어, 원하는 정보를 쉽게 얻을 수 있습니다. 이렇게 하면 시간과 노력을 절약할 수 있습니다.  

동영상의 오디오를 모두 텍스트로 변환

 

5. 추가질문을 통해 원하는 정보를 확인할 수 있습니다. 

- ' 83부부의 자녀에 대해 알려주세요'라고 질문하면 분석된 영상 내에서 검색하여 정보를 지속적으로 제공합니다.

- 이 방법을 잘 사용하면 영상을 보면서 계속 질문을 하면서 원하는 정보를 수집할 수 있습니다. 

동영상 내 정보를 기준으로 추가질문을 계속 할 수 있습니다.

 

빙챗(Bing Chat) 플러그 인

엣지(Edge)브라우저에서 처음으로 플러그 인이 도입되었습니다. 플러그 인을 사용하면 빙챗(Bing Chat)을 사용할 때 풍부하고 다양한 깊이 있는 답변을 얻을 수 있게 되었습니다. 이로 인해 빙 검색 기능이 확장되어 다양한 기능으로 사용자의 검색 경험을 개선할 수 있습니다.  

빙챗(Bing Chat)의 플러그 인 도입

이 플러그 인은 엣지(Edge)브라우저의 오른쪽 상단에 있는 아이콘을 클릭하면 쉽게 활성화할 수 있습니다. 활성화하면 빙챗(Bing Chat)과 대화할 수 있는 채팅창이 열립니다. 여기서 원하는 질문을 입력하거나 음성으로 말할 수 있습니다. 빙챗(Bing Chat)은 웹 검색, 플러그인 의 다양한 주제에 대해 전문가처럼 답변해 줍니다.  

 

▶ 플러그 인 종류 

1. Search: 뉴스, 멀티미디어, 쇼핑 등을 포함한 웹의 강력한 기능으로 검색 기능 제공 
2. Shop: 세계 최고의 브랜드에서 수백만 개의 제품 검색 제공 
3. OpenTable: 예약에 대한 직접 링크와 함께 레스토랑 추천 정보 제공
4. Klarna: 수천 개의 온라인 상점에서 가격 검색, 비교(미국에서만 사용 가능)
5. Kayak: 항공편, 숙박, 렌터카를 검색하거나 예산 내에서 갈 수 있는 곳을 추천
6. Instacart: 레시피에 대해 물어보고 필요한 재료를 찾은 다음 지역 매장에서 배달받을 수 있는 정보

- Search는 기본적으로 사용함으로 설정되어 있고 사용할 때 최대 3개까지 선택하여 빙챗을 사용할 수 있습니다. 

 

▶ 플러그 인을 사용하여 빙(Bing Chat) 사용하기 

- OpenTable, Kayak, Search 플러그 인을 사용하여 여행 계획표를 짜달라고 해보겠습니다. 

프롬프트에 '겨울 데이트 여행으로 300만원 예산으로 제주도 여행을 가려고 하는데 제주도 전통 맛집과 유명 관광지를 소개해주고 예약할 수 있는 방법과 관광지 요금표, 교통편을 알려주세요'라고 해보겠습니다.

플러그 인을 사용하여 여행계획표 짜기

플러그인을 사용하여 여행계획표를 짜봤습니다. 프롬프트에 질문했더니 OpenTable, Kayak, Search 플러그인이 실행되면서 여행계획표를 짜주는 결과를 얻을 수 있습니다. (이런 방식을 챗GPT 유료 버전과 유사합니다.)

추천된 내용에서 '예약하기' 링크 제공

 

 

여행계획 맛집, 관광지, 여행 결과에서 추천된 내용에는 '예약하러 가기' 링크가 있습니다. 이 링크를 클릭하면 해당 내용의 요금표, 예약 사이트, 맛집 리스트 등을 볼 수 있는 사이트로 이동합니다. 이 기능은 새로 추가된 것으로 포털 검색과 달리 질문만으로 원하는 정보와 링크를 쉽게 얻을 수 있습니다. 

 

결론

엣지(Edge) 브라우저가 업데이트되면서 AI 기능이 강화되어 챗GPT 4.0 Turbo, 고 퀄리티 이미지 생성(DALL-E 3), 유튜브 동영상 요약, 빙챗(Bing Chat)의 플러그 인이 새롭게 추가되었고, 기존의 불편한 점들이 개선되었습니다. 

이제 챗GPT 유료버전을 구매하지 않아도 챗봇과 이미지 생성을 무료로 이용할 수 있고 웹브라우저에 별도의 플러그 인을 설치하지 않아도 유튜브 영상을 요약할 수 있습니다. 빙챗 플러그 인을 사용하면 다양한 정보를 쉽게 얻을 수 있습니다. 이번 업데이트로 엣지 브라우저는 사용자에게 더욱 편리하고 유용한 환경을 제공하게 되었습니다.

 

윈도우 11 23H2 MS 엣지(Edge) 브라우저 AI 신규 기능 소개

▶ 엣지(Edge) 브라우저 신규 기능 소개

윈도우 11 23H2 MS 엣지(Edge) 브라우저 AI 신규 기능 소개

▶ 텍스트 입력으로 노래/음악 만들어주는 엣지(Edge) 코파일럿(Copilot) AI ‘수노(Suno)’ 플러그인/확장 프로그램

텍스트 입력으로 노래/음악 만들어주는 엣지(Edge) 코파일럿(Copilot) AI ‘수노(Suno)’ 플러그인/확

 

윈도우 11 23H2 관련 주요 포스팅 보기

▶ 윈도우 11 23H2 업데이트 총정리, 설치부터 신규 기능 소개까지 모두 포함

윈도우 11 23H2 업데이트 총정리, 설치 방법부터 신규 기능 소개까지 모두 포함

 

※ 포스팅이 도움이 되셨다면 💓공감, 댓글, 광고 부탁 드립니다. ~ 🎉🚀👍🙏